首个图文混合创作大模型“书生·浦语灵笔”正式开源

近日，上海人工智能实验室（上海AI实验室）推出首个图文混合创作大模型书生·浦语灵笔（InternLM-XComposer，以下简称“浦语灵笔”），依托强大的多模态性能，解锁“一键生成”图文混合文章的创作能力，为大模型落地应用提供更多可能。目前，浦语灵笔已开源其中的智能创作和对话（InternLM-XComposer-7B）及多任务预训练（InternLM-XComposer-VL-7B）版本，并提供免费商用。

据悉，上海人工智能实验室自今年7月以来就陆续开源了书生·浦语大语言模型的7B（InterLM-7B）及20B（InternLM-20B）版本，为业界提供了完整的大模型研发与应用基座，以及全链条工具体系。

据介绍，浦语灵笔能够进行流利的中英文图文对话，准确理解图像内容。在多模态图文对话的基础上，浦语灵笔更是解锁了图文并茂文章创作的全新能力。

浦语灵笔为图文文章创作设计了“三步走”的算法流程：

理解用户指令，创作符合主题要求的长文章；

智能分析文章，模型自动规划插图的理想位置，并生成所需图像的内容要求；

多层次智能筛选，利用多模态大模型的图像理解能力，从图库中锁定最完美的图片。

目前，浦语灵笔已支持科普文稿、营销广告、新闻稿件、影视评论、生活指南等类型文章的图文并茂生成，并将逐渐开放更多能力，适应更多样化任务需求。