百度王海峰：文心大模型4.0推理性能提升50倍

站长之家（ChinaZ.com）10月30日 消息:在近日的第二十届中国计算机大会上，百度首席技术官王海峰表示，百度在3月16日发布知识增强大语言模型文心一言，目前文心一言的基础模型已迭代到文心大模型4.0版本。知识增强大语言模型从数万亿数据和数千亿知识中融合学习，得到预训练大模型，在此基础上采用有监督精调、人类反馈强化学习、提示等技术，具备知识增强、检索增强和对话增强的技术优势。

王海峰表示，基于更强平台、更优数据、更好算法，我们训练出规模更大、效果更好的文心大模型4.0。通过飞桨与文心的协同优化，模型周均训练有效率超过98%，训练算法效率提升3.6倍，推理性能提升50倍。文心4.0的理解、生成、逻辑、记忆四大能力显著提升，其中理解和生成能力的提升幅度相近，而逻辑和记忆能力的提升则更大，逻辑的提升幅度达到理解的近3倍，记忆的提升幅度也达到了理解的2倍多。

公开数据显示，文心一言面向全社会开放一个多月，用户规模达到4500万，开发者5.4万，场景4300个，应用825个，插件超过500个。飞桨和文心生态愈加繁荣，已凝聚800万开发者，服务22万家企事业单位，基于飞桨创建了80万个模型。