文心一言可成为工作中的“超级助理”！百度解读文心大模型3.5版核心技术：推理速度提升30倍|文心_新浪财经

转自：劳动报

2023世界人工智能大会（WAIC）上，百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰解读文心大模型3.5版核心技术，发布飞桨生态最新进展，阐述人工智能产业模式，为人工智能技术及产业最新发声。

王海峰透露，截至目前飞桨已凝聚750万名开发者，这也是百度2023年以来首次对外披露飞桨生态最新数据。据悉，百度自2019年3月文心大模型发布1.0版后，历经四年技术深耕和研发迭代，现已升级到文心大模型3.5。王海峰表示，文心大模型3.5效果、功能、性能全面提升，实现了基础模型升级、精调技术创新、知识点增强、逻辑推理增强等，模型效果提升50%，训练速度提升2倍，推理速度提升30倍。

今年3月，百度在全球大型科技公司中第一个发布了大语言模型文心一言。文心一言是知识增强的大语言模型，首先从数万亿数据和数千亿知识中融合学习得到预训练大模型，在此基础上采用有监督精调、人类反馈的强化学习和提示等技术，并具备知识增强、检索增强和对话增强等技术优势。

王海峰解读了文心大模型3.5的核心技术创新，在基础模型训练上，采用了飞桨最先进的自适应混合并行训练技术及混合精度计算策略，并采用多种策略优化数据源及数据分布，加快了模型迭代速度，显著提升了模型效果和安全性。同时，创新了多类型多阶段有监督精调、多层次多粒度奖励模型、多损失函数混合优化策略、双飞轮结合的模型优化等技术，进一步提升模型效果及场景适配能力。

在知识增强和检索增强基础上，文心大模型3.5提出了“知识点增强技术”。在推理方面，通过大规模逻辑数据构建、逻辑知识建模、多粒度语义知识组合以及符号神经网络技术，提升文心大模型3.5在逻辑推理、数学计算及代码生成等任务上的表现。

据悉，文心大模型3.5新增了插件机制，文心一言已经于6月17日对外发布官方插件百度搜索和ChatFile。百度搜索是默认的内置插件，使得文心一言具备生成实时准确信息的能力。ChatFile是长文本摘要和问答插件，支持超长文本输入。王海峰表示，文心一言将发布更多优质的百度官方和第三方插件，让用户能够更好地应用文心大模型，同时也将逐步开放插件生态，帮助开发者基于文心大模型打造自己的应用。

现场王海峰展现了文心一言在办公、会议、编码等场景的应用，文心一言成为工作中的“超级助理”，帮助总结工作沟通要点，实时记录会议内容，形成会议议题、摘要及总结等关键信息，可以通过各类插件完成指令任务，包括查询日程、创建会议、设置待办、申请休假等，也可以在工程师编码过程中自动推荐和生成代码。据悉，目前这些功能已通过智能工作平台“如流”应用于百度的工作流程中，帮助提升工作效率，提高决策质量。

头图：王海峰解读文心大模型3.5的核心技术创新。百度供图