×
加载中...
王海峰揭秘文心大模型4.0,训练算法效率提升3.6倍
jyx 鞭牛士 2023-10-30 13:40

鞭牛士 10月30日消息,第二十届中国计算机大会(CNCC2023)在辽宁沈阳举办。大会上,百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰在会上解读文心大模型最新技术,阐述大模型产业模式。据了解,自文心一言3月发布至今,文心大模型4.0训练算法效率提升3.6倍,周均训练有效率超过98%,推理性能提升50倍。


图片


据悉,百度在3月16日发布知识增强大语言模型文心一言,目前文心一言的基础模型已迭代到文心大模型4.0版本。王海峰表示,基于更强平台、更优数据、更好算法,我们训练出规模更大、效果更好的文心大模型4.0。通过飞桨与文心的协同优化,模型周均训练有效率超过98%,训练算法效率提升3.6倍,推理性能提升50倍。文心4.0的理解、生成、逻辑、记忆四大能力显著提升,其中理解和生成能力的提升幅度相近,而逻辑和记忆能力的提升则更大,逻辑的提升幅度达到理解的近3倍,记忆的提升幅度也达到了理解的2倍多。

扫码下载app 最新资讯实时掌握