关于ZAKER 一起剪 合作 加入
ZAKER新闻 2021-12-08

百度 CTO 王海峰首度公开产业级知识增强大模型

12 月 8 日,鹏城实验室与百度联合召开发布会,正式发布双方共同研发的知识增强千亿大模型——鹏城 - 百度 · 文心。

该模型参数规模达到 2600 亿,是目前全球最大中文单体模型,也是全球首个知识增强千亿大模型,已在机器阅读理解、文本分类、语义相似度计算等 60 多项任务上取得目前行业最好效果。

中国工程院院士、鹏城实验室主任高文(左),百度首席技术官王海峰联合发布鹏城 - 百度 · 文心

鹏城 - 百度 · 文心成功发布的背后,得益于鹏城实验室的算力系统 " 鹏城云脑Ⅱ " 和百度飞桨深度学习平台的联手,解决了超大模型训练的多个公认技术难题。

" 鹏城云脑Ⅱ " 是国产自主的首个 E 级 AI 算力平台,曾在多个国际性能测试上获得冠军。飞桨是国内首个自主研发的深度学习开源开放平台,端到端自适应分布式训练框架和多硬件支持下,确保鹏城 - 百度 · 文心千亿大模型得以高效、稳定地训练。

百度首席技术官王海峰介绍称,百度知识增强大模型从大规模知识和海量数据中融合学习,效率更高,效果更好,具有良好的可解释性。

从 2019 年 3 月发布文心 ERNIE 1.0,到最新的产业级知识增强大模型文心全景图,既包含基础通用的大模型,也包含面向重点领域、重点任务的大模型,以及丰富的工具与平台,有助于促进技术创新和产业发展。

另一方面,鹏城实验室与百度成立了鹏城 - 百度自然语言处理联合实验室,在自然语言处理前沿研究和创新应用方面协同攻关。本次联合发布的鹏城 - 百度 · 文心将进一步解决 AI 技术在产业应用中缺乏领域和场景化数据等难题。

目前百度文心通过百度飞桨平台陆续对外开源开放,并已大规模应用于百度搜索、信息流、智能音箱等互联网产品。

中国工程院院士、鹏城实验室主任高文表示,预训练模型是非常重要的工具,可以在泛科学、产业领域辅助进行人工智能的赋能,这对科学创新、社会发展都有着重要的意义。

从宏观角度而言,从 AI 核心技术到 AI 基础平台,从技术创新到实践落地再到开放生态,过去数年以百度为代表的 AI 企业正不断降低 AI 技术开发和应用的门槛,为各行各业提供赋能。

ZAKER 新闻出品

文 / 曾宪天

以上内容由"ZAKER新闻"上传发布 查看原文
一起剪

一起剪

ZAKER旗下免费视频剪辑工具

一起剪

相关阅读

最新评论

没有更多评论了
财经新闻

财经新闻

财富解码 纵横投资

订阅

觉得文章不错,微信扫描分享好友

扫码分享

热门推荐

查看更多内容

原创精品

查看更多内容