DoNews8月16日消息,8月16日,由深度学习技术及应用国家工程研究中心主办的WAVE SUMMIT深度学习开发者大会2023在北京举行。百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰做了主题演讲。
王海峰首次对外表示,大语言模型具备了理解、生成、逻辑、记忆等人工智能的核心基础能力,为通用人工智能带来曙光。
【资料图】
飞桨开发者数已达800万 模型数超80万
WAVE SUMMIT深度学习开发者大会始于2019年4月。王海峰在首届大会上提出,深度学习具有很强的通用性,并具备标准化、自动化和模块化的工业大生产特征,推动人工智能进入工业大生产阶段。
四年来,深度学习技术和应用的发展充分验证了这一观点。深度学习技术的通用性越来越强,深度学习平台的标准化、自动化和模块化特征越来越显著,而预训练大模型的兴起,使得人工智能应用的深度和广度进一步拓展。人工智能已进入工业大生产阶段。
标准化方面,框架和模型联合优化,多硬件统一适配,应用模式简洁高效,大幅降低人工智能应用门槛;自动化方面,从训练、适配,到推理部署,提升人工智能研发全流程效率;模块化方面,丰富的产业级模型库,支撑人工智能在广泛场景的便捷应用。
据了解,得益于飞桨产业级深度学习开源开放平台和文心大模型的互相促进,飞桨生态愈加繁荣,已凝聚800万开发者,服务22万家企事业单位,基于飞桨创建了80万个模型。
王海峰阐释了飞桨开发者社区AI Studio中文名“星河社区”的隽永含义,“文心加飞桨,翩然赴星河”。和所有的开发者一起,在飞桨和文心的加持下,共建星河社区,共赴通用人工智能的星辰大海。
大语言模型为通用人工智能带来曙光
王海峰表示,人工智能具有多种典型能力,理解、生成、逻辑、记忆是其中的核心基础能力,这四项能力越强,越接近通用人工智能,而大语言模型具备了这四项能力,为通用人工智能带来曙光。
具体而言,人工智能的典型能力如创作、编程、解题、规划等都依赖于理解、生成、逻辑、记忆等核心基础能力,依赖程度有所不同。以解题为例,从读懂题目、解答题目到最后写出答案,需要理解、记忆、逻辑及生成能力的综合运用。
如何获得这些能力呢?以文心一言为例,首先从数万亿数据和数千亿知识中融合学习得到预训练大模型,在此基础上采用有监督精调、人类反馈的强化学习和提示等技术,并具备知识增强、检索增强和对话增强等技术优势。
进一步地,通过多种策略优化数据源及数据分布、基础模型长文建模、多类型多阶段有监督精调、多任务自适应有监督精调、多层次多粒度奖励模型等技术创新,全面提升基础通用能力。
在检索增强和知识增强的基础上,通过知识点增强,提升对世界知识的掌握和运用;通过大规模逻辑数据构建、逻辑知识建模、多粒度语义知识组合以及符号神经网络,提升逻辑能力;通过构建数据、内容、模型和系统安全的全面安全体系,保障大模型的安全性。
效率方面,通过飞桨端到端自适应混合并行训练技术以及压缩、推理、服务部署的协同优化,文心大模型训练速度达到原来的3倍,推理速度达到原来的30多倍。
应用方面,通过数据驱动、提示构建,以及插件增强进行场景适配,协同优化。文心一言已上线百度搜索、览卷文档、E 言易图、说图解画、一镜流影五大插件,使模型具备生成实时准确信息、长文本摘要和问答、数据洞察和图表制作、基于图片的创作和问答、文生视频等能力。插件机制扩展了大模型能力边界,更适应场景需要。王海峰表示,未来百度将与开发者共建插件生态,共享技术创新成果。
以大语言模型为代表的人工智能正在深入千行百业,加速产业升级和经济增长。在这个进程中,技术创新和应用落地形成良性循环,理解、生成、逻辑、记忆等能力持续提升,产业应用的广度和深度持续拓展,大语言模型为通用人工智能带来曙光。
本文源自:iDoNews
标签:
-
健康向未来! 2023年苏州市“医者仁心”年度人物名单揭晓在第六个中国医师节到来之际,8月15日,2023苏州“医者仁心”...
-
腾讯游戏业务营收445亿,手端游日活实现同比增长据腾讯公布2023年第二季度财报显示,游戏业务收入445亿元,其...
-
阿里云魔搭社区上线灵动人像功能阿里云魔搭社区于上周上线灵动人像(LivePortrait)功能。用...
-
腾讯云宣布全面支持Llama2等主流开源模型腾讯云官方消息称,腾讯云TI平台已经全面接入Llama2、Falcon、Dolly、V
-
服务零售额首度被纳入国家统计数据:今年同比增速明显快于商品零售继社会消费品后,服务零售首度被纳入经济运行统计数据,服务...
-
小米MIXFold3折叠屏手机将在中国大陆独家发售小米海外发言人丹尼尔·德贾莱斯今日发推称,小米MIXFold3折...
-
微信视频号单季广告收入破30亿元今日腾讯发布的2023年第二季度财报中,广告收入快速增长,收...
-
东方甄选带货北京特产,5分钟售罄超1.8万单平谷大桃昨日下午东方甄选在北京平谷区开播,销售平谷大桃以及北京老...
-
截至8月16日,中国甲醇港口库存总量环比增加6.21万吨至96.46万吨金十期货8月16日讯,据隆众资讯,截至8月16日,中国甲醇港口库存总量在96.46万吨,较上周增加6.21万吨,其中,华东地区累库,库存增加5.9万吨;华南地区累库,库存增加0.31万吨截至8月16日,中国甲醇港口库存总量环比增加6 21万吨至96 4...
-
1688修订《安心购商家服务协议》8月16日消息,因1688安心购·定制版的服务范围扩大为1688平台...
- 智联世界,元生无界!快手虚拟人IP亮相2022人工智能大会
2022-09-07 10:47:54
- 机器人界“奥林匹克”!2022世界机器人大会8月18日举行
2022-08-10 09:58:58
- 2025年全球人口将达到90亿!机器人将在农业领域大显身手
2022-07-14 09:41:10
- 中科院院士蒋华良:AI+分子模拟与药物研发将大有可为
2022-07-14 09:37:00
- “千垛之城荷你有约” 2022兴化市荷文化旅游节正式开幕
2022-07-07 09:28:34