点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:文心大模型新增11个大模型 构建产业大模型体系
首页> 科技频道> 人工智能 > 正文

文心大模型新增11个大模型 构建产业大模型体系

来源:光明网2022-12-02 16:34

  11月30日,由深度学习技术与应用国家工程研究中心主办、百度飞桨承办的WAVE SUMMIT+2022深度学习开发者峰会如期举行。百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜带来了文心大模型的最新升级,包括新增11个大模型,大模型总量增至36个,构建起业界规模最大的产业大模型体系,并通过大模型工具与平台的升级和文心一格、文心百中等基于大模型技术的产品应用,进一步降低大模型产业化门槛,让更多企业和开发者步入AI应用的新阶段。

文心大模型新增11个大模型 构建产业大模型体系

百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜

  文心大模型全景图刷新,构建产业大模型体系

  近年来,大模型的出现,为人工智能进一步发展带来新机遇。百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰在峰会上表示,深度学习平台加大模型,贯通AI全产业链,夯实产业智能化基座,将进一步加速智能化升级。

  百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜表示,产业级深度学习平台飞桨和产业级知识增强大模型文心,相互促进、共同发展,已然成为产业智能化的基础性平台。文心大模型持续围绕“产业级”、“知识增强”两大特性,延续“降低应用门槛”的发展路线,进行创新突破。在此次峰会上,文心大模型全景图再一次迎来全面升级。

文心大模型新增11个大模型 构建产业大模型体系

文心大模型全景图

  在模型层,文心大模型一次性发布11个大模型,涵盖基础大模型、任务大模型、行业大模型的三级体系,全面满足产业应用需求;在工具与平台层,全面升级大模型开发套件、文心API和提供全流程开箱即用大模型能力的EasyDL和BML开发平台,全方位降低应用门槛;新增产品与社区层,包括AI艺术与辅助创作平台“文心一格”、产业级搜索系统“文心百中”和旸谷社区,让更多人零距离感受到最先进的AI大模型技术带来的新体验。

  作为推进大模型在行业深度应用的关键举措,本次峰会上,百度联合深圳燃气、吉利、泰康保险、TCL、上海辞书出版社重磅新发5个行业大模型:深燃-百度·文心、吉利-百度·文心、泰康-百度·文心、TCL-百度·文心和辞海-百度·文心。吴甜表示,文心行业大模型是百度与行业头部企业、机构联合探索出的行之有效的大模型产业落地方式,让大模型在实际应用场景中“不但能用还便捷好用”。截至目前,文心已累计发布11个行业大模型,涵盖电力、燃气、金融、航天、传媒、城市、影视、制造、社科等领域,加速推动行业的智能化转型升级。

文心大模型新增11个大模型 构建产业大模型体系

文心行业大模型家族

  除行业大模型外,此次还发布了5个基础大模型和1个任务大模型,包括:知识增强轻量级大模型ERNIE 3.0 Tiny、跨模态理解大模型ERNIE ViL 2.0、跨模态生成大模型ERNIE ViLG 2.0、文档智能大模型 ERNIE-Layout、单序列蛋白质结构预测大模型HelixFold-Single和代码大模型 ERNIE-Code。

  其中,知识增强轻量级大模型ERNIE 3.0 Tiny是以ERNIE 3.0千亿参数大模型为师,通过多任务知识蒸馏手段将千亿多任务大模型的所学迁移至轻量级模型中,训练了10亿级、亿级、千万级不同体量大小的轻量级大模型。ERNIE 3.0 Tiny具备非常优秀的泛化能力,同时相对于超大参数模型,推理速度提升数十倍到百倍,能够显著降低超大参数模型落地的成本。ERNIE 3.0 Tiny和ERNIE ViLG大模型将上线“鹏城云脑”,在云脑上精调训练、部署服务,进一步降低大模型开发和应用的门槛。

  文心大模型工具平台全面升级,全流程支撑大模型开箱即用

  为了让开发者更加方便、快速地使用大模型的最新能力,文心大模型工具与平台进行了全面更新。吴甜介绍,在工具方面,文心大模型开发套件全面升级,发布行业大模型定制工具,同时提供更加完备的场景化建模工具、更为丰富的模型精调工具,以及大模型可信学习工具,让大模型开发训练更加灵活高效;文心API服务支持多种模型尺寸的精调,体验专区提供更多可体验能力,同时基于大规模集群算力分布式推理加速能力,可满足大规模高性能产业级调用。

  大模型的开发、训练、推理部署的门槛是非常高的。为了更好地支持大模型应用落地,飞桨发布了端到端大模型开发套件PaddleFleetX。针对大模型的训练挑战,PaddleFleetX基于框架自适应分布式训练能力,根据模型和硬件平台的特点,自动感知硬件特性,支持在异构硬件上进行自适应并行训练。同时,充分发挥飞桨动转静能力优势,进行训练加速,实现端到端的极致性能优化。训练过程还支持弹性容错训练,大幅提升训练过程的鲁棒性。针对大模型推理部署的挑战,PaddleFleetX提供了大小模型无缝联动的能力,以满足大模型推理对性能的极致要求。同时,PaddleFleetX支持自适应分布式推理技术,真正做到分布式策略的训推一体,大可支持超大模型的服务化部署,小可协同极致小型化策略,支持端侧轻量化部署。

  飞桨企业版AI开发平台EasyDL和BML也围绕大模型的技术应用进行了全新升级,发布了提供全流程开箱即用的大模型平台能力,加速大模型的产业化落地。

文心大模型新增11个大模型 构建产业大模型体系

飞桨企业版全面升级

  据百度AI平台部总监忻舟介绍,在EasyDL零门槛AI开发平台预置了各种通用任务场景大模型,可以让AI应用开发者获得更好的模型训练效果。在BML全功能AI开发平台上,端到端的并行训练优化方案大幅提升了大模型训练性能;预置的基于大模型的场景模型生产线,让开发者在主流的场景开箱即用,快速构建大模型场景应用;新增的自动化推理服务监控能力,及时感知变化和问题,驱动反馈和迭代,让AI应用的高效迭代闭环。

  AI作画产品“文心一格”推出三大新功能,产业级搜索系统“文心百中”首次亮相

  为了进一步降低应用门槛,让广泛的用户可以使用文心大模型,百度发布和升级2个由大模型为核心驱动的应用产品。

  首先是AI艺术与辅助创作平台“文心一格”。在文心一格上,用户仅需输入文字创想,即可完成别具一格的画作,受到用户广泛好评。值得一提的是,文心一格深谙中国文化精髓,所创画作尽显中国风骨。本次峰会上,吴甜发布了文心一格的三大全新功能:支持以图生图、支持可控的增删改等图片二次编辑和一键生成视频,进一步激发创造力,降低内容生产成本。

  继文心一格之后,以文心大模型为核心驱动的第二个产品——产业级搜索系统“文心百中”在峰会上发布,该产品由百度搜索与文心大模型联合研制,命名寓意搜索结果精准,百发百中。

文心大模型新增11个大模型 构建产业大模型体系

产业级搜索系统文心百中

  文心百中具有三大特性:极简、强大、高效。文心百中采用纯神经搜索架构加数据驱动搜索效果优化策略设计而成,应用起来极其简便,仅需三步即可在线完成搜索引擎的构建;文心百中拥有强大的语义理解能力,相比传统模型实现了质的提升,已在多个场景展现惊艳的搜索效果;文心百中具备搜索系统从0到1的高效建设能力,相比传统搜索系统可减少人力成本90%以上;同时,基于小样本学习能力极强的文心大模型,文心百中仅需少量的数据,即可实现不同行业的搜索效果优化,十分高效。

  文心大模型与飞桨共享生态,围绕“产业级”和“知识增强”两大特色,持续构建适合产业应用的模型体系。未来,将有越来越多的企业和开发者通过大模型加深度学习平台的模式,步入AI应用的新阶段,进一步加速产业智能化升级。(柯岩)

[ 责编:涂子怡 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 中法人文合作发展论坛在巴黎举行。

  • “五一”小长假旅游消费旺。

独家策划

推荐阅读
近年来,国产科幻影视剧《流浪地球2》和《三体》火热“出圈”,获得全球关注。
2024-04-30 03:05
酚醛树脂是人类历史上第一种人工合成塑料,自诞生以来已经历了一个世纪。
2024-04-30 03:05
近日,云南农业大学盛军、田洋教授课题组突破核桃油抗氧化难题,研发出替代植脂末的核桃植物基奶粉,并实现成果转化和应用,相关研究成果在国际期刊《食品工程学报》发表。
2024-04-30 03:05
有一个名字,总是让人心生自豪——广袤大地纵横驰骋,“流动的中国”以最直观的方式,将“中国速度”呈现给世界。
2024-04-30 03:05
在2024中关村论坛年会“人工智能主题日”活动现场,多项人工智能领域前沿技术、数据要素、生态培育、产教融合、场景应用、监管治理等多方面成果精彩亮相,百余位人工智能领域专家围绕大模型、具身智能、可信AI等国内外前沿热点话题展开讨论。
2024-04-30 03:05
光明日报教育周刊近期推出的《科学教育提质正当时》系列报道,从师资培养、课程设置、资源建设等多方面,对如何更好进行中小学科学教育展开了持续讨论,并提出了一系列推动科学教育发展的有效建议,在科学界、科学教育界引发热议。
2024-04-30 03:30
“中国共有独角兽企业369家。《中国独角兽企业发展报告(2024年)》由中关村独角兽企业发展联盟联合毕马威企业咨询(中国)有限公司、长城战略咨询、北京方迪经济发展研究院、清华大学中国科技政策研究中心共同发布。
2024-04-29 10:09
截至目前,神舟十七号航天员乘组已完成全部既定任务,将于4月30日乘坐神舟十七号载人飞船返回东风着陆场。
2024-04-29 10:07
2024年3月5日,习近平总书记在参加十四届全国人大二次会议江苏代表团审议时强调,要牢牢把握高质量发展这个首要任务,因地制宜发展新质生产力。 以创新为核心,通过技术创新、管理创新和模式创新,提升生产力整体水平,推动航空产业加快发展。
2024-04-29 10:06
以前,铸钛大炉坩埚容易损坏,需要每月更换一次,公司每年需要投入不少资金购买新坩埚。我和设备专家一起夜以继日地攻关,终于编制出了一套新的铸钛炉熔炼操作法,提高了坩埚使用率,每年可节约坩埚费用50万元左右。
2024-04-29 10:05
2024成都世园会开幕以来,邛崃分会场龙门山生物多样性博览园迎来游客参观热。 借着成都世园会的契机,成都梳理整合龙门山生物多样性资源,规划建设了占地1172亩的龙门山生物多样性博览园,无边界地呈现龙门山生物多样性。
2024-04-29 10:04
令张治国兴奋的是,武王墩一号墓椁室盖板上已发现和采集墨书文字100多句、近千字,是典型的楚系文字。“对于南方潮湿环境下考古出土的丝绸保护而言,从饱水到干燥的过程,可以说是生死攸关。
2024-04-28 10:23
对此,《指导意见》明确了依法合规管理数据资产、明晰数据资产权责关系、完善数据资产相关标准、加强数据资产使用管理、稳妥推动数据资产开发利用等12方面主要任务。该负责人表示,为加强数字资产管理,《指导意见》突出以下基本原则:  坚持确保安全与合规利用相结合。
2024-04-28 10:19
为落实碳达峰碳中和目标,我国将应对气候变化作为国家战略,纳入生态文明建设整体布局和经济社会发展全局,加强顶层设计。
2024-04-28 10:17
复旦大学邯郸校区的一个小院里,藏着一件“镇院神器”——上海电子束离子阱装置。
2024-04-28 10:04
4月19日,元阳县沙拉托乡松树寨村的村民在哈尼梯田开展春耕播种。(张艳 摄)  在元阳县沙拉托乡的哈尼梯田缓冲区,当地举行“开秧门”活动,村民们在田间地头祈福,他们载歌载舞,迎接春耕的到来。
2024-04-28 10:03
研究人员表示,马岭河小苦荬的发现,表明兴义世界地质公园具有丰富的生物多样性,值得开展进一步系统性的调查研究。
2024-04-28 09:59
从1999年起,有着“神箭”称号的长二F火箭全程参与了中国载人航天工程“三步走”战略的每一步。它用100%的成功率,为航天员搭建出一条安全“天梯”。
2024-04-26 09:33
近期,人工智能(AI)+机器人赛道广受关注。尤翔宇表示,梳理人形机器人产业技术发展脉络,主要有底层硬件、运动控制和具身智能3条路线。优必选相关负责人表示,未来,公司将聚焦人形机器人的三大应用场景,包括工业制造、商用服务和家庭陪伴。
2024-04-26 09:41
加载更多