点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:文心大模型新增11个大模型 构建产业大模型体系
首页> 科技频道> 人工智能 > 正文

文心大模型新增11个大模型 构建产业大模型体系

来源:光明网2022-12-02 16:34

  11月30日,由深度学习技术与应用国家工程研究中心主办、百度飞桨承办的WAVE SUMMIT+2022深度学习开发者峰会如期举行。百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜带来了文心大模型的最新升级,包括新增11个大模型,大模型总量增至36个,构建起业界规模最大的产业大模型体系,并通过大模型工具与平台的升级和文心一格、文心百中等基于大模型技术的产品应用,进一步降低大模型产业化门槛,让更多企业和开发者步入AI应用的新阶段。

文心大模型新增11个大模型 构建产业大模型体系

百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜

  文心大模型全景图刷新,构建产业大模型体系

  近年来,大模型的出现,为人工智能进一步发展带来新机遇。百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰在峰会上表示,深度学习平台加大模型,贯通AI全产业链,夯实产业智能化基座,将进一步加速智能化升级。

  百度集团副总裁、深度学习技术及应用国家工程研究中心副主任吴甜表示,产业级深度学习平台飞桨和产业级知识增强大模型文心,相互促进、共同发展,已然成为产业智能化的基础性平台。文心大模型持续围绕“产业级”、“知识增强”两大特性,延续“降低应用门槛”的发展路线,进行创新突破。在此次峰会上,文心大模型全景图再一次迎来全面升级。

文心大模型新增11个大模型 构建产业大模型体系

文心大模型全景图

  在模型层,文心大模型一次性发布11个大模型,涵盖基础大模型、任务大模型、行业大模型的三级体系,全面满足产业应用需求;在工具与平台层,全面升级大模型开发套件、文心API和提供全流程开箱即用大模型能力的EasyDL和BML开发平台,全方位降低应用门槛;新增产品与社区层,包括AI艺术与辅助创作平台“文心一格”、产业级搜索系统“文心百中”和旸谷社区,让更多人零距离感受到最先进的AI大模型技术带来的新体验。

  作为推进大模型在行业深度应用的关键举措,本次峰会上,百度联合深圳燃气、吉利、泰康保险、TCL、上海辞书出版社重磅新发5个行业大模型:深燃-百度·文心、吉利-百度·文心、泰康-百度·文心、TCL-百度·文心和辞海-百度·文心。吴甜表示,文心行业大模型是百度与行业头部企业、机构联合探索出的行之有效的大模型产业落地方式,让大模型在实际应用场景中“不但能用还便捷好用”。截至目前,文心已累计发布11个行业大模型,涵盖电力、燃气、金融、航天、传媒、城市、影视、制造、社科等领域,加速推动行业的智能化转型升级。

文心大模型新增11个大模型 构建产业大模型体系

文心行业大模型家族

  除行业大模型外,此次还发布了5个基础大模型和1个任务大模型,包括:知识增强轻量级大模型ERNIE 3.0 Tiny、跨模态理解大模型ERNIE ViL 2.0、跨模态生成大模型ERNIE ViLG 2.0、文档智能大模型 ERNIE-Layout、单序列蛋白质结构预测大模型HelixFold-Single和代码大模型 ERNIE-Code。

  其中,知识增强轻量级大模型ERNIE 3.0 Tiny是以ERNIE 3.0千亿参数大模型为师,通过多任务知识蒸馏手段将千亿多任务大模型的所学迁移至轻量级模型中,训练了10亿级、亿级、千万级不同体量大小的轻量级大模型。ERNIE 3.0 Tiny具备非常优秀的泛化能力,同时相对于超大参数模型,推理速度提升数十倍到百倍,能够显著降低超大参数模型落地的成本。ERNIE 3.0 Tiny和ERNIE ViLG大模型将上线“鹏城云脑”,在云脑上精调训练、部署服务,进一步降低大模型开发和应用的门槛。

  文心大模型工具平台全面升级,全流程支撑大模型开箱即用

  为了让开发者更加方便、快速地使用大模型的最新能力,文心大模型工具与平台进行了全面更新。吴甜介绍,在工具方面,文心大模型开发套件全面升级,发布行业大模型定制工具,同时提供更加完备的场景化建模工具、更为丰富的模型精调工具,以及大模型可信学习工具,让大模型开发训练更加灵活高效;文心API服务支持多种模型尺寸的精调,体验专区提供更多可体验能力,同时基于大规模集群算力分布式推理加速能力,可满足大规模高性能产业级调用。

  大模型的开发、训练、推理部署的门槛是非常高的。为了更好地支持大模型应用落地,飞桨发布了端到端大模型开发套件PaddleFleetX。针对大模型的训练挑战,PaddleFleetX基于框架自适应分布式训练能力,根据模型和硬件平台的特点,自动感知硬件特性,支持在异构硬件上进行自适应并行训练。同时,充分发挥飞桨动转静能力优势,进行训练加速,实现端到端的极致性能优化。训练过程还支持弹性容错训练,大幅提升训练过程的鲁棒性。针对大模型推理部署的挑战,PaddleFleetX提供了大小模型无缝联动的能力,以满足大模型推理对性能的极致要求。同时,PaddleFleetX支持自适应分布式推理技术,真正做到分布式策略的训推一体,大可支持超大模型的服务化部署,小可协同极致小型化策略,支持端侧轻量化部署。

  飞桨企业版AI开发平台EasyDL和BML也围绕大模型的技术应用进行了全新升级,发布了提供全流程开箱即用的大模型平台能力,加速大模型的产业化落地。

文心大模型新增11个大模型 构建产业大模型体系

飞桨企业版全面升级

  据百度AI平台部总监忻舟介绍,在EasyDL零门槛AI开发平台预置了各种通用任务场景大模型,可以让AI应用开发者获得更好的模型训练效果。在BML全功能AI开发平台上,端到端的并行训练优化方案大幅提升了大模型训练性能;预置的基于大模型的场景模型生产线,让开发者在主流的场景开箱即用,快速构建大模型场景应用;新增的自动化推理服务监控能力,及时感知变化和问题,驱动反馈和迭代,让AI应用的高效迭代闭环。

  AI作画产品“文心一格”推出三大新功能,产业级搜索系统“文心百中”首次亮相

  为了进一步降低应用门槛,让广泛的用户可以使用文心大模型,百度发布和升级2个由大模型为核心驱动的应用产品。

  首先是AI艺术与辅助创作平台“文心一格”。在文心一格上,用户仅需输入文字创想,即可完成别具一格的画作,受到用户广泛好评。值得一提的是,文心一格深谙中国文化精髓,所创画作尽显中国风骨。本次峰会上,吴甜发布了文心一格的三大全新功能:支持以图生图、支持可控的增删改等图片二次编辑和一键生成视频,进一步激发创造力,降低内容生产成本。

  继文心一格之后,以文心大模型为核心驱动的第二个产品——产业级搜索系统“文心百中”在峰会上发布,该产品由百度搜索与文心大模型联合研制,命名寓意搜索结果精准,百发百中。

文心大模型新增11个大模型 构建产业大模型体系

产业级搜索系统文心百中

  文心百中具有三大特性:极简、强大、高效。文心百中采用纯神经搜索架构加数据驱动搜索效果优化策略设计而成,应用起来极其简便,仅需三步即可在线完成搜索引擎的构建;文心百中拥有强大的语义理解能力,相比传统模型实现了质的提升,已在多个场景展现惊艳的搜索效果;文心百中具备搜索系统从0到1的高效建设能力,相比传统搜索系统可减少人力成本90%以上;同时,基于小样本学习能力极强的文心大模型,文心百中仅需少量的数据,即可实现不同行业的搜索效果优化,十分高效。

  文心大模型与飞桨共享生态,围绕“产业级”和“知识增强”两大特色,持续构建适合产业应用的模型体系。未来,将有越来越多的企业和开发者通过大模型加深度学习平台的模式,步入AI应用的新阶段,进一步加速产业智能化升级。(柯岩)

[ 责编:涂子怡 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 习近平同巴西总统卢拉共同签署联合声明

  • 习近平同巴西总统卢拉共见记者

独家策划

推荐阅读
记者20日从中国航天科技集团一院获悉,该院抓总研制的长征十号系列火箭近日成功完成整流罩分离试验,标志着该系列火箭初样研制又迈出了坚实一步。
2024-11-21 09:14
作为战略性新兴产业,低空经济产业链条长,涵盖航空器研发与制造、低空飞行基础设施建设与运营、飞行服务与保障等产业,对构建现代产业体系具有重要作用。
2024-11-21 09:12
工业革命改变了世界面貌,为人类生产生活带来深远影响。当今世界,人工智能迅猛发展,推动人类社会深度变革。在此过程中,电力行业也在逐步向数字化和智能化转型。
2024-11-21 09:10
数据显示,2023年我国低空经济规模超5000亿元,增速超过33%,2030年有望达到2万亿元。2024年以来,全国已有超过26个省(区、市)将低空经济写进政府工作报告。
2024-11-21 09:09
日前,国际学术期刊《自然·通讯》在线刊发江西省农业科学院原院长颜龙安院士团队联合河北大学杜会龙教授团队的研究成果:首个稻属最全超级泛基因组图谱绘制成功。
2024-11-21 09:09
全海深光电缆绞车系统“海威GD11000”,日前随广州海洋地质调查局“海洋地质二号”船在我国南海完成了首个航次的深海调查任务。
2024-11-20 09:21
近日,中国科学院兰州化学物理研究所研究员何林团队与武汉大学教授雷爱文团队合作,在催化羰基化领域取得重要进展——成功利用一氧化碳或二氧化碳替代剧毒光气,高效合成含氮羰基化合物非对称脲。。
2024-11-20 09:24
这种菌能够迅速分解番茄、辣椒、娃娃菜等多种蔬菜尾菜,并具有促进作物生长、拮抗土传病原菌等功能特性。在此基础上,课题组进一步研发了“蔬菜尾菜+快速腐解菌+有机肥+功能菌”四位一体的原位还田技术。
2024-11-20 09:20
11月18日,在沪渝蓉高铁全线控制性咽喉工程崇太长江隧道内,我国盾构隧道智能建造V2.0技术体系正式在“领航号”盾构机成功应用
2024-11-20 09:19
19日,四川、重庆、贵州三省市同步首发动力型锂电池试运专列,这是我国铁路首次大规模试运输动力锂电池,将助力国产动力锂电池产品的全球流通。
2024-11-20 09:13
近年来,北京市延庆区大力发展低空经济,2023年相关产业产值达23.3亿元。天气渐冷,北京八达岭长城脚下,中关村延庆园内的低空经济产业园依旧热火朝天,一派繁忙景象。
2024-11-19 09:50
据最新一期《自然·化学》杂志报道,美国加州大学圣迭戈分校团队在最新研究中给出了一个涉及两种简单分子间反应的精妙解释。
2024-11-19 09:47
利用样地观测数据、空间分析和树线模型模拟,中国科学院青藏高原研究所研究员梁尔源等人系统分析了尼泊尔珠峰国家公园和安纳普纳保护区混交林树线,揭示了糙皮桦和喜马拉雅冷杉的种群更新动态和树线位置变化。
2024-11-19 09:46
机器人服务员、咖啡师、宠物……各种机器人让人目不暇接。自动载人飞行器,无人机、无人车、无人船……智能驾驶技术遍布“海陆空”。11月14日至16日,第二十六届中国国际高新技术成果交易会在广东深圳举行。
2024-11-19 04:55
近日,记者从湖北省神农架林区林业管理局野保科开展的陆生野生脊椎类动物普查中获悉,神农架现有陆生野生脊椎类动物710种,比原来的493种增加217种。
2024-11-19 05:00
北京时间11月15日23时13分,天舟八号货运飞船在文昌航天发射场由长征七号遥九运载火箭成功发射。自中国空间站建造以来,空间应用系统已在轨开展了百余项科学实验和应用试验,阶段性研究成果持续产出。
2024-11-18 10:27
中国科学院生物物理研究所王晓群研究员课题组、广东省智能科学与技术研究院张旭院士课题组和北京师范大学吴倩教授课题组合作,深入解析了人类背根神经节(DRG)发育过程中调控多种感觉神经元分化的多层级信号通路,并成功构建了人类DRG类器官(hDRGOs)模型。通过比较人类和小鼠的感觉神经元发育,研究人员发现两者在发育进程、基因表达谱和细胞亚型上存在差异。
2024-11-18 10:24
党的二十届三中全会提出,发展通用航空和低空经济。航空航天民航高校应发挥特色优势,形成“航空+”的多元化低空经济专业型人才培养模式,促进低空经济科技链、人才链、产业链的有机衔接。
2024-11-18 10:21
中北大学极端环境特种传感与测试创新研究团队成员正在围绕近期发射任务进行产品研发。日前,第28届“中国青年五四奖章”评选揭晓,中北大学极端环境特种传感与测试创新研究团队获“中国青年五四奖章集体”荣誉称号。
2024-11-18 10:16
据中国载人航天工程办公室消息,天舟七号货运飞船已于11月17日21时25分受控再入大气层。 天舟七号货运飞船于2024年1月17日在文昌航天发射场发射入轨,装载了航天员在轨驻留消耗品、推进剂、应用实(试)验装置等物资。
2024-11-18 10:14
加载更多