百度宣布大语言模子文心一言：今朝练习还不足，将来会快速迭代
界面新闻记者 | 崔鹏
3月16日下午，百度宣布新一代大语言模子、生成式AI产物文心一言。百度首创人、董事长兼首席执行官李彦宏暗示，文心一言的利用场景主要包括文学创作、贸易文案创作、数理推算、中文领略和多模态生成。
同时百度还发布了文心一言的邀请测试方案。3月16日起，首批用户可通过邀请测试码，在文心一言官网体验产物，后续将连续开放给更多用户。
另外，百度智能云即将面向企业客户开放文心一言API接口挪用处事。3月16日起正式开放预约，搜索“百度智能云”进入官网，可申请插手文心一言云处事测试。
李彦宏在现场多次提及，这类大语言模子还远未到成长完善的阶段，有赖于通过真实的用户反馈而慢慢迭代。
百度方面暗示，文心一言大模子的练习数据包罗万亿级网页数据、数十亿的搜索数据和图片数据、百亿级的语音日均挪用数据，以及5500亿事实的常识图谱等。
据百度先容，文心一言的视频生成本领则因本钱较高，现阶段还未对所有用户开放，将来会慢慢接入。
“多模态是生成式AI一个明晰的成长趋势。”李彦宏暗示，“将来，跟着百度多模态统一大模子的本领加强，文心一言的多模态生成本领也会不绝晋升。”
百度公司首席技能官（CTO）王海峰暗示，“文心一言”是新一代常识加强大语言模子，是在ERNIE及PLATO系列模子的基本上研发的；它的要害技能包罗有监视精调、人类反馈的强化进修、提示、常识加强、检索加强和对话加强。
王海峰称，前三项是这类大语言模子城市回收的技能，ERNIE和PLATO中也已经有应用和积聚，在文心一言中又有了进一步强化和打磨；后三项则是百度已有技能优势的再创新，也是文心一言将来越来越强大的基本。
李彦宏暗示，今朝百度是全球大厂中第一个做出对标ChatGPT产物的企业，“无论是哪家公司，都不行能靠突击几个月就能做出这样的大语言模子。深度进修、自然语言处理惩罚，需要多年的僵持和积聚，没法速成。”
他认为，百度是全球为数不多在“芯片-框架-模子-应用”四层举办全栈机关的人工智能公司；而百度AI全栈机关的优势在于，可以在技能栈的四层架构中实现端到端优化，大幅晋升效率。尤其是框架层和模子层之间，有很强的协同浸染，可以辅佐构建更高效的模子，并低落本钱。
超大局限模子的练习和推理，给深度进修框架带来了很大检验。为了支持千亿参数模子的高效漫衍式练习，百度飞桨专门研发了4D混归并行技能。
百度官方信息显示，自2月份百度官宣“文心一言”以来，已有高出650家企业公布接入文心一言生态。
李彦宏预测，大语言模子将带来三大财富时机。
第一类是新型云计较公司，其主流贸易模式从IaaS变为MaaS。之前企业选择云厂商更多看算力、存储等基本云处事。将来，更多会看框架好欠好、模子好欠好，以及模子、框架、芯片、应用这四层之间的协同。
第二类是举办行业模子精调的公司。这是通用大模子和企业之间的中间层，他们可以基于对行业的洞察，抖客教程网，挪用通用大模子本领，为行业客户提供办理方案。今朝百度文心大模子已经在电力、金融、媒体等规模，宣布了10多个行业大模子。
评论列表