当前位置:首页 > 杂谈 > 正文内容

百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么

2023-07-04 07:38:48TONY杂谈211

原标题:百度官宣:文心一言即将问世,或将比ChatGPT更强!

作者 | 徐杰承

百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么

2月7日,百度官方公众号发布了一条极为简短的通告——《官宣:文心一言》。据了解,文心一言正是百度内部所研发的类ChatGPT聊天机器人,其英文名称则为ERNIE Bot。

据百度内部人员表示:文心一言由基于百度提出的知识增强大模型(Ernie)扩展而成的一系列高级大模型构成,可以执行广泛的任务,包括语言理解、语言生成(ERNIE 3.0 Titan)以及根据文本生成图像(ERNIE-ViLG)等。与其他语言模型相比,文心一言能够将广泛的知识与海量数据相结合,从而产生非凡的理解与生成能力。公司计划在3月完成文心一言的内部测试,然后向公众正式开放使用。

虽然对于文心一言的实际表现我们暂且不得而知,但通过百度此前所发布的名为《ERNIE 3.0 Titan: Exploring Larger-scale Knowledge Enhanced Pre-training for Language Understanding and Generation》的论文,目前我们可以大致了解到一些有关其所应用的语言模型ERNIE 3.0 Titan的相关信息。

据论文显示:ERNIE 3.0 Titan是百度于PaddlePaddle平台上所训练的千亿参数模型,其中包含多达2600亿个参数(ChatGPT使用1750亿参数的GPT3.5模型)。此外,百度还设计了一个自我监督的对抗性损失和一个可控的语言建模损失,使ERNIE 3.0 Titan生成可信和可控的文本。

为了减少计算开销和碳排放,百度还为ERNIE 3.0 Titan提出了一个在线蒸馏框架,其中教师模型将同时教授学生和训练自己。ERNIE 3.0Titan是迄今为止最大的中国密集预训模型。相关实验结果表明,ERNIE 3.0 Titan在68个NLP数据集上的性能已优于现阶段最先进的语言模型,包括ChatGPT所应用的GPT3.5模型。

ERNIE 3.0 Titan模型架构图

据悉,目前文心一言已进入上线前的最接冲刺阶段,而相关消息的曝出,也使百度港股一度暴涨超17%,市值增长约700亿港元。据部分业内人士推测,百度文心一言项目或早在2022年9月便已启动研发,彼时百度CEO李彦宏在世界人工智能大会上就曾表示:无论在技术层面还是商业应用层面,人工智能都有了巨大的进展,有些甚至是方向性的改变。

考虑到目前由ChatGPT所带来的生成式AI的火爆,未来觊觎这一领域市场的国内企业,势必不止百度一家。就市场角度而言,目前类ChatGPT聊天机器人最明显的价值与落地场景,正是百度主营的搜索业务。如此看来,如果下一次科技革命真的爆发在该领域,那么百度无疑已拔得头筹。此外,不少业内人士认为,考虑到谷歌和微软的推进节奏,文心一言开放内测的进度还有可能继续提前。返回搜狐,查看更多

责任编辑:

“百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么” 的相关文章

ToDesk:数字化革命势不可挡,企业部署远程办公或成增长驱动力

ToDesk:数字化革命势不可挡,企业部署远程办公或成增长驱动力

数字经济的加速发展,使得各行业各领域数字化转型步伐大大加快。现在的数字化并不是大企业的专属,中小企业的创始之初,数字化就应该被作为一个基石去建设,才能够在未来比较严峻的金融环境当中更有序的运营,最终产生更大的商业价值。 数字经济下,企业部署远程办公或成增长驱动力 随着数字革...

男子竟用红包码覆盖地铁车站场所码牟利!轨交警方:行拘!

男子竟用红包码覆盖地铁车站场所码牟利!轨交警方:行拘!

图说:公共视频资料显示,男子将自己打印的二维码图片粘贴覆盖在地铁“场所码”上。警方供图 “场所码”是疫情精准防控的必要手段。没想到有人竟然大开脑洞,用红包码覆盖“场所码”牟利,最终被轨交警方以扰乱公共...

南昌市出台10条举措揽人才 58同城、安居客直播讲房助用户挑选心仪房源

南昌市出台10条举措揽人才 58同城、安居客直播讲房助用户挑选心仪房源

近日,南昌市发布《关于支持大学毕业生和技能人才来昌留昌创业就业的实施意见》,在落户奖励、生活补贴、创业扶持、购房补贴等方面提出具体量化措施,支持大学毕业生和技能人才来昌留昌创业就业。在南昌市涵养人才生态,助推城市发展的同时,58同城、安居客通过科技创新产品、优质高效的服务,构建了一站式选房...

还有中文版的PubMed网站,你还不知道?

还有中文版的PubMed网站,你还不知道?

作者 / 利刃君公众号 /  叮当学术发布计算机辅助药物设计相关知识,分享分子模拟软件教程及各类科研干货。轻松科研,简单生活~全文共649字,推荐阅读时间2分钟。 中文 PubMed网 对于科研工作者来说,不管是写文章还是申请各类课题...

全网最全攻略,PubMed原来还能这么用

全网最全攻略,PubMed原来还能这么用

作为全球生命科学和生物医学领域最大搜索引擎,PubMed由美国国家卫生研究院旗下的美国国家医学图书馆对其进行维护管理,是相关领域最好用,最知名的数据库,学会使用PubMed是所有相关专业研究人员的一门必修课。 2022年3月,PubMed迎来了...

AI热潮提振云服务需求 微软(MSFT.US)Q3业绩全线超预期! 盘后一度跃升超9%

AI热潮提振云服务需求 微软(MSFT.US)Q3业绩全线超预期! 盘后一度跃升超9%

智通财经APP获悉,美国科技巨头微软(MSFT.US)截至3月份的第三财季利润和销售额双双超出分析师预期,主要原因在于随着全球科技企业竞相布局生成式AI产品,各大企业对其重要产品...