从文心一言看元宇宙发展

唐福强

去年11月30日ChatGPT上线，人工智能迎来了iPhone时刻。3月16日下午，百度宣布正式推出基于百度新一代大语言模型的生成式AI产品文心一言（英文名：ERNIE Bot），也就是之前一段时间人们所期待的“中国的ChatGPT”。
从底层技术看，文心一言和ChatGPT都采用了SFT（模型微调）、RLHF（强化学习）、prompt（用户指令）等技术。这跟大模型通过海量无标注数据的训练是不同的，还需要人的参与，作用是更好地理解人的意图，生成符合人的价值观、表达习惯的回复。

从演示看，文心一言和ChatGPT相比，在文学创作、商业文案写作、数理逻辑推算等方面的能力是“你有我有大家有”。但在中文理解上，文心一言非常领先，处于独一无二的位置。

这是因为文心一言的训练数据包括万亿级网页数据，数十亿搜索数据和图片数据，百亿级语音日均调用数据，以及5500亿事实的知识图谱。

研究表明，数据规模大，参数达到千亿级，大模型就可能发生“智能涌现”，涌现出知识和逻辑推理能力。而百度不仅数据规模大，数据形态也最贴合回答和生成需求，在百度搜索中问答和生成类的搜索请求占比很高。因此文心一言大模型在自然语言问答和创意内容生成上有着非常突出的表现。

文心一言刚刚发布，就如同ChatGPT刚发布一般，注定有不完美的地方，但当其开始使用后，经由真实的用户反馈、开发者的调用和模型迭代，将飞速成长。

面对世界各个科技巨头躬身入局的大模型赛道，百度是全球第一个对标ChatGPT的互联网大厂，这不仅是一种魄力，更是一种厚积薄发的势能。
从眼下看，对消费者来说，文心一言的价值在于，当它嵌入百度搜索，用户能直接与大语言模型交互，实现搜索体验的升级。对企业来说，则丰富和强化了百度智能云的能力，通过向公众开放大语言模型，可以帮助企业主和创业者在云上构建自己的模型和应用，提高效率、帮助决策和改善客户体验。

接下来，文心一言将与小度进行集成，升级小度的智能设备和服务；也将整合到百度的Apollo智舱系列产品等汽车解决方案中，让智能汽车具备领先的人车交互体验。

事实上，在最近的一个月内，已有超过600家合作伙伴宣布加入文心一言生态，期待尽早用上最新的大语言模型。对他们来说，百度智能云所提供的不仅是存储、带宽、数据库等基本功能，更是包括飞桨和文心大模型等在内的全栈人工智能能力。

随着数据井喷、算法进步和算力突破，效果好、泛化能力强、通用性强的预训练大模型，开始成为人工智能产业应用的基础底座。2019年，百度推出了文心大模型ERNIE 1.0这一产业级知识增强大模型。通过大模型与深度学习框架的融合发展，百度打造了自主创新的人工智能底座，大幅降低了开发和应用门槛，真正发挥大模型驱动人工智能规模化应用的产业价值。

文心大模型已迭代到了ERNIE 3.0，每天接受数十亿用户的搜索请求和其他百度移动生态app的训练。百度以文心通用大模型为基础，和各行各业的合作伙伴一起共建行业大模型，从行业及企业的特有数据和知识中，融合学习，提升大模型对行业应用的适配性。

截至目前，文心行业大模型已经达到11个，覆盖能源电力、金融、航天、传媒、影视、汽车、城市管理、燃气、保险、电子制造和社科等多个领域，在产业化落地的过程中使大模型真正赋能千行百业。

在全球新一轮人工智能技术的普惠化、创造性应用的大潮中，着眼于芯片和算力的企业具备“硬实力”，着眼于算法和模型的企业具备“软实力”，着眼于垂直场景应用创新的企业具备“巧实力”，而全栈技术能力强、底层核心技术过硬，并能将技术广泛赋能于个人、产业、城市、交通以及社会方方面面的企业，则具备“元实力”。

无论是芯片层、框架层等技术架构的布局，还是算力、数据等要素资源的投入，百度在国内人工智能领域一直领先。近十年来，百度累计研发投入超过1000亿元。2022年核心研发费用达到214.16亿元，占百度核心收入比例高达22.4%。相比而言，谷歌、微软、亚马逊的研发费用率约为12%左右。

以多年持续不断地投入和原生技术为基础，以中国庞大的消费端和企业端的反馈与优化为动力，百度已成为中国在人工智能领域的“元实力”代表，也担负着参与全球人工智能竞逐的重要责任。

文心一言的发布，正是这种“元实力”的一次喷发。也是我国元宇宙进一步发展的契机所在