文心一言看起来是匆忙上马,我认为这个东西根本就不是为了赚钱,就是为了能赶ChatGPT热潮,行业大模型才是真正能产生商业价值的东西。
百度文心一言发布后不久,一位前百度员工对钛媒体表示,去年OpenAI没这么火的时候,王老师(百度CTO王海峰)带队搞了10个大模型,就包括行业大模型,当时行业外关注不多,但如果现在看百度的布局,行业大模型其实是前瞻性布局,比OpenAI和微软还早。
如今,通用大模型喧嚣过后,行业模型正在逐渐占据声量,也正印证这一现实:类似ChatGPT等基础大模型赚的是“吆喝”,很大程度上是起到教育市场、塑造认知的作用,人工智能真正要落地、要赚到现在的钱,还要看行业大模型。
即便是海外市场,ChatGPT作为C端产品的部分属性,热度也已经逐渐减弱——根据SiMilaRWeb数据,前期ChatGPT的访问量增长率惊人,1月份的环比增长率为131.6%,2月份为62.5%,3月份为55.8%,在4月份明显放缓,环比增长率为12.6%,到了5月,这个数字已经变为了2.8%,并预计6月的环比增长率有可能为负数。
而基于ChatGPT或者大模型,打造的B端解决方案,正是解决大模型与场景割裂的良方。
国际上,微软、亚马逊等大厂也开始向企业级服务寻求商业化路径,开始进行多个行业的探索;国内,诸如百度、阿里、腾讯、华为都在快马加鞭加速行业大模型投入。
此外,很多全球范围内的行业龙头和创业公司也正在探索行业大模型的前景,近日,北京市科委、中关村管委会也发布了北京市首批10个人工智能行业大模型应用案例。此外,相关技术路线的企业并购金额也屡攀新高……

但大模型赛道还远远称不上拥挤——伴随技术迭代迎来飞跃式发展,各行各业正重新积累技术认知、塑造业务模式,一切才刚刚开始。
升级:千模大战
如果说基础模型是“百模大战”,行业大模型就是“千模大战”,就像树干长出树枝,每个基础大模型厂商都可以孵化数个行业大模型,大厂们的行动默契而一致。
“虽然大家对通用大模型期待很高,但它不一定是满足行业场景需求的最优解。”6月19日,在腾讯云行业大模型发布会上,腾讯集团高级执行副总裁、云与智慧产业事业群CEO汤道生表示。
在混元助手没有对外发布的情况下,腾讯率先发布了行业大模型,依托腾讯云TI平台打造的行业大模型精选商店,为客户提供MaaS一站式服务,帮助企业客户构建专属大模型及智能应用。从腾讯处获悉,有关C端的通用大模型,腾讯将在后续发布官方消息。
这一系列举措或许可以理解为,暂且不论混元基础大模型的效果和进展如何,优先发布行业大模型,是在客户急需的情况下,腾讯确保自身声量、抢占市场客户的必要之举。
更早之前,华为云人工智能领域首席科学家田奇提到,华为把大模型分成三个层级,L0、L1、L2,L0就是大家所说的基础通用模型,像GPT-3,在基础模型L0的基础上,加上行业数据,混合训练得到的行业大模型是L1。
然后再把L1针对具体下游千行百业的细分场景进行一些部署,得到细分场景的任务模型L2,为了尽快降低生产成本、提高效率,如何从行业大模型L1中快速生产L2模型,还有部署L2模型到端侧、边侧和云侧,这是非常重要的问题。
在7月即将举办的华为开发者大会的议程上可以看到,华为云将对盘古大模型如何从基础大模型炼成行业大模型进行一系列的解读和发布。
在今年的阿里云峰会上,阿里云CTO周靖人也表示,今天不是所有的企业都需要从头开始训练,也不需要大家从头开始去做多种语料,包括大量的算力资源,从头开始做大模型的一系列定制,我们希望今天通义千问模型之上,结合企业的场景、企业的知识体系、企业的行业特殊需求,产生一个个企业专属模型。
微软也在做自己的行业大模型。4月份,在国内,针对本土出海企业用户,微软AzuRe OpenAI SeRvice国际版发布了首批三套面向零售电商、制造业和数字原生领域的AzuRe全球创新行业场景,集成GPT-3、GPT-4、codex、DALL-E和企业级ChatGPT等五种大模型服务,帮助中国出海企业客户加速拓展全球市场。
千模大战一触即发,但真正进入大浪淘沙的阶段还为时尚早——整体来说,大模型还处于比较早期的发展阶段,尽管行业大模型集中涌现,但这条赛道显然有更大空间。
以金融行业大模型为例,其分成券商、保险、银行、新金融等不同领域,每个领域的下游任务又分成几十上百种的子任务。
更重要的时刻,是接下来基于基础模型,通过SFT等机制和构建出能够高效适配下游任务,并且在金融行业或者其他行业模型的下游任务产生规模效应化的时候。在阿里巴巴达摩院创新业务中心负责人陈海青看来,只是通过一些普适的非结构化数据做继续训练的行业大模型和场景,才算刚刚开始。
理智且现实的选择
如果企业要做一个千亿级参数的基础大模型,需要单机群万卡以上的算力,不仅要有GPU卡,还要把GPU的集群资源利用起来,大部分公司都无法做到。
而行业大模型显然更容易实现,同时也兼具更广阔的应用前景。
大模型赋能千行百业,但是对千行百业的场景要非常理解,不能指望训练出千亿或者万亿大模型,企业用户拿去就好用,澜舟科技创始人周明说。从通用模型到行业模型,要针对用户的场景做最后一公里的事情。
在评估基础大模型所需要的投入,权衡利弊与得失之后,企业客户迅速转向行业大模型,厂商的精力也更多投入于此。
汤道生坦言,目前通用大模型一般都是基于广泛的公开文献与网络信息来训练的,网上的信息可能有错误、有谣言、有偏见,许多专业知识与行业数据积累不足,导致模型的行业针对性与精准度不够,数据噪音过大。
但是,在很多产业场景中,用户对企业提供的专业服务要求高,容错性低。企业一旦提供了错误信息,可能引起巨大的法律责任或公关危机。因此,企业使用的大模型必须可控、可追溯、可修正,而且必须反复与充分测试才能上线。
我们认为,客户更需要有行业针对性的行业大模型,再加上企业自己的数据做训练或精调,才能打造出实用性高的智能服务。企业所需要的是在实际场景中真正解决了某个问题,而不是在100个场景中解决了70%-80%的问题。汤道生表示。
百度智能云副总裁朱勇也表示,从国内和国外的情况可以看到,真正做通用模型的并没有那么多,市面上有一些厂商做的实际上是比较小型的模型。相反,领域模型特别重要,因为通用模型只具备通识能力,领域模型可以跟特定行业、领域的任务预期对齐,解决业务的实际问题,这个过程非常重要,但这个过程所需要的代价和资源远远小于从零开始做底层通用模型。
同时他还判断,未来基础模型(底层通用模型)可能就几家,但是结合专业领域的数据、行业know how,上面会长出很多不同类型的领域模型,这些领域模型将来会非常繁荣,支撑上层繁荣的领域应用。
以百度智能云和国网打造的能源行业大模型国网-百度·文心为例,百度智能云与国网专家们一起,在通用大模型行中引入国网在电力业务积累的样本数据和特有知识,并且在训练中,结合双方在预训练算法和电力领域业务与算法的经验,设计电力领域实体判别、电力领域文档判别等算法作为预训练任务,让文心大模型深入学习电力专业知识,从而真正解决能源领域的实际业务问题,达到降本增效的目的。
朱勇表示,通用模型跟领域模型的区别,可以把通用模型比作上了大学知识面很广的人,他也许知道一些医学的知识,但不能给病人做诊断,不是专业的医生。而领域模型就是在通用能力很强的基础上,深入学习医学知识,成为了一名专业医生,可以在医学领域贡献价值。
从具备很广知识面的通用模型往专业的医学模型,这中间所需要的资源代价,要远远少于从零到一开始建立通用大模型,但它强调的是有专业的数据,要有专业领域的任务来驱动,来激发它产生这样的能力。
行业大模型怎么做
大模型本身就是一个新生事物,它改变了以往的软件开发范式,厂商们更需要一套新的工具链和平台,帮助客户更早更快打磨行业大模型。
随着大模型时代的到来,最后一公里的效率会大幅度提升。周明提到,新一代软件开发范式正在形成,主要是基于企业ProMpt提供很多功能引擎,用户现在是助手可以提高效率,在这个基础上把自己的用户体验想清楚、设计好,就很容易地构造一种新的应用。
以文心千帆大模型平台为例,是面向企业开发者的一站式大模型开发及服务运行平台。不仅提供了包括文心一言底层模型(ERNIE-Bot)和第三方开源大模型,还提供了各种AI开发工具和整套开发环境,方便客户轻松使用和开发大模型应用。
诸如数据管理、自动化模型SFT以及推理服务云端部署,厂商希望能够实现一站式大模型定制服务。不同厂商的大模型构建平台能力基本相似,不同的是易用性、效果好坏、支持的软硬件等方面。
做大模型确实不便宜,但最终能够让大模型服务推广开来的原因只有两