华为盘古大模型全布局揭秘,AI for Industries 的落地路径
你还在用 ChatGPT 聊天么?
从全民热衷尝鲜,到仅有少部分人仍在使用,上半年的 ChatGPT 喧嚣进入尾声,而由另一维度观测,新技术的生命力在市场,只有客户拿真金白银买单的大模型,才是技术 - 商业的正向循环,下半年,行业大模型争相落地开启新的竞争。
在 7 月 7 日举办的华为开发者大会 2023(Cloud)上,华为云正式发布盘古大模型 3.0。盘古大模型 3.0 是一个完全面向行业提供服务,以行业需求为基础设计的大模型体系,包括 5+N+X 三层架构。不疾不徐,华为盘古大模型揭开了新的一重面纱,也是 ChatGPT 热潮之后,华为首次系统性地谈论大模型。
(资料图片仅供参考)
钛媒体 App 了解到,华为并不热衷于 " 百模大战 ",尽管早在 2021 年 4 月,华为云就发布了盘古大模型,包括 NLP 大模型和 CV 大模型,此后华为相继发布科学计算大模型、药物分子大模型、盘古矿山大模型和气象大模型。
" 熟悉华为的人想想就知道,‘盘古 chat ’不符合华为的主航道,华为的策略是拿下 B 端市场,基础模型早就发布过,国内国外 C 端的大模型声量虽然大,但是华为没有想去掺一脚,还是坚定地做自己擅长的事,到了整个市场都重视大模型落地、谈论行业大模型的时候,华为就必须要站出来了 ",一位接近华为人士表示。
华为是国内最早发布大模型的厂商之一,资本市场概念的炒作一轮又一轮,当产业潮水涌向行业大模型,华为还是按捺不住,将自己的大模型战略和盘托出。
华为轮值董事长胡厚崑在 WAIC 上表示,华为人工智能的发展关键是 " 走深向实 ",着力点放在让人工智能为千行百业的生产活动服务,为科研创新服务。
当前阶段,华为在人工智能发展上有两个着力点:第一,打造强有力的算力底座,支撑中国人工智能产业的发展。第二,从通用大模型到行业大模型,让人工智能服务好千行百业、服务好科研创新。
大模型 " 卷 " 落地
前车之鉴,后事之师。数十年间,人工智能技术发展的曲线潮起潮落," 落地难 " 始终是横亘在产业现实的一道关卡。
在 ChatGPT 热潮之前,人工智能面临场景碎片化的问题,同时人工智能并没有进入到企业的核心场景,技术和业务不是紧耦合的关系,也就很难形成规模效应。
根据第三方网站 SimilarWeb 的监测数据,6 月份,ChatGPT 的网站与移动客户端的全球流量(PV)环比下降了 9.7%,美国地区的流量环比下降了 10.3%。同时,ChatGPT 的独立访客数量(UV)下降了 5.7%,访客在网站上花费的时间也下降了 8.5%。这是自 2022 年 11 月 30 日发布以来,ChatGPT 首次出现流量负增长。
拐点的到来,在一些人的意料之外,却在另一些人的情理之中。
华为常务董事、华为云 CEO 张平安表示," 目前大模型大多数应用都集中在 2C 领域,在面向行业应用时,由于行业数据获取难,技术与行业 know-how 结合难,大模型在行业的落地进展较慢。"当普罗大众还在沉浸 ChatGPT 聊天的惊艳表现时,人工智能厂商已经在设想大模型的商业化,国际上,微软、亚马逊等大厂向企业级服务寻求商业化路径,进行多个行业的探索;国内,诸如华为、百度、阿里、腾讯等大小厂商,都在快马加鞭加速行业大模型投入。
华为很早就看到了这一方向,据悉,2020 年,华为判断人工智能有两个发展方向,一个是小模型到大模型的趋势;第二个,人工智能和行业的结合,就是 AI for Industries,华为认为 AI 在千行百业有着极大的想象空间。
前者,随着模型参数的不断扩大,小模型到大模型的趋势已然兑现,张平安介绍,盘古 3.0 能够为客户提供 100 亿参数、380 亿参数、710 亿参数和 1000 亿参数的系列化基础大模型,匹配客户不同场景、不同时延、不同响应速度的行业多样化需求。
后者,在 GPT 火热之前,盘古大模型已经深耕行业,打造矿山、气象、药物分子、铁路等领域行业大模型和能力集,将行业知识 know-how 与大模型能力相结合,重塑千行百业,为每个企业、每个人提供专家助手,让工作更轻松。
如果说,彼时华为的战略预判还略显突兀,没有太多的参考,那么,如今大模型已经足以证明,华为的技术和业务路线的双重正确。
今年以来,华为迟迟不去 " 蹭 " 大模型的风口,而是在水面之下做一些基础的工作。盘古大模型发布以来,华为一直思考的都是客户运营、产品研发、软件工程、生产供应、市场营销等行业客户所关注的问题,坚持自己的技术主张和研发节奏,不急于求成,始终追求技术突破和技术领先,确保产品质量和交付质量。
" 华为早在 2020 年就坚定地选择了大模型路线,当时市场上的热度并没有今天高,也存在很多质疑的声音,我们仍然坚持了下来,未来不管炒作与否,热度高低,我们都会尽量不受外界干扰,坚持做正确的事。" 华为云人工智能领域首席科学家田奇对钛媒体 App 表示。谈及行业过热的状态,田奇表示," 针对大模型这样最顶尖的技术,市场的热度一方面反映了资本对大模型盈利能力的期待,另一方面也反映了公众对大模型应用能力的期待。"
市场是最大的驱动力,大模型最大的改变,是创造了一个规模化效应的出口,上层应用都可以基于大模型去发展,把碎片化的场景,归拢统一,形成一套大模型解决方案,盘古大模型 3.0 的升级也遵循相似的逻辑。
盘古 3.0 大模型体系的 5+N+X 三层架构中,5 大 L0 层的基础大模型,包括自然语言大模型、视觉大模型、多模态大模型、预测大模型、科学计算大模型,能够提供各种通用技能,支撑企业的各类应用。N 个 L1 层的行业大模型,例如政务大模型,金融大模型,矿山大模型等,能够基于基础大模型的多种能力组合,通过行业数据以及企业自有数据的二次训练,帮助企业打造自己的大模型。
X 代表海量 L2 层的场景模型,与基础大模型和行业大模型相比,场景模型更加专注于某个具体的应用场景或特定业务,为客户提供开箱即用的模型服务,例如,在医疗领域,针对小分子筛选,小分子优化等。
从 " 无人相信 " 到登上《Nature》
华为开发者大会 2023(Cloud)发布会前夕,华为云盘古大模型团队研发的高分辨率全球 AI 气象预报系统研究成果,正式在《Nature》正刊上发表,基于三维神经网络的气象预报系统精度,超过传统数值预报方法,且速度提高了 1 万倍以上。
少有人知道的是,就在去年 12 月份,国际气象领域的专家教授们还普遍认为,AI 要达到传统数值方法的精度,是一件非常遥远的事。
"There are a lot of comments I could make indicating that this is perhaps not yet quite the triumph of AI over physical modelling. despite the claims in the paper. Never the less it is a big step forward compared to other efforts. The paper has also been causing a degree of existential angst at ECMWF.(我可以发表很多评论,表明这可能还不是 AI 相对于物理建模的巨大胜利,尽管论文中提出了主张,与其他努力相比,这绝不是向前迈出的一大步。但是,该论文还是在 ECMWF 引起了一定程度的焦虑。)
欧洲中期天气预报中心(ECMWF)是全球权威的国际性天气预报研究和业务机构,该中心于 1979 年 6 月首次做出了实时的中期天气预报,现在,华为盘古气象大模型,为世界展现了另一种可能。
盘古气象大模型研发团队核心成员对钛媒体 App 表示,之前大家不相信 AI 方法能够实现更高的精度和更好的效率,ECMWF 也在探索用 AI 预测天气,但是规划的时间表以十年计算,他们认为,AI 方法存在很多现阶段难以突破的问题。
例如分辨率不够,省级和区级的天气预报,数据量相差很大,如果要做到更高的分辨率,数据量要达到上千 TB,这比其他 AI 应用数据量要大得多,大数据意味着消耗大算力,这部分问题能够通过堆硬件、工程化解决。再如现有的 AI 预报方法精度大部分显著低于数值预报方法,这也是很多人都不相信 AI 能够超过数值预测方法的主要原因,现有的 AI 气象预报模型都是基于 2D 神经网络,无法很好地处理不均匀的 3D 气象数据,同时 AI 方法缺少数学物理机理约束,因此在迭代过程中会不断积累迭代误差。
华为云提出了 3D Earth-Specific Transformer 方法,在每一个视觉 transformer 模块中新引入和纬度、高度相关的绝对位置编码,从而更好地处理复杂的 3D 气象数据,并且拆分各个不同的时间段模型分散训练,减少单个模型迭代的次数,从而减少迭代误差。
" 我们不仅做出来一个精度超过欧洲气象中心数据预报的模型,而且我们迅速让这个模型落地,其中克服了很多问题,让气象专家实测验证模型结果,他们没有理由否认 AI 方法的先进性。" 如上人士表示。
气象大模型的打造成为一个实证,华为云不仅能有意愿打造行业大模型,并且有将其付诸实践的工具和能力。对应华为盘古大模型,L0 是科学计算基础大模型,L1 是气象行业大模型,L2 就是气象预测等应用。
大模型回答了 " 一个模型能否解决通用问题 " 以及 " 模型本身是否有价值 " 的关键问题,但是要想真正构建完整的业务链条,还需要从商业化层面跟进,为了加速和简化行业大模型从开发到落地,华为云提供了盘古大模型工程化平台,覆盖了数据处理、模型训练和应用开发三大环节。
在数据平台方面,相比传统标注平台(能提供的例如自动数据清洗等功能),华为云数据工程平台专门为 SFT 训练提供了基于模板的 Prompt 在线辅助撰写功能,为 RLHF 训练提供了多人 Rank 在线标注和任务分拨功能;对比离线进行这两种任务,实测效率可提升 3 倍。
有了高质量的数据如何产生高质量的模型,还需要确保模型开发的过程准确无误,在模型训练方面,大模型开发套件提供了自监督预训练,有监督 SFT 训练,强化学习训练 3 种工作流,覆盖了从数据集创建,超参配置到模型训练、评估、部署的全流程,凝结了大模型专家的实践经验,把复杂的大模型开发,流程化,标准化,简单化,帮助行业用户一键启动,一站式开发。
之后,开发好的盘古大模型要想在行业发挥作用,离不开下游应用,在模型开发方面,华为云提供盘古应用开发套件,将传统软件工程与大模型相结合,提供多种 API 和工具可调用,支撑企业分钟级构建大模型原生应用。
例如,基于盘古语言大模型和视觉大模型的基础能力,以及盘古大模型工程化平台,在学习了超过 20 万条政务数据,包括政策文件、政务百科等公开政务知识,以及 12345 热线场景等专有政务知识后,深圳市福田区政府打造了具备丰富法律法规、办事流程等行业知识的福田政务大模型。
据了解,参照 GPT-3 完成一个千亿行业模型端到端开发,基于盘古大模型工程化平台,开发大模型从过去需要 5 个月缩短到现在 1 个月,整体速度提升 5 倍。
AI 世界的另一极人工智能已经成为国家战略竞争焦点,AGI(通用人工智能)可能改变甚至颠覆世界运转的原有逻辑,国家层面强调:" 人工智能是引领这一轮科技革命和产业变革的战略性技术,具有溢出带动性很强的‘头雁’效应。"
人工智能与实体经济的结合,行业大模型扮演着重要作用,行业重塑、技术扎根、开放同飞,是华为云的差异化优势。
行业大模型以行业数据和 know-how 为重中之重,华为云 AI 的优势在于,在各行业已有数百个项目,基于对行业的深入理解,沉淀行业核心 know-how,华为云盘古大模型能够更好地落地在行业客户的主业务场景。盘古大模型已经学习 10 多个行业公开数据,涵盖金融、政务、气象、医疗、健康、互联网、教育、汽车、零售等。华为云和伙伴还联合打造了工业、供热、政务、煤矿、教育、电力、公路 7 大行业 aPaaS,为盘古大模型了构建最深厚的行业积累。
墙高基下,虽得必失,人工智能产业需要从最底层夯实基础,张平安提到,其他人都可以依赖行业最成熟的 AI 算力和 AI 生态,但是华为只能依靠自己的 AI 根技术。
中国工程院院士郑纬民此前表示,大模型是新型关键基础设施的底座之一,大模型的竞争也是国家科技战略的竞争,中国一定要布局全栈自主创新的大模型产品,同时要构建国产化算力,也要解决算力能耗与国家 " 双碳 " 战略的平衡。
为此,华为构建了最深的 AI 堆栈根技术,在最底层构建了以鲲鹏和昇腾为基础的 AI 算力云平台,构建了昇腾的计算引擎 CANN、AI 框架 MindSpore,以及 AI 开发平台 ModelArts,为大模型开发和运行提供分布式并行加速,算子和编译优化,集群级通信优化等关键能力。
" 现在基于华为的 AI 堆栈,我们的大模型训练效能不仅不落后,在大模型场景下我们的训练效能是业界主流 GPU 的 1.1 倍 ",他说。
与此同时,华为云提供了易用可靠的大模型工具套件、汇聚海量多行业场景 API 的开天 aPaaS,以及包含丰富优质课程和技术认证的大模型专属社区,帮助开发者一站式完成入门到专家。华为也积累了高密度的大模型人才:盘古团队中大概 50% 以上是博士,还有很多名 " 天才少年 ",上述气象大模型的核心成员便是之一,大模型在训练过程中,会遭遇各种各样的困难和挑战,一个技术过硬、敢于创新的团队,才是大模型能够练成的核心保障,也是华为对外输出大模型能力的依托。
在安全方面,华为云提供公有云、混合云、大模型专区三种模式,保障安全部署;建立长效机制,确保大模型安全合规:包括数据集来源和使用合规、数据全生命周期安全、构建完整的数据标注以及审核机制、构建模型合规使用政策、确保模型使用边界。
AI 大模型时代,面临自下而上自主创新的宏大命题,华为正在打造世界 AI 另一极。
标签:
推荐
- 华为盘古大模型全布局揭秘,AI for Industries 的落地路径
- 2023年“应急先锋·北京榜样”6月榜单公布
- 深圳拟规定住房类建设项目4年内竣工
- 黟县柯村镇:共建“阳光之家” 创造美好未来
- 7月7日涨停复盘:*ST中期5连板 大连热电3连板
- 普契尼经典歌剧《三联剧》今明上演
- 华为云盘古大模型3.0正式发布
- 黄金日内先反弹后回落
- 要不,跟投?
- 学习小组制,激发出这所学校的学霸“集群效应”
- 可做二维码的软件推荐:这5款软件帮你搞定!
- 7月7日内蒙古地区氢氟酸市场价格暂稳
- 三伏天还没到,今夏还有多少高温天?
- 2023年中国蜜瓜产业大会7月底在民勤举办
- 世界最大海上溢油应急处置实验系统在津开建
- 碧螺春和龙井哪个降血压
- 双色球078期历史同期号码全汇总
- 元琛科技(688659)7月6日主力资金净卖出339.22万元
- 亚光科技(300123):向特定对象发行股票申请获得深圳证券交易所受理
- 胡莱三国兑换码(胡莱三国bug)
- 1.37万条数据揭秘:券商金股含金量不高
- 打造全市绿色低碳转型样板,宝山以非常之力求突破、再提升
- 德转预测皇马主力阵:居勒尔在列无魔笛克罗斯,卡马文加左后卫
- 我的生活日报
- 7月6日巨轮智能(002031)龙虎榜数据:游资北京中关村上榜
- 国乒双打2连败,陈梦王曼昱2-3被淘汰,梁靖崑林高远发挥不佳
- “马路供销”让“青字号”品牌亮起来
- 华安鑫创:公司暂无机器人相关业务和订单
- 玩个手办玩出了大片的既视感,摄影师的确是个神奇的职业
- 8000多项涉企服务一站式办理!“穗好办@企”平台正式上线
- 个人所得税怎么申报退税退得多(个人所得税怎么申报退税)
- 习近平致电祝贺比奥当选连任塞拉利昂总统
- 【全球播资讯】未按要求摆放安全套违反艾滋病防治条例 青岛处罚多家违规酒店
- 工信部金壮龙:做优做强做大实体经济
- 面对抑郁症,我们能做些什么?
- 《阴阳师》诞生庆典活动玩法攻略|全球看点
- 方正科技7月6日盘中涨幅达5%
- 【全球热闻】兰博基尼燃油车Huracan与Urus已完全售罄,将专注于电动车型
- 教育部:着力拓展就业岗位 加快招录进程 做好离校“不断线”服务_观速讯
- 22城集中供地年中盘点:四成宅地触顶成交 企业拿地向核心城市聚集-环球微速讯
- 世界今头条!松江河至长白县高速公路最新消息(松江河)
- 【天天聚看点】长乐机场二期扩建空管工程主体结构施工过半
- Windhorst谈潜在的利拉德交易:我听说篮网有意希罗
- 石湖荡镇以乡村旅游绘制宜居宜业宜游乡村振兴新画卷—— 听农民心声 让农民满意
- 陈吉宁会见莫德纳CEO斯特凡·班赛尔,龚正见证战略合作协议签署
- 网站怎么设计才能抓住用户?
- 美联储发布重要预测_世界通讯
- 这国总统再次呼吁:南美国家,应该减少对美元的依赖!
- 死螃蟹的储存方法_死螃蟹如何保存-全球快讯
- 海科新源:公司股票将于7月7日在创业板上市,发行价19.99元/股_最新资讯
- 环球热门:多种国家珍稀保护树种进入丰果期 为优质树种育种打下基础
- 天天看热讯:世茂建设:决定对“19世茂01”展期
- 为什么要注册成立有限责任公司?个体户和公司有什么区别?|当前播报
- 2023年税务师满足什么条件可以申请免试,免试后怎么报名? 环球速讯
- 民生银行长沙分行:以客户为中心 全面深化金融消保理念|全球实时
- 天天热资讯!最初六人(关于最初六人介绍)
- 每日精选:绿地国际博览城会展中心首批展馆拟交付 目前旗下会展项目达12个
- 塞尔达传说王国之泪1.2版本变成1.1了吗 塞尔达传说王国之泪1.2版本怎么退回1.1 世界快播报
- 股癣用哪些药膏效果好 ?治体股癣,这些药物可以选
- 张福生,被逮捕
- 天天快资讯丨*ST商城(600306):7月5日10时42分触及涨停板
- 当前信息:百日千万招聘专项行动推出4个线上招聘专场
- 当前视讯!宁德时代回应投资者:不造车
- 朋友来了有好酒:当宁夏红酒成为新国潮_环球今头条
- 世界即时看!问道引灵幡有什么用(问道引灵幡)
- 【快播报】丑闻八卦不该是新闻热搜榜主角
- 【天天速看料】金钱比荣誉实在,弃赛举办时尚展引热议,丁俊晖大满贯或无望!
- 电地暖安装有些什么要求_电地暖安装价格
- 当前头条:河北宏峻管件制造有限公司
- 享物说闲置物品_享物说app 环球播资讯
- 今日热闻!塌鼻子面相(男女塌鼻子面相解读)
- 什么原因?为什么这样!_环球最资讯
- 【世界聚看点】去杠杆化是什么意思_什么是去杠杆化
- 湖南耒阳刑案犯罪嫌疑人曾在长沙被打?警方辟谣_今亮点
- 世界即时:如何解决断电后显示器蓝屏
- 康恩贝(600572.SH)发预增,预计净利润5亿元至5.5亿元,同比增长139.4%至163.35%-天天简讯
- 从气数图看阳明病而致的溺水身亡|速看
- 东京奥运会受贿案新进展:又一企业前高管被判有罪
- 哪些历史事件,你了解之后有种三观颠倒的感觉?|全球新要闻
- 冰城公安:“安全套餐”开启摩托车电动车管理新模式-世界球精选
- 马斯克硬刚OpenAI,用户惨遭池鱼之殃
- 美国国庆假前航班大面积延误 政府航司各有说法|全球时讯
- 大写的六为什么是陆(大写的六)
- 每日聚焦:苏震清之子参选 苏清泉证实谈非绿联盟
- 突发大消息,暴涨30%!什么情况?保健品龙头崩11%!股吧炸了
- 深圳市首次公开招标投放共享单车 美团、哈啰等企业表示将应标
- 全球简讯:老师用漂亮的脚搓球
- 赣东中心与上饶市龙翔船员培训学校达成船员培训合作 微资讯
- 万能空调遥控怎么设置代码(万能空调遥控器怎么调代码) 全球看点
- 焦点资讯:金鸡叫天都图片_黄山金鸡叫天都
- 【天天报资讯】汽车知识解答柴油车提不起速度无力是什么原因?
- 多所高校宣布:恢复!
- 纪念张国荣64岁生日_纪念张国荣64岁生日
- 意媒:利雅得青年人将为伊卡尔迪报价2000万欧,提供4000万欧年薪_要闻
- 天天即时看!600777股票怎么样 600477怎么样
- 黄百韬最后怎么了_黄百韬的最后结局
- 最优化计算机原理与算法程序设计(关于最优化计算机原理与算法程序设计介绍)|世界快播
- 【世界速看料】燕京啤酒代言人 燕京啤酒董秘办回应蔡徐坤事件影响 基本情况讲解
- 焦磷酸钠有危害吗(焦磷酸钠) 天天快消息
- 温网发布新禁令!禁止在俄罗斯和白俄罗斯出售温网周边商品
X 关闭
行业规章
X 关闭