AI框架生态峰会本周开幕 华为昇腾“朋友圈”再聚首 全球首个全模态大模型将登场

《科创板日报》6月13日讯 6月16日（本周五），人工智能框架生态峰会2023即将在上海召开，本届峰会由上海临港(行情12.88 +0.31%,诊股)经济发展（集团）有限公司、上海人工智能研究院、昇思MindSpore开源社区联合举办。

根据已披露的议程，三大要点备受关注：华为首次正式官宣昇思AI框架&大模型创新中心启动暨伙伴入驻仪式；共建AI开源生态，宣布昇思MindSpore社区理事会成立；全球首个全模态大模型紫东太初2.0正式登场。

图源：华为计算官方公众号

AI框架类似Windows、安卓一般，是“AI领域的操作系统”，所有人工智能的算法及应用都要通过AI框架进行训练与部署。目前谷歌的TensorFlow，和Meta的PyTorch两款AI框架走在前面。

昇思MindSpore 基于昇腾系列处理器，是华为在2020年开源的新一代全场景AI框架，也是华为盘古大模型的底层AI框架。

据华为介绍，其着重提升易用性并降低AI开发者的开发门槛，可以实现数据模型的训练－推理－全场景部署，大到地球系统模拟、自动驾驶，小到蛋白质结构预测，统统都可以通过昇思MindSpore实现。

据媒体报道，截至5月，昇腾已经协助搭建超过30个主流国产大模型建设，且已有25座城市基于昇腾技术建立了人工智能计算中心，其中14座已经开始正常运营且运转稳定。

▌全球首个全模态大模型将登场

紫东太初2.0大模型便是基于华为全栈国产化软硬件平台昇腾AI与昇思MindSpore，由中国科学院自动化研究所和武汉人工智能研究院联合打造。在文本、图片、音频的基础上，“紫东太初” 2.0可融入3D、视频、传感信号等更多模态数据，并优化语音、视频和文本的融合认知以及常识计算等功能，进一步突破感知、认知和决策的交互屏障。

“模态”即大模型可以处理的数据类型，可以理解为机器感知方式，模态越多，就能让AI以更接近人类的方式理解这个世界。

目前在多模态大模型方面，Meta走在前列，其最新6模态大模型ImageBind以视觉为核心，结合文本、声音、深度、热量（红外辐射）、运动（惯性传感器），最终可以做到6个模态之间任意的理解和转换。

而紫东太初1.0仅仅是三模态大模型，可利用文本、图片、音频三种模态数据进行跨模态的统一表征和学习，可以预见的是，紫东太初2.0这样的全模态大模型是通向通用人工智能道路上必不可少的一步。

从投资角度看，兴业证券(行情6.12 +0.49%,诊股)分析认为，昇腾是华为全栈全场景AI解决方案的关键部分，是华为落地全面AI战略的重要支撑。华西证券(行情8.23 -0.12%,诊股)分析师刘泽晶表示，华为昇腾基于昇腾系列处理器，构建全方位AI基础设施解决方案。Altas900AI集群（由数千颗昇腾910芯片组成）更是站在世界算力的巅峰，有望带动国产算力持续发展。

据《科创板日报》不完全梳理，这些公司均处于华为昇腾生态中：