“紫东太初”全模态大模型

紫东太初大模型概览

发布时间	2021年7月9日
最新版本	紫东太初2.0
更新时间	2023年6月16日
参数量级	千亿参数级别
所属公司	中国科学院自动化研究所

紫东太初大模型简介

紫东太初大模型是中国科学院自动化研究所研发的一种以多模态大模型为核心、基于全栈国产化基础软硬件平台的跨模态通用人工智能平台，它可以支撑全场景AI应用，加速通用人工智能的实现。

紫东太初”全模态大模型是在千亿参数多模态大模型“紫东太初”1.0基础上升级打造的2.0版本，在语音、图像和文本三模态的基础上，加入视频、信号、3D点云等模态数据，研究突破了认知增强的多模态关联等关键技术，具备全模态理解能力、生成能力和关联能力，面向数字经济时代加速通用人工智能的实现。 

• 具备全模态理解能力、生成能力和关联能力，可以理解三维场景、信号等数字物联时代的重要信息，完成了音乐、图片和视频等数据之间的跨模态对齐，能够处理音乐视频分析、三维导航等多模态关联应用需求，并可实现音乐、视频等多模态内容理解和生成。
• 以自动化所自研算法为核心，以国产化基础软硬件平台昇腾AI为基础，依托武汉人工智能计算中心算力支持，着力打造全栈国产化通用人工智能底座。
• 已经在神经外科手术导航、短视频内容审核、法律咨询、医疗多模态鉴别诊断、交通违规图像研读等领域开始了一系列引领示范性应用。

紫东太初大模型发展历程

2021年7月9日，中国科学院自动化研究所所长徐波在2021世界人工智能大会（WAIC2021)上就人工智能的最新进展进行报告，发布了自动化所研发的跨模态通用人工智能平台—“紫东太初1.0”。

2023年6月16日，在人工智能框架生态峰会2023上，中国科学院自动化研究所所长徐波正式发布“紫东太初”全模态大模型，在“紫东太初”1.0基础上升级打造的2.0版本。