浪潮信息发布“源 2.0”基础大模型,千亿参数代码开源

AIBetas消息,11月27日,浪潮信息正式发布“源 2.0”基础大模型,并宣布全面开源。源 2.0 基础大模型包括 1026 亿、518 亿、21 亿等三种参数规模的模型。

据介绍,源2.0 是浪潮信息发布的新一代基础语言大模型。开源了全部的3个模型源2.0-102B,源2.0-51B和源2.0-2B。并且提供了预训练,微调,推理服务的相关脚本,以供研发人员做进一步的开发。源2.0是在源1.0的基础上,利用更多样的高质量预训练数据和指令微调数据集,令模型在语义、数学、推理、代码、知识等不同具备更强的理解能力。

同时表示,源2.0模型支持商用,不需要申请授权,只需要了解并遵循《源2.0模型许可协议》,勿将开源模型和代码及基于开源项目产生的衍生物用于任何可能给国家和社会带来危害的用途以及用于任何未经过安全评估和备案的服务。

官方提供的评测结果显示,整体的评测结果处于中上水平:

“源 2.0”基础大模型

项目开源地址:

https://github.com/IEIT-Yuan/Yuan-2.0

论文链接:

https://github.com/IEIT-Yuan/Yuan-2.0/blob/main/docs/Yuan2.0_paper.pdf

© 版权声明
THE END
喜欢就支持一下吧
点赞4 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情

    暂无评论内容