浪潮Yuan3.0Ultra多模态大模型开源 企业级AI新突破
创始人
2026-03-06 09:51:30
0次
今日，浪潮旗下YuanL网页链接团队宣布开源发布源Yuan3.0Ultra多模态基础大模型，这是一款专为万亿参数规模设计的旗舰模型。Yuan3.0Ultra在模型结构设计中系统性引入MoE大模型的训练效率优化，并针对企业应用及智能体工具调用进行了深度优化。该模型在多模态文档理解、检索增强生成（RAG）、表格数据分析、内容摘要与工具调用等企业级任务中表现卓越，能够处理企业环境中的复杂信息形态，如图文混排文档、多级结构表格以及跨文档知识检索，为构建多模态数据驱动的企业AgentAI提供能力支撑。
Yuan3.0Ultra采用统一多模态模型架构，由视觉编码器、语言主干网络与多模态对齐模块组成，实现视觉与语言信息的协同建模。语言主干网络基于混合专家（MoE）架构构建，包含103层Transformer，训练初始阶段参数规模1515B。通过LAEP方法创新，团队在预训练过程中将模型参数优化至1010B，预训练算力效率提升49%。此外，模型还引入了LocalizedFilteringAttention（LFA）机制，强化对语义关系的建模能力，相比经典Attention结构可获得更高的模型精度表现。
Yuan3.0Ultra大模型全面开源，包括模型权重（16bit与4bit模型）、技术报告，以及完整的训练方法与评测结果，支持社区在此基础上进行二次训练与行业定制。源Yuan3.0基础大模型将包含Flash、Pro和Ultra等版本，模型参数量为40B、200B和1T等，相关成果将陆续发布。
相关内容
热门资讯
视频丨216国道抢通已推进至核...
8月26日上午，因尼泊尔一侧发生泥石流灾害，造成西藏日喀则市吉隆县吉隆口岸重大人员伤亡、失联。抢险救...
半小时就能配齐一台机器人，深圳...
编者按：健康完备的经济生态，是推动高质量发展的重要保障。即日起，南方日报、南方+推出“解码广东经济生...
两宫超1.2万个学位！广州天河...
有剧场、科技馆、体育馆美术馆、书画室、艺创工坊……天河区少年宫新宫 （下称“天河区少年宫”）将于今年...
视频丨西藏吉隆县泥石流灾害抢险...
西藏吉隆县泥石流灾害抢险救援进入第7天。今天（9月1日）上午9时55分，西藏自治区在日喀则市公安局吉...
数智赋能黔山田：从“云端”算力...
近日，2026中国国际大数据产业博览会(简称“数博会”)在贵阳正式拉开帷幕。在这场以“词元——数据要...
8月深圳楼市持续稳固向好 二手...
8月，全市新建商品住宅和二手住宅合计成交6864套，同比增长8.5%，国家统计局发布的一、二手住宅销...
9月5日起，广州黄埔新增设多个...
@黄埔街坊9月5日起黄埔新增设多个公交车站8月30日，广州市交通运输局官网发布《关于优化公共汽车南海...
开学第一课丨我国运载火箭为啥叫...
今年，是中国共产党成立105周年，中国工农红军长征胜利90周年。在中国共产党百余年奋斗历程中，长征，...
新华鲜报|一树扎根沙地 “赛考...
“故事永远不会结束。”9月1日，北京首都国际机场。返程前，美国友人“赛考斯”（本名罗纳德·萨科尔斯基...
各地学校举办丰富多彩“开学第一...
央视网消息：这两天，全国中小学陆续迎来新学期。各地以主题鲜明、形式多样的“开学第一课”，引导学生们厚...