浪潮Yuan3.0Ultra多模态大模型开源 企业级AI新突破
创始人
2026-03-06 09:51:30
0次
今日，浪潮旗下YuanL网页链接团队宣布开源发布源Yuan3.0Ultra多模态基础大模型，这是一款专为万亿参数规模设计的旗舰模型。Yuan3.0Ultra在模型结构设计中系统性引入MoE大模型的训练效率优化，并针对企业应用及智能体工具调用进行了深度优化。该模型在多模态文档理解、检索增强生成（RAG）、表格数据分析、内容摘要与工具调用等企业级任务中表现卓越，能够处理企业环境中的复杂信息形态，如图文混排文档、多级结构表格以及跨文档知识检索，为构建多模态数据驱动的企业AgentAI提供能力支撑。
Yuan3.0Ultra采用统一多模态模型架构，由视觉编码器、语言主干网络与多模态对齐模块组成，实现视觉与语言信息的协同建模。语言主干网络基于混合专家（MoE）架构构建，包含103层Transformer，训练初始阶段参数规模1515B。通过LAEP方法创新，团队在预训练过程中将模型参数优化至1010B，预训练算力效率提升49%。此外，模型还引入了LocalizedFilteringAttention（LFA）机制，强化对语义关系的建模能力，相比经典Attention结构可获得更高的模型精度表现。
Yuan3.0Ultra大模型全面开源，包括模型权重（16bit与4bit模型）、技术报告，以及完整的训练方法与评测结果，支持社区在此基础上进行二次训练与行业定制。源Yuan3.0基础大模型将包含Flash、Pro和Ultra等版本，模型参数量为40B、200B和1T等，相关成果将陆续发布。
相关内容
热门资讯
广州南沙：缓解青年人才压力，“...
文、图/羊城晚报全媒体记者 江皓轩 通讯员 罗瑞娴 刘玲玉（除署名外）7月15日，南沙区2026年“...
王濛解说世界杯被指“不专业、偏...
2026年7月16日，前短道速滑奥运冠军王濛解说英阿大战，被网友指“不专业、偏向明显”，本人回应：自...
广州上半年用电量同比增长8.0...
文/羊城晚报全媒体记者 董鹏程 通讯员 洪林 白珊图/受访者供图电力运行数据是观察城市经济冷暖最直观...
小鹏MONAL03今晚上市！1...
7月16日，小鹏汽车宣布其新车型MONAL03正式上市，提供纯电和增程两种版本，起售价为12.38万...
经纬度：在上海，WAIC见证人...
盛夏的黄浦江畔，智能浪潮奔涌激荡。一场全球盛会，即将在此拉开帷幕。2026世界人工智能大会（WAIC...
中国文明乡风大会上，广州这座古...
7月16日，以“文明让乡村更美好”为主题的2026年中国文明乡风大会在山东临沂举行。拥有700多年历...
果皮更绿、风味更佳！广东绿皮石...
近日，在龙眼上市季前夕，广东省农科院果树研究所举办了一场技术鉴评会，绿皮石硖龙眼收获专家一致好评。这...
广州南沙一小区旁景观河夜间恶臭...
近日，羊城晚报“记者帮”接到读者爆料，广州市南沙区十里方圆小区二期外侧的景观河涌让人“遭不住”。6月...
（长江十年行）从“捕鱼人”到“...
中新网九江7月16日电 题：从“捕鱼人”到“护豚人” 长江渔民“上岸”守护“水中大熊猫”作者 吴鹏泉...
倒计时1天！“数”看2026世...
2026世界人工智能大会暨人工智能全球治理高级别会议将于7月17日至20日在上海举行期待值拉满！一组...