天工 3.0 即将公测,同步开源 4000 亿参数 MoE 超级模型

昆仑万维于2023年4月17日发布了自研的双千亿级大语言模型“天工1.0”,而在即将到来的2024年4月17日,即“天工”大模型发布一周年之际,公司宣布将正式开启“天工3.0”的公测。这一重要进展标志着昆仑万维在人工智能领域的持续创新和突破。

“天工3.0”采用了4千亿级参数的MoE混合专家模型,并同步选择开源,这使其成为全球范围内模型参数最大、性能最强的MoE模型之一。与上一代“天工2.0”MoE大模型相比,“天工3.0”在多个领域实现了显著的性能提升。具体而言,其在模型语义理解、逻辑推理、通用性、泛化性、不确定性知识以及学习能力等方面均取得了惊人的进展。特别是模型技术知识能力的提升超过了20%,而在数学、推理、代码以及文创能力方面的提升更是超过了30%。

除了性能上的提升,“天工3.0”还新增了多项功能。例如,它具备了搜索增强、研究模式、调用代码及绘制图表、多次调用联网搜索等能力。这些新增功能使得“天工3.0”能够独立完成规划、调用、组合外部工具及信息,从而精准高效地完成各类复杂需求,如产业分析、产品对比等。这一变革为用户带来了全新的、颠覆式的人工智能体验。

值得一提的是,“天工3.0”还是全球首个多模态“超级模型”(Super Model)。它集成了包括AI搜索、AI写作、AI长文本阅读、AI对话、AI语音合成、AI图片生成、AI漫画创作、AI图片识别、AI音乐生成、AI代码写作以及AI表格生成等多项能力。这种集成使得“天工3.0”成为大模型时代的“超级应用”,为用户提供了一站式的解决方案,满足了用户在各个领域的多样化需求。

此外,昆仑万维还宣布“天工3.0”中的AI音乐生成大模型SkyMusic将于4月2日面向社会开启邀测。这一消息无疑为音乐创作领域注入了新的活力,展示了人工智能在音乐创作方面的巨大潜力。