登录
首页 >  科技周边 >  业界新闻

蚂蚁开源Ling-mini-2.0,AI技术再突破

时间:2025-10-08 14:51:33 367浏览 收藏

小伙伴们有没有觉得学习科技周边很有意思?有意思就对了!今天就给大家带来《蚂蚁开源Ling-mini-2.0,AI技术再升级》,以下内容将会涉及到,若是在学习中对其中部分知识点有疑问,或许看了本文就能帮到你!

蚂蚁集团百灵团队近日正式发布了Ling 2.0系列的首个开源模型——Ling-mini-2.0。该模型采用创新的MoE架构,激活比例仅为1/32,总参数量达16B,但在处理每个token时仅激活1.4B参数(非embedding部分为789M),实现了高效计算与性能的平衡。

Ling-mini-2.0经过超过20万亿token数据的训练,并通过多阶段监督微调和强化学习技术,显著提升了复杂推理和指令遵循能力,整体表现可媲美7–8B级别的dense模型。

在多项权威评测中,该模型展现出卓越性能,在LiveCodeBench、CodeForces、AIME 2025、HMMT 2025、MMLU-Pro、Humanity's Last Exam等通用与专业推理基准上,均优于同规模的dense模型以及更大规模的MoE模型。

蚂蚁集团百灵团队正式开源 Ling-mini-2.0

得益于其稀疏激活设计,Ling-mini-2.0在H20硬件上的部署效率极为出色:在2000 token以内的问答场景中,生成速度可达300+ token/s,相较8B dense模型提速超过2倍。

蚂蚁集团百灵团队正式开源 Ling-mini-2.0

结合YaRN技术,模型上下文长度可外推至128K,在长序列处理任务中,相对加速比最高提升逾7倍,大幅增强其在实际应用中的灵活性与响应能力。

HuggingFace Space:https://huggingface.co/spaces/inclusionAI/ling-mini-2.0
HuggingFace:https://huggingface.co/inclusionAI/Ling-mini-2.0
ModelScope:https://modelscope.cn/models/inclusionAI/Ling-mini-2.0
GitHub:https://github.com/inclusionAI/Ling-V2

本篇关于《蚂蚁开源Ling-mini-2.0,AI技术再突破》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于科技周边的相关知识,请关注golang学习网公众号!

相关阅读
更多>
最新阅读
更多>
课程推荐
更多>