小米大模型上线新模式 推理速度突破1000 tokens/s
6月8日晚,小米型上线新小米MiMo技术团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,大模在通用GPU上推理速度突破1000 tokens/s。模式 MiMo-V2.5-Pro-UltraSpeed通过对模型推理系统的推理突破全链路工程能力优化,在不降低模型能力前提下,速度首次把推理速度提升至1000 tokens/s,小米型上线新且无需定制芯片、大模只使用通用GPU即可达成。模式这一突破打破了“快、推理突破强、速度通用 GPU无法兼得”的小米型上线新行业不可能三角。 小米MiMo技术团队表示,大模该突破是模式基于Xiaomi MiMo-V2.5 Pro的SWA架构,叠加了FP4 Experts、推理突破DFlash解码以及TileRT团队的速度执行系统Co‑design,从模型到推理引擎再到GPU执行路径进行了全链路优化。 即日起至6月23日,MiMo-V2-Pro-UltraSpeed模式将采取申请制限时开放,通过申请的用户可接入API 进行体验。 自4月底以来,小米AI在模型能力、推理成本和推理效率三个维度接连取得突破:4月23日, MiMo-V2.5-Pro在全球权威大模型测评平台Artificial Analysis上,获得综合智能指数与Agent指数全球开源模型并列第一;5月27日,Xiaomi MiMo-V2.5系列模型API因技术优化宣布最高降价99%,并同步调整Token Plan计费体系。6月8日,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模型推理速度新纪录。
- 最近发表
- 随机阅读
-
- AMD X3D搞AI居然比打游戏还猛!8核暴打16核 领先达88%
- 加快建设液晶显示产业基地,行业资讯
- 《明末:渊虚之羽》玩家热议最难Boss:红岚花了两天才过!
- 高能!飞奔的 【青年神沏】,是否对得起青年的期望?
- 乳酸菌加果汁打破传统,初饮复合乳酸菌果汁引发饮料市场大震动!
- 网友调查:您认为本场比赛黄蜂输球的原因是什么
- 熊口管理区智能充电站正式投入使用
- 米尔萨普21+6巴兹莫尔15分 老鹰六人上双撕篮网
- 魔怪大咖强化维生素C果味饮料,何以分食国内千亿功能饮料市场?
- 报告显示我国约有500万名类风湿关节炎患者 平均发病年龄仅为45岁
- 汉阴县汉阳镇举办“党的创新理论我来讲”宣讲大赛
- 字母哥29+10雄鹿5人上双 巴特勒30分公牛三连败
- 购买人身意外险,购买人身意外险需要多少钱
- 苦无之力再掀混乱风暴 《彩虹六号:围攻》“炼狱”活动现已开启
- 团体意外保险理赔,团体意外险的赔偿范围
- 37岁女人重疾险买,37岁女人买什么保险合适
- 赛场夺金,场外“护航”_
- 37岁女人重疾险买,37岁女人买什么保险合适
- 13日纪录:詹皇一数据超越奥胖 马刺三将里程碑
- 火爆行情难再现 玻璃旺季涨幅有限,行业资讯
- 搜索
-
- 友情链接
-