小米大模型上线新模式 推理速度突破1000 tokens/s
6月8日晚,小米型上线新小米MiMo技术团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,大模在通用GPU上推理速度突破1000 tokens/s。模式
MiMo-V2.5-Pro-UltraSpeed通过对模型推理系统的推理突破全链路工程能力优化,在不降低模型能力前提下,速度首次把推理速度提升至1000 tokens/s,小米型上线新且无需定制芯片、大模只使用通用GPU即可达成。模式这一突破打破了“快、推理突破强、速度通用 GPU无法兼得”的小米型上线新行业不可能三角。
小米MiMo技术团队表示,大模该突破是模式基于Xiaomi MiMo-V2.5 Pro的SWA架构,叠加了FP4 Experts、推理突破DFlash解码以及TileRT团队的速度执行系统Co‑design,从模型到推理引擎再到GPU执行路径进行了全链路优化。
即日起至6月23日,MiMo-V2-Pro-UltraSpeed模式将采取申请制限时开放,通过申请的用户可接入API 进行体验。
自4月底以来,小米AI在模型能力、推理成本和推理效率三个维度接连取得突破:4月23日, MiMo-V2.5-Pro在全球权威大模型测评平台Artificial Analysis上,获得综合智能指数与Agent指数全球开源模型并列第一;5月27日,Xiaomi MiMo-V2.5系列模型API因技术优化宣布最高降价99%,并同步调整Token Plan计费体系。6月8日,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模型推理速度新纪录。
- ·猫眼娱乐成首批接入微信AI生态团队,打造智能化票务新体验
- ·洪水橙色预警!漠阳江(江城段)22日将出现4.1米左右最高水位!
- ·洪水橙色预警!漠阳江(江城段)22日将出现4.1米左右最高水位!
- ·瘋漲到月球、挑戰前高?比特幣一度飆破64000美元,背後推手華爾街的盤算是什麼|天下雜誌
- ·凤阳县图书馆“家庭爱阅会”绘本活动迎国际奥林匹克日_
- ·洛阳公交大调整 这25条线路改线10条线路停运
- ·中国人寿意外险在线投保,2026中国人寿保险意外险价格表
- ·骏通蓝牌高空车|城市高空作业优选!
- ·天工3.1 重磅发布:上线 Skywork Design 与 Dynamic Workflows,给 AI 一张画布和一支军团
- ·厦门生态治理贡献“中国方案”
- ·泉州晋江永和“火把节” 3000多根火把巡游祈福
- ·玻璃的颜色透射指数知多少?,行业资讯
- ·台湾25年来最大地震,“宛如9·21梦魇重现”
- ·世界經濟論壇800位CEO如何看2024景氣?|天下雜誌
- ·广货行天下|岭南千年佳果背后的金融“荔”量
- ·徐工矿机第八届“安全我知道”安全知识微信有奖竞答
