🔥小米刚刚公开了下一代模型 MiMo-V3 的架构。

This is a AI post classified by Jev as AI agents (a model release), kept by the AI Radar because it carries real work, not commentary.
🔥小米刚刚公开了下一代模型 MiMo-V3 的架构。 刚刚 @XiaomiMiMo 负责人罗福莉公布了 MiMo-V3 的核心架构 HySparse2。 它专门解决 Agent 越跑越慢、越跑越吃显存的问题,论文昨天刚上传 arXiv。 传统聊天模型主要是一问一答,但 Agent 完全不是这个工作负载。 Agent 每执行一步,可能只输出几十个 Token 的工具调用,却拿回来几千、几万甚至更多 Token 的搜索结果、网页、代码、日志。 下一轮又得把这些东西重新 Prefill 一遍,同时上下文还在不断变长。 所以在实际工作中 Agent 跑久以后,真正贵的是反复读之前的操作历史。 HySparse2 就是冲着这个问题去的。 相比 MiMo-V2.6 使用的 Hybrid SWA,在 100 万 Token 上: • Prefill FLOPs 降到大约原来的 1/5 • KV Cache 降到大约原来的 1/4.5 •但长上下文检索能力反而更强 因为它不是简单把 Attention 做稀疏,而是做了两层 KV 共享:不同阶段之间共享 KV,稀疏层也复用前面全注意力层的 KV 和检索结果。 最后甚至可以在 self-decoder 跑完之后,直接结束 Prefill,不再把整个 cross-decoder 重新算一遍。 论文是在一个 80B-A3B 的 M
Posted by Max For AI (40k followers) 1 h ago · 14 likes · 1.7k views · view the original post on X. Kept by the AI Radar as AI agents.
More AI work like this
- The context developers need to build better applications has always lived in Box. Now it… — @Box
- 用Gemini可以完美绕过限制!1分钟注册Muse! — @SUOHA_AI
- I HAVE NEVER PLACED A F*CKING TRADE, JEV + SIX GROK BOTS TOOK MY $1,000 TO $9,118.21 IN… — @savipww
- ai agents are getting way too good — @notjazii
- WPVibe passed 40,000 installs today. Two weeks ago it was 20,000. — @johnturner
- Astraは車も運転できる。スケーリング則で突如現実世界の操作能力も飛躍してきている。 — @bioshok3
- Oct 4, San Francisco — @neondatabase
- At a certain scale, tracking who has access to what becomes a full-time job. — @mondaydotcom
Every post is read and classified by Jev (TypeSafe): what it is, which market it belongs to, and whether the link is a real tool. 44.5k posts from 5k X accounts over the last 14 days, 1.9k tools, 19 markets. Collected every 5 minutes, fully re-ranked every hour — last update 2026-09-23 16:21 UTC. Full method.