（来源：上观新闻）
优化器：Muon🧀 已成检验📟🇸🇭大模型团队🐬🇺🇦工程能⏫力的试🤳🏫金石 晚点：🦄🦗V4 🚇🇲🇭里还有两个很重要😣的变化，一是残🎃差上，使用了 D😫🚅eepSee🐁🔯k 去年底🎗🇳🇷提出的 📔💁mHC，🦜🏴一是业👜内现在已🏏用得比较多的🇧🇦 Mu✅on🌻。
刘益枫：关于🇻🇺🆙数据飞🚑🕎轮，我有🚉个问题想问🐝🏔晨阳🇸🇬🈷。所以我们设计了🚧 Sha🇹🇳dowRadix🦉🐷 来应🧘♀️对——三个异构 🎤KV 池（SW🍍A / C4 🇻🇺/ C1👟⚓28）加两💿🤙个压缩状态池，👩✈️要在预填充🏩、解码、🍠投机解😖🇧🇱码三个阶段保持♊同步🉑🔟。
我们团队为接入♎🤵前缀缓存和🐓🕴投机解码👡👫做了大量优化，🇰🇲👁️🗨️拿出了 Sh♊adow🚐Radix、🏔HiSpar💞se CPU☕ 扩展 KV🇧🇿，并完成了英伟🇫🇮🤼♂️达 Hopp🕓er、Bl🍪ackw🤽♂️😮ell、Gra📽🏣ce 🏙💩Black😢🌤well、AM🌰💶D、NPU 的全🤜平台适配🈲。
