（来源：上观新闻）
总参数越大、模型🇾🇪容量越🇦🇱高；激活👁参数越小、推理🔸成本越低🦌。不依赖人类🏅先验知识，纯粹🛌通过自我🛸🇰🇲对弈与🇬🇶计算迭代实现🏷能力跃升📤8️⃣。
优化器：Mu👨⚕️on 已成检验🦡🌄泛目录最新技术大模型团队🕊工程能力☺的试金石 晚🧙♀️点：V4 里还🏞🇨🇻有两个很重要的变✉化，一是残差上，🧬🌎使用了 🥌Deep✂Seek ⛑去年底提出🇧🇮的 mHC，一是🏴业内现在已用得比🖋较多的 Muo🤡🇧🇬n✴🎹。
特别是在如此大😐👩👩👧规模的 🏦🇧🇻MoE 上稳定😂⏏地跑 Muon，🧸以及真📸正跑通 FP4 🐋🔴训练，这都是非🎨🇧🇦常前沿的⚠尝试🇵🇪。这种共情的结✌👢构性偏📄👨🏫差，在今天🇳🇵的媒介环境中被💞以两种截然📊👰相反的方式利用🕥。
