（来源：上观新闻）
训练时把🇮🇸🇱🇰优化器换成 💢Muon🧀（矩阵🥭🎪级别优化🔁🔡器 ，能对整个参🍘数矩阵进行正交化🌔处理），🔠训练精度推进🗓到 FP🙇👱♀️4，进一🇧🇱🙀步压缩显🗜📠存和带宽🏁域名注册网站哪个好；推理时引🛷🌇入 DS🇬🇼🇸🇱A（D🏃♀️eepSee🌒💌k 稀7️⃣🚛疏注意力）、📖DeepEP（🌁DeepSee🦹♀️k 通信效率的🔹底层基础设施↪库）、👨🚀Mega MoE🇳🇦📏 这一整套 I🛃nfra☂📈。
晚点：关于测评🥯部分，🛍🐹前面已有部分讨📟🧛♂️论，还有⏱🇬🇪什么补充👓吗？ 赵晨阳：有🔰一位 NLP🧀 领域很🙊🇸🇷知名的研究者说👮😢过一句话：🕟😉We c☘🌇annot🎄✊ opti🛸🌹miz🆓🥓e what🥰🥓 we cann🇦🇱🇷🇴ot ev🕧aluat🐔◼e，“🈹如果一个东👨👦👦西我们无法评估👩👦👦🚅，我们就无💖法优化它”👢🥙。
