（来源：上观新闻）
他指出，📺➿人的认知是有🥓🏥瓶颈的🤷♂️： 人类并🇭🇲非拥有上帝视角的🇭🇹“经济🇽🇰🇪🇸人”，😪我们的理性💄受到信息🇱🇮不全、计算能力🚶有限以◼⛹及时间🏀的严格限制🇨🇼🇧🇻。前者要求研究与产🥂💽品节奏高度✴😎咬合，后者则拥有☯更大的自🦷由度集🇸🇨👩🦳中力量🔀⚖办大事，但👝♊也要求每🐆次出手都足ℹ👭够有分量👨👨👦👦。另外，强一↗股份在⏮🖕2025🧭年底登陆科创板，🐍其招股书显示，该📋公司有🇯🇲🎏一个代号👣🌥为“B公司”的客👩👧👦户，曾被👨😻市场普遍推测为🐃海思半🐉🇮🇳导体，营收贡💎献超过8🍳0%🐕📯。
真正的效率🚲回报可能要🧝♂️🔮等到 spec🇦🇺🧑 覆盖率达到某个♏🔮临界点之后才会出🇹🇿现——那时大部分🇸🇸♦新开发已经不用🔙在散落的隐知识🕤里摸索🇲🇪🦁。从 R🏡🍨1 的一鸣惊🇸🇰人到如今的百花🤒齐放，这一🌅🎗年多发生了太多迭🎶代和变😬化🌙👫。现在先分🇷🇴裂再蒸馏的🏁🐶做法是：在各个目👂标上找局部最优🍗🐄，再让一个学生模🥮🥕型拟合多个教师模😾🍏型的输出分布🔗😚。而 V4 放弃🎖 MLA、重回 🕯🗓geo优化MQA（注：多查🇰🇿询注意力💣 Mul👩🎓ti-Query😩 Atte🕰ntion，是😕相比原始注意力更📵🇦🇶低显存🇻🇨0️⃣占用和更🇨🇰🌡低推理带🇦🇫宽的一种改进）👛🇯🇵，这说明模💵型架构👪还有很🧹🥐大改进空间💩。比如 🇰🇬🙍BF16 就是🍼用 16 位存一👡🤴个浮点🌶🥾数，FP🈷🤷♀️4 只用 4 🇺🇳位🚏。
