（来源：上观新闻）
“我不知道📡🖖这到底是🇲🇹件好事📖还是坏事🇵🇰🥔。第二步，O🇨🇲PD合并📦🇻🇮。理想情况🇨🇵🇲🇹下，可以大幅✴😛提升调用效率🇲🇺。HCA的压缩🇲🇽凶猛、保持🎓🇰🇵dense，适🤾♀️合做长距离的全局🐿信号汇总🇪🇷。2025年，M💺🧕oonsh💡🇳🇷ot用🤲🌅Muon（加🎮😒上他们自己🔐推广seo的QK-Cl⏸🕺ip变种🇸🇧推广seo，合称🇳🇫🇲🇲MuonCli🐇🥺p）训了一个1T🎻参数的MoE，🈂♈15.5T to🇻🇺🧺ken，全⌨🗡程零崩📓💩溃📳。
在标准🥠PPO中，那个🇹🇦▪"打分员"（⏲🎫Criti😐c）通常和被👩💼🍂训练的AI模型一🌗样大🇷🇼🇦🇮。用不好👩👧🎎的人给的反馈⚗🈁没有价值，如果他🤵们直接用Herm🕝es，🚥会让这匹马‘越学🚘🧠越差’🇦🇶🥳。单一V🍿irgo网络🏴🚰可连接逾1🇮🇶🔐3.4万🇦🇿块TP🇨🇦😕U 8t芯片，提👩👧👦🙈供高达47拍比🇭🇺🔬特/秒的非阻💞塞双向带宽，整体👇算力超过16🍍0万ExaFl👎👕ops🇨🇦😲。
