（来源：上观新闻）
晚点：T♠🛹ileLang🐀🌠 最初是👨🌾北大杨智老师团🔎队发起🇲🇫🌟的，后来也有很多🇹🇫🇱🇰社区贡献🇺🇬🕢。你们怎么理解 V🏸4 的🙍💦整体架构思路？ 🇬🇲Ⓜ赵晨阳：V4 👨⚕️整体保🧜♀️🇯🇴留了 DeepS🇬🇶🇦🇬eekMoE 框🎲🛰架和 🚳MTP （Mu🏕🎾lti-Tok🎓😷en Pred🦁◼iction，🇳🇱🇸🇯即 “多 t🧟♂️oken 预测🇸🇳”，允许🈷模型一🚥次性预测多个🏹 To🤼♂️⚜ken）策略，但0️⃣🏨在四个🦵层面做了🚔改造：注意力，🇰🇭用了混合稀疏注意⛩🖱力；残差，使用了🌐 mHC🇮🇲；优化器，在这么🚁⛎大的模型规模上🇧🇹使用了✌🔒 Muo🇲🇭📝n；以及🛅✡ infra➰ 的变化，其中🇯🇪两个关键🥽词是 TileL⤴🥡ang 和 🛑FP4♎👪。
不过，追觅手💘机现处于🏃摸索阶段，仍🕚在调研“🇳🇵N+1”的🇦🇱🇵🇷破局方向📿🇱🇸。优惠后输入🛌（缓存命😧🥪中）降至每百🇿🇼💄万 token 🍡0.25 元🏏🇵🇸——几乎等🥦🇦🇿于免费的上下👇文复用◽。据广州互联网法院🕺🦓介绍，两原🇧🇼告系案涉对话平✊台的共同运营🍯💣方及著作权🦆🍦人❌🥿。微软表示😆🇲🇩，这个数字🌽仍有提升空间👨👧👧🤽♀️，未来还会继🌳😝续优化🧞♂️。虽然有雨，📱🔀现场仍聚集了🐽不少前🇳🇮👸来咨询的学🧭生🇲🇲🧀。纳德拉明🍿确表示，微🎆软正积🎺🧸极推进必要😻的基础性🏸工作，从而在🦹♀️💗 Window🐼s、Xbo🇿🇦x、必应（B🥼🏪ing）和 E🧪🇲🇷dge 浏览👷👨🏫器等关键平台赢回💔粉丝，并⚱🇦🇫加强用🥭👼户参与⛳度⚗🇹🇩。
“支撑我走⛩🔤下来的，首先📑📘是团队伙伴⤴🇷🇴们的信任，🇧🇾🇿🇦大家没🍷有因为长期埋头苦👩🏭干而动👫摇；其次是📏我对‘©❓安全是🧸🏄产业基石’🇲🇨🖇这个判断的坚定📿☂信念🇩🇴🆖。微软指出，为🍣 Win🥀🚙dow🦋s 1🔜👗1 设计新版“运💆♂️🕌行”对话框1️⃣具有挑战性🍋🇰🇳。” 不过🦡🐵，卢特尼🙉🤹♂️克也宣称，美国“✏🦉在任何情🎥🏙况下都不会向中😪🧚♀️国出售最🅾📦先进芯片”🙁。
