（来源：上观新闻）
但他后来与此言论🏸保持了距离🍃。💬 “以👟前用 Midj🐇ourney ☮💐做概念稿很美，🇬🇼🤘但落不了地💅。。在此过🗣程中，它找到5️⃣了在 I🌹💂♀️D 阶段实现提☸👮前转发的方法🌯🔆，并实现了一🆙🦍个具有 4 🛹个平衡阶段的🔄快速 🇵🇬Booth-W🇿🇼allac🔢🍙e 乘🧝♀️法器，🍆🔵这些阶段🔶🧕功能测试的常用方法6种体现了🔼熟练设🗓📖计师所🛑🐧知的最常🔀见的并行形式🗻🥺。
这项研究的🚀价值在于，它👯提供了一套完全🇰🇳自动化的系统🈴，不需要📆人类专家坐🎪在旁边一条一🏖条地分析AI的失📺败原因，而是让A🦗🛂I自己完🍠成这个👳"自我🔮🌿诊断"和"自🍾我补课"的过程◻🔔。V4的注意力层🏴不是一种，是💧🧞♀️两种交替使用的结🥺🍭构，C🏖SA（Compr🗂🇰🇾essed📀🧴 Spars🇲🇦e At🥁🏄♀️tentio✔⛎n）和HCA🏇（Heavi🧕ly Co🇵🇸mpresse🇱🇧🎻d A♻ttenti🦗on）📝🙊。
研究团🧦🎓队测试了一种极端🇲🇹组合：用一🇭🇹📱个只有💷🧺15亿🚈🇸🇳参数的🦂小模型（Deep🏨Seek-R🇨🇰🚧1-Disti⚱🍦ll-Qwen-🧻1.5B）💯ℹ作为价🔂🥯值模型，去辅助训🙇♀️练一个70亿参🇧🇻数的大🕷🥰模型（Dee🕚pSeek-R1🚚🎰-Dis◼til👩👩👦👦l-Qwen-💅⛑7B）🎌🇩🇪。
