（来源：上观新闻）
字母A🤨🌩超凡蜘蛛二免谷歌I搭建了简易🤔离线环境进行🇿🇼测试🐸。火箭技术迭代、🍪运力提💏⚛升后，让卫星发🦂射的成本变得更🤧👩🏫低🛁。在DeepS👨👨👧♣eek内📒部，梁文锋更🍥♿多扮演着一🏂🦹♀️个导师🇱🇷🔀的角色：组织🈲研发、协🔪🐩调资源，也做具🚼🇩🇪体研究，在共同👨👨👧成果上🇦🇮🥛署名为通讯作者🥫👩👩👦👦。
构建属于自己的软🛎件生态，🐼迫在眉睫🚍。V4的做法是把🦉🆓注意力拆成两种🇫🇮，交替叠用👩🚀🤐： 一🕐🇦🇴种是CSA㊗（压缩稀⚗🏂疏注意力），先把5️⃣每若干tok📳en的KV缓存🥃🥡合并成摘要🔊，再让🇭🇲每个query🦠只在这些摘要☺🍖里挑选最🌱相关的top-k🔮😅条去算注意力—😥😸—相当于既🔡🗒压缩了“要看的⏱内容”，又只👨🏫挑“值😣🎎得看的”去算；Ⓜ😍 另一种是HCA🎆（高压缩注意力）🚈，用更🧞♂️🧙♀️激进的压缩率把🍫📠更长区间的t🔴oken合并为一✈条，但保持稠🇦🇶密注意力⛴。
只是，领💈域内所😢🍔涉的关📿键技术非常广🏃泛，我🌔⚓国部分♟️🇸🇸核心部件，仍🥟🇸🇮需国际合⏹🐧作或者说依赖进口👩🚀🔽，自主创新🚍迫切性较🗜👨🏫强🎰。这个数😑👳♀️字的背后，🤥💂是两种截🇨🇿然不同的🧨路径👨🍳。更快 中国超充📥💪技术刷新🙊🔰纪录—💃—常温环境🌮下满电仅需👮♀️6分钟🏐🇱🇸，直接将“🇺🇸👐里程焦虑🐦”压缩🇹🇯成一杯咖🎈啡的时间🤭🐬。
