（来源：上观新闻）
V4的做法🇮🇳🇧🇻是把注意🏬🌳力拆成两种，交🥈替叠用： 一种是🇨🇨CSA（压缩稀疏📰注意力），先把📳每若干tok🇹🇳🙁en的KV🍦🥏缓存合并成🇲🇸摘要，再让每🎇⛹️♀️个query只🚴在这些🌙🇩🇪摘要里挑选最相关👟🔒的top-k🏴⚾条去算注意🤰力——相♈💢当于既压缩了🏴🦢“要看的🌾👩💻内容”，又只挑👨✈️“值得看⏪的”去算； 另🥢🔜一种是H🤝CA（高压缩🦓🚤注意力🍥），用更激进的压🇺🇬缩率把更长🏡区间的tok🎄en合并为一条，🏑👹但保持稠密注意力❇🛂。
而技术🐌☂差异化竞争的主战🤳场，正下🥄沉至芯片层级之下🗺。如果说An💑💲thropic➗已经打包了云🧢巨头（亚马🍗逊、谷歌）、G🇬🇬PU巨头（🇧🇪英伟达）和微🍈🙋软四重靠山，🛐那Open🇬🇾AI还需要尽快在👩🦳☝主权资本和云巨🇰🇭🖱头中再找😣🉑到一个等🇨🇵👡量级的战略伙➕伴——而且要🇹🇴快👷。可新机刚到📩➿家，肖龙便做了🇬🇬🥞一件惊天动👨👧地的事：亲手将电🍹脑拆了🧯。结语：梁文锋的🕍安静“棋局” ☄V4发布稿⛹结尾，DeepS🎽🙊eek引了一句👙荀子：“不🚃🇺🇿诱于誉，不恐📪于诽，率道而行📕🙅，端然正己🌥。
