（来源：上观新闻）
V4的做🥍法是把🏊😩注意力拆成两🛏👔种，交替🤼♀️叠用： 一种是👨⚖️🔚CSA😍（压缩稀🖱💐疏注意力），先把🇹🇿🌐每若干tok😋en的KV缓存合😛并成摘要，再让🦞🦆每个que🍕ry只在这🔤些摘要里挑选最相🏪关的t⛑op-k条去算🇫🇷🏌️♀️注意力——相当于🕎😖既压缩了“要看🍧🏯的内容”，又只挑📻👩💻“值得看的”去算✋🚴♀️； 另一种是HC🇪🇦📠A（高压缩注意力🔶🐄），用更激进的压🚼缩率把更长区🈶🌷间的token🏴合并为一条，但🌷🏌sem投放保持稠密注👩👧🕰意力👃。
当天，YOYO🕗还在四🕋🥉位老同事🎓👩👩👦的评论区留言，祝🇱🇧🇼🇸福他们🤤🍒。出了事你得自己🍶🤣来兜着，🇧🇬有许多胆大的🇭🇰👩👦👦二愣子没兜住的故🤢事……这👩🚒里就不展开分享了🔩🛍。
