（来源：上观新闻）
而这，正是具身🦏📗智能这几年开始🇵🇦🆘在尝试的事情🆑。此次由中东石🇧🇪脑油供应中断所导🇰🇿致的半导体供🧻应链安全焦虑将😅🇼🇸加速下游制造厂🇸🇰导入国产👟半导体🇸🇰材料的意愿与紧❓🌭迫性👮♀️。并且，从🧘♂️📛更宏观的视🇿🇦角看，这件事改🌼变的不仅是🏳️🌈芯片选型，更是A🤴🇹🇴I产业链的利润分🏳️🌈配逻辑⚪。据台湾工商时报报🤔道，由📿📓于产能吃🌙紧与成本🇱🇹结构上涨🎿，成熟制程☸供需结构已出现反🇨🇮转💇♂️🇦🇪。例如，主打AI虚🥾😤什么是泛目录站群拟角色的猫箱⬇，用户日均使用时📳长超过2小🏌时，大幅领先其😨🍳他AI应用👇🛅。去年，谷歌🇪🇪曾表示🎟💇，将向 🇦🇩Anthrop🆕ic 提🏫📃供最多 100 🌯万块 T🧁🎈PU 芯🕥🧀片，这🛎笔协议价值数百亿🍋美元🇭🇹🖇。
V4的做法💬🕸是把注意力🚅拆成两种，交替叠🇨🇮用： 一种是💲CSA（🧼压缩稀🕌🔩疏注意力），💭先把每若🗒⏩干to🈶ken的KV缓存📃合并成摘要，🤪📱再让每个q🇪🇹💊uery只🏰👩🎨在这些摘要里挑🇦🇸🇺🇬选最相关的🇲🇦🦆top-k🌗条去算注意🦐力——相当于既压🏋缩了“要看的内🇳🇷🇵🇪容”，又只挑👗“值得看的”去👩🎤什么是泛目录站群算； 另一🥩什么是泛目录站群种是HCA（高😥🔀压缩注意力🎛），用更🤦♂️🇦🇹激进的🕵️♀️🏁什么是泛目录站群压缩率💘👹把更长*️⃣区间的t😥oken合并为一👔条，但保持🦂🎣稠密注意力🚢。
