（来源：上观新闻）
根据与中国一家🇧🇻主要材料供应商的🇸🇹协议，H😿🥢anW⚫🐫ool Ma🐆😸terials🐴🚣♀️计划通过其子公司🐿JK M🎫🌟aterials👧🚈进口和供应🌸中国生产的P👩✈️GME和PGME🎖🌨A🐷🎳。V4的做法是🥿把注意力拆成两🇲🇫种，交替叠用🍫： 一种是C🎙SA（压缩😃稀疏注💔意力），先把🇩🇴💋每若干toke🥔n的KV缓🎫👫存合并成摘要📽⬜，再让每个que🌩😍ry只在🕴🔀这些摘要里挑选最🌠相关的t🤐💥op-k条去算🇸🇴😳注意力🤯🤼♀️——相当于既压缩🧟♀️了“要看的内🗿🌦容”，又只挑“值🇧🇸🎗得看的”去算；🇦🇪 另一种是HCA🇳🇺🏡（高压缩注意💓力），用更激🇻🇮🌮进的压缩率把🕔更长区间的to🇧🇦ken合并为一🌗条，但🥗⚓保持稠密🐀注意力⛹🇺🇾。
之前老黄没少拿这🇵🇫🌊个事儿游说美🍅国政府 让自己🦒🔇卖货 ，🤼♂️按照老黄的意思，💆♂️在 AI 军🆑备竞赛😄中，从底🐆层的电力，冷却，🇧🇼消防这些基础♐📹设施，到芯片、😏🦅服务器等算力设🌼施，再🤚到软件生📋🕞态和模型🏠的架构演进🇪🇪，这些要🥂素都缺📯🧐一不可，样样都🈺🐴赢才能赢麻到最🇸🇧后🐗⬆。”肖龙坦言⚾。此外，高温😜还可能引🏴🇽🇰发电磁干扰、信号🏨传输不稳定🇸🇦👩🎨，以及机器人频👨🎓✈繁进入保护模式🌕，限制🇰🇲🚸其应用潜力🏡。
