（来源：上观新闻）
在M1之🧙♀️前，Mac🦂的CPU、G🥙PU、内🔰🎦存各自独📕😀立，数据搬运成为📣性能瓶颈🎠。通过自注意力机🍦🎱制，解码器先让🇷🇼🕣图片内部的特征相🚾互交流；通🏍过交叉注意力机制🧯，再让区🇳🇴🥑域特征与对方图🇲🇺片的特征进行对🔕话🌌👩🚀目录树。红果相关负👤🤷♂️责人的语🌍😆气不算严🇦🇴厉，但态度明确↪💽：“平台必须统🇬🇮一规范AI内容🙇标准，升级A🥇I识别🏜👡目录树机制👄。
它还必须谨🇨🇫慎管理有🏳限的上下文窗🇳🇵口的使用🕌🇵🇲，不仅🐈👗要避免溢出👯♂️，还要最大↖🤹♀️限度地提高♏质量🎄。总之，♠🚲目录树多 Ag✒🆗ent 是一条🥢必要的路径🔨。这项研究也引出😻了一些🏉💭值得继🇫🇲🙁续思考的问题🏥。
模型未⤴📶能识别出问题所🇬🇪😪在，在寻找解决🦀方案的过程中进行🛅了大幅度的修🗂🎗改👵👨🌾。V4的做法🛶🌬是teach🇰🇼er权🐟重offl*️⃣◼oad到分布🔤式存储按🍞🚥需加载，只缓🦸♀️🇰🇼存hi🔭dden ⏫📴state🇹🇲s不mate🤙☑rialize🤸♀️🆎 log⚗🇹🇴its⛄👩🔬，按teach🚲er排🇬🇶序样本保证每个m🥙ini-🎴🈚batch只加🌶载一个🔊tea🇵🇱⭕cher hea🌥d🍐。
