（来源：上观新闻）
前三个头使🇸🇮🧾用交叉熵损🔔🔕失函数（适合分类🦵任务）🦃，第四个头使用L🤶👨🏭1损失函数👩🦱（适合数🇱🇹🌒值回归任务）🏞。他还表🎉🚒示，马斯克“📲随着时间的推移变🐯得越来越不透明”🕤。他们的理🎷☂由是，V4的🎃注意力架🛴↙构允许直💁♂️接对que🤗🎫ry和KV做RM👨🔧SNo🇻🇦rm，从🇾🇹🚶♀️源头把爆炸的🐖🇱🇰可能压🧖♀️🧸住了🥵🚄。。”刘思行也表↔示🐫🇲🇶。2025年3月，🈳xAI收购了X🕷。第一步🥣，KV压缩🐿📣。创作者👛😇的良知🚑👨✈️，才是守护真实😶的根本⚫🇨🇿。
第三，采用M📐🍹uon🍟作为主优化器💑。它的核心♒定位只有一句话：🦙🚭 The age🦸♀️🍖nt that 🧚♀️🚔grows 🦞with yo🛐u. （🦌跟你一起成长👁☣的智能🇬🇶体💗ℹ。用 OpenA🥂🇹🇴I 产品负责人 ↙Adele Li🇨🇻 的话说🙌🦘：“视觉智🏈🐊能的适用场🛄🎰景正极大地🧪拓展——图像是一🇹🇰🦝种语言，而🏺🌰不是装饰🎓🦛。这两个基线的结📖果表明，单💆♂️🚢靠 D🇸🇪INOv2 🙇的预训练🛁🍑特征是远🦈⬛远不够的，P🤘👩⚕️ANDA 🇱🇷🌁中专门设计的退👩🎨🍼化解码器对🍆🔑最终性能的提升🍍🚅至关重要👑🚠。AI科学家使🌿💈用GLM-5模🎨🤼♀️型时达到了平均🥪⚒33.73分，◼比此前最强A💜I基线高出11🚃🔐.15分▶🏋，并显著缩小了与💨人类博士生的差♨🀄距👨⚕️💭。
