社交媒体集团Meta旗下推出的开放人工智能模型Llama知名度非常高,在人工智能社区里Llama1~3系列口碑和评价也都非常不错,不过在2025年4月该公司推出Llama4时却遭遇滑铁卢。
当时Llama4的基准测试表现看起来也非常不错,问题是该系列模型本身就是开放的因此在模型发布后立即就有大量开发者进行测试,测试结果是模型实际表现远不如Meta宣传的那么出色。
彼时就有消息称Meta可能为了提高模型基准测试评分而进行作弊,不过后来Meta也出面回应称没有这种事情,但后来Llama系列模型的发展似乎就陷入了停滞,早前也有消息称Meta将重点转向闭源商业模型。
现在即将离任的Meta首席人工智能科学家、现代人工智能奠基人之一的YannLeCun承认,Meta在2025年4月发布Llama4模型前曾篡改过基准测试结果以获得更好的分数。
这名人工智能科学家在接受英国金融时报采访时透露,基准测试结果确实被稍微修改过,团队针对不同的基准测试项目使用不同的模型以获得更好的结果。
但这种作弊带来的后果也是很可怕的:在模型发布后Llama4被外界认为是个失败的模型,Meta也面临被指控操纵基准测试结果,这导致Meta创始人马克扎克伯格非常不满并且对所有参与发布的人都失去了信心。
YannLeCun称,最终扎克伯格直接将整个GenAI团队边缘化,目前很多人已经离开该团队以及还有更多人即将离开,像是YannLeCun这样已经在Meta工作十年的老员工也同样要离开了。
viaFT

相关文章

头条焦点
精彩导读
关注我们
【查看完整讨论话题】 | 【用户登录】 | 【用户注册】