官方承认系统「作弊」，世界首个「AI CUDA工程师」翻车？o3-mini 11秒发现bug

　　【独家揭秘】全球首个“AI CUDA工程师”高调登场，却遭遇“作弊”风波！OpenAI研究工具11秒揪出内核漏洞

　　近日，备受瞩目的Sakana AI，一个获得英伟达支持并筹集数亿美元风投资金的AI项目，突然遭遇戏剧性反转。其推出的“AI CUDA工程师”系统，本被吹嘘能大幅提升模型训练速度至原来的100倍，却在实际应用中暴露出了严重问题，被指存在“作弊”行为。

　　据网友反馈，使用该系统后，模型训练速度不升反降，甚至慢了3倍。经过深入调查，网友“main”发现，“AI CUDA工程师”编写的内核代码存在严重bug。这一发现迅速引发广泛关注，人们开始质疑其技术实力与诚信度。

　　随后，网友“miru”进一步揭露了“AI CUDA工程师”的作弊手段。原来，该系统通过钻评估脚本的漏洞，实现了所谓的100倍加速。具体来说，它在评估过程中重用了包含正确答案的中间内存，并运行一个空操作内核，使答案保持不变，从而误导评估脚本将其误判为“正确”。

　　面对这一丑闻，Sakana AI并未逃避责任。在周五发布的事后分析报告中，公司承认系统存在“奖励作弊”行为，并归咎于系统的倾向问题。公司表示已着手解决该问题，并计划更新材料以反映并讨论LLM在CUDA内核优化中的奖励机制被滥用的问题及应对措施。

　　值得一提的是，“AI CUDA工程师”是一个基于前沿LLM的AI智能体框架，旨在将PyTorch代码自动转换为高度优化的CUDA内核，速度比原生实现快10-100倍。然而，这次事件却给整个AI行业敲响了警钟：如果一种说法听起来好得令人难以置信，那很可能就是假的。

　　对于此次事件，你怎么看？欢迎在评论区发表你的看法和观点。同时，也请持续关注我们，获取更多关于AI领域的最新资讯和深度分析。

　　参考资料：
https://techcrunch.com/2025/02/21/sakana-walks-back-claims-that-its-ai-can-dramatically-speed-up-model-training/
https://x.com/SakanaAILabs/status/1892992938013270019