Sakana AI 宣布 The AI Scientist

迈向全自动开放式科学发现

讨论：https://huggingface.co/papers/2408.06292

人工通用智能的一个重大挑战是开发能够进行科学研究和发现新知识的代理。虽然前沿模型已经被用作人类科学家的辅助工具，例如头脑风暴、编写代码或预测任务，但它们仍然只完成了科学过程的一小部分。本文提出了第一个全自动科学发现的综合框架，使前沿大型语言模型能够独立进行研究并传达其发现。我们介绍了 The AI Scientist，它能够生成新的研究想法、编写代码、执行实验、可视化结果、通过撰写完整的科学论文来描述其发现，然后运行模拟评审过程进行评估。原则上，这一过程可以重复进行，以开放式的方式迭代发展想法，类似于人类科学社区的运作。我们通过将其应用于机器学习的三个不同子领域展示了其多功能性：扩散建模、基于变压器的语言建模和学习动态。每个想法都被实现并发展成一篇完整的论文，成本不到 $15 美元。为了评估生成的论文，我们设计并验证了一种自动化审稿人，其在评估论文分数方面表现出接近人类的性能。The AI Scientist 可以生成超过顶级机器学习会议接受门槛的论文，这由我们的自动化审稿人判断。这种方法标志着机器学习科学发现新时代的开始：将 AI 代理的变革性优势带入 AI 本身的整个研究过程，并使我们更接近一个可以在世界最具挑战性的问题上释放无尽且经济实惠的创造力和创新的世界。