AI协作伙伴在科学中的可重复性：案例研究

于红博

摘要: 开放科学倡议旨在使研究成果更加透明、可访问和可重复使用，但确保已发表的研究结果可以独立重现仍然是一个持久的挑战。本文介绍了OpenPub，这是一个由人工智能驱动的平台，通过一套专注于关键开放科学任务的模块化副驾驶员，支持研究人员、审稿人和读者。在这项工作中，我们介绍了可重复性副驾驶员，该副驾驶员分析手稿、代码和补充材料，生成结构化的Jupyter Notebooks和旨在促进计算或“机械”可重现性的建议。我们使用先前研究过的具有已知可重现性基准的研究论文进行了可行性测试。结果表明，OpenPub可以显著减少重现时间 - 从超过30小时减少到约1小时 - 同时实现了对图表和结果的高覆盖率，适合进行计算重现。该系统系统地检测到可重现性的障碍，包括缺少的超参数、未记录的预处理步骤以及不完整或无法访问的数据集。尽管初步，这些发现表明，基于人工智能的工具可以有意义地减轻可重现性工作的负担，并有助于更透明和可验证的科学交流。模块化副驾驶员架构还为将人工智能辅助扩展到超出可重现性的其他开放科学目标提供了基础。

更新时间: 2025-09-19 17:22:03

领域: cs.AI

下载: http://arxiv.org/abs/2506.20130v2