Argusic does-it-run:开源项目的测试结论
英文原文: https://argusic.com/data/does-it-run
Argusic 的 agent 在干净的机器上安装、启动、调试并验证真实的开源软件,没有任何人工协助。本数据集列出每个已测试项目及其结论(可运行、借助 mock 可运行、无法验证或尚未验证)、Argusic 评分、固定的环境,以及某个步骤失败时机器打印出的内容。它涵盖 3,670 个项目和 5,249 次有效运行,时间从 2026年8月30日 到 2026年11月4日,由 Argusic 数据库生成,每日更新。采用 CC BY 4.0 许可:请注明来源 Argusic,argusic.com。
概览
- 已测试 3,670 个项目,5,249 次有效运行。
- 首次运行 2026年8月30日,最近一次运行 2026年11月4日。
- 可运行:2,565
- 借助 mock 可运行:853
- 无法验证:229
- 尚未验证:23
测量方式
Argusic 的 agent 在干净的机器上安装、启动、调试并验证每个项目,结果通过解码而不是探测来验证。规则是公开的:方法论(版本 1.5)。每个结论都有一个运行页面,附完整的 log 和终端录屏。
表中包含什么
- verdict:可运行、借助 mock 可运行、无法验证或尚未验证。
- argusic_score:按公开的 0 到 100 评分细则计算的已记录运行得分的平均值;超时不计分。
- valid_runs:该项目的有效运行次数。
- tested_on:最近一次有效运行的日期。
- install_minutes and wall_minutes:一次运行中安装所用的分钟数和总耗时。
- errors observed:某个步骤失败时干净的机器打印出的内容,仅作为观察记录。
- test depth:真实运行、借助 mock 服务运行,或无法运行。
下载
- verdicts.csv
- verdicts.json
- 按项目划分的文件和失败模式:GitHub 上的仓库。
许可与引用
数据采用 CC BY 4.0 许可。署名:Argusic,argusic.com。所列项目的名称、描述和许可证归其作者所有。
异议
如果某个结果看起来有误,方法论说明了如何提出异议(第 19 节)。运行页面会显示应当指出的确切行。