Argusic does-it-run: オープンソースプロジェクトの判定

英語の原文: https://argusic.com/data/does-it-run

Argusic のエージェントは、実際のオープンソースソフトウェアをクリーンなマシンで、人の手を借りずにインストール、起動、デバッグ、検証します。このデータセットには、テストしたすべてのプロジェクトとその判定 (動作する、モックで動作する、検証できず、または未検証)、Argusic スコア、固定された環境、そしてステップが失敗したときにマシンが出力した内容が含まれています。3,670 件のプロジェクトと、2026年8月30日から 2026年11月4日までの 5,240 件の有効な実行を収録し、Argusic のデータベースから生成され、毎日更新されます。ライセンスは CC BY 4.0 です: Argusic、argusic.com を出典として表示してください。

概要

テスト済みのプロジェクト 3,670 件、有効な実行 5,240 件。
最初の実行 2026年8月30日、最新の実行 2026年11月4日。
動作する: 2,565
モックで動作する: 853
検証できず: 229
未検証: 23

計測方法

Argusic のエージェントは各プロジェクトをクリーンなマシンでインストール、起動、デバッグ、検証し、結果は調べるのではなくデコードすることで検証されます。ルールは公開されています: 評価方法 (バージョン 1.5)。すべての判定には、完全なログとターミナル録画を含む実行ページがあります。

表の内容

verdict: 動作する、モックで動作する、検証できず、または未検証。
argusic_score: 記録された実行のスコアの平均 (公開されている 0 から 100 の採点基準による)。タイムアウトは採点されません。
valid_runs: そのプロジェクトの有効な実行の数。
tested_on: 最新の有効な実行の日付。
install_minutes and wall_minutes: インストールにかかった分数と、1 回の実行の総経過時間。
errors observed: ステップが失敗したときにクリーンなマシンが出力した内容 (観察結果のみ)。
test depth: 実際の実行、モックサービスでの実行、または実行不可。

ダウンロード

verdicts.csv
verdicts.json
プロジェクトごとのファイルと失敗のパターン: GitHub のリポジトリ。

ライセンスと引用

データのライセンスは CC BY 4.0 です。出典表示: Argusic、argusic.com。掲載しているプロジェクトの名前、説明、ライセンスは、それぞれの作者に帰属します。

異議申し立て

結果が誤っていると思われる場合は、評価方法に異議申し立ての方法が説明されています (セクション 19)。実行ページでは、指摘すべき行を正確に確認できます。