Argusic does-it-run : verdicts pour des projets open source
Original en anglais: https://argusic.com/data/does-it-run
Les agents d'Argusic installent, lancent, déboguent et vérifient de vrais logiciels open source sur une machine propre, sans aucune aide humaine. Ce jeu de données liste chaque projet testé avec son verdict (fonctionne, fonctionne avec des mocks, non vérifiable, ou pas encore vérifié), le Score Argusic, l'environnement épinglé et ce que la machine a affiché lorsqu'une étape a échoué. Il couvre 3 670 projets et 5 240 exécutions valides du 30 août 2026 au 4 novembre 2026, est généré à partir de la base de données d'Argusic et est mis à jour chaque jour. Sous licence CC BY 4.0 : citez Argusic, argusic.com.
En un coup d'œil
- 3 670 projets testés, 5 240 exécutions valides.
- Première exécution : 30 août 2026, dernière exécution : 4 novembre 2026.
- fonctionne : 2 565
- fonctionne avec des mocks : 853
- non vérifiable : 229
- pas encore vérifié : 23
Comment c'est mesuré
Les agents d'Argusic installent, lancent, déboguent et vérifient chaque projet sur une machine propre, et le résultat est vérifié en le décodant, pas en le sondant. Les règles sont publiques : méthodologie (version 1.5). Chaque verdict a une page d'exécution avec le log complet et l'enregistrement du terminal.
Contenu du tableau
- verdict : fonctionne, fonctionne avec des mocks, non vérifiable, ou pas encore vérifié.
- argusic_score : Moyenne des scores des exécutions enregistrées selon la grille publique de 0 à 100 ; un dépassement de délai n'est pas noté.
- valid_runs : Nombre d'exécutions valides du projet.
- tested_on : Date de la dernière exécution valide.
- install_minutes and wall_minutes : Minutes passées à l'installation et durée totale réelle d'une exécution.
- errors observed : Ce que la machine propre a affiché lorsqu'une étape a échoué, en tant qu'observation uniquement.
- test depth : Exécution réelle, exécution avec des services mock, ou aucune exécution possible.
Téléchargement
- verdicts.csv
- verdicts.json
- Fichiers par projet et types d'échecs : le dépôt sur GitHub.
Licence et citation
Les données sont sous licence CC BY 4.0. Attribution : Argusic, argusic.com. Les noms, descriptions et licences des projets listés appartiennent à leurs auteurs.
Contestations
Si un résultat semble faux, la méthodologie explique comment le contester (section 19). La page d'exécution montre la ligne exacte à signaler.