Original en anglais: https://argusic.com/subject/industrial-ci

industrial_ci

Dépôt d'intégration continue facile pour les dépôts ROS

Fonctionne avec des mockssource : GitHubShellApache-2.0commit 125164b9f188

Shell, sous licence Apache-2.0. Le projet se décrit ainsi : catkin, continuous integration, gitlab, ros et travis.

industrial_ci fonctionne, avec des substituts pour les services dont il dépend. Un agent Argusic l'a installé en 9 minutes et a rencontré 3 erreurs sur une machine propre sans GPU, et toute la session a été enregistrée.

The industrial_ci Python package installs, all shell scripts pass syntax check, the travis config parser module lists jobs from .travis.yml correctly, and ROS distribution configuration maps to correct OS/builder settings.

Ce que l'agent a obtenu sur une machine propre, dans ses propres mots. Comment c'est mesuré

Mesuré par Argusic sur une machine vierge, à chaque fois. Chaque chiffre renvoie à ses preuves. Score Argusic de 76 sur 100 (la moyenne des scores des exécutions de ce projet).

En un coup d'œil

verdict
Fonctionne avec des mocks
Score Argusic
76 / 100
coût de l'exécution de vérification
0,10 USD (mesuré)
exécutions enregistrées
2
dernier test
étoiles
301
forks
137
issues ouvertes
99
observateurs
21
taille
1 MB
créé le
dernier push

Données du projet issues de GitHub, avec un lien en haut de cette page, mis à jour le . Données de test d'Argusic (CC BY 4.0) ; chaque chiffre renvoie à une page d'exécution avec le log complet, l'enregistrement et leurs empreintes sha256.

Ce qui a été mesuré

Tiré de l'exécution qui a décidé ce verdict. Chaque ligne est une valeur enregistrée, pas une estimation.

Ce qui s'est mal passé, dans les mots de l'agent

Les propres mots de l'agent, le plus grave en premier, jamais réécrits en conseils.

  • Docker not installed - run_travis job execution requires docker to pull ROS images
  • No root/sudo access - isolation=shell fails at apt-get update/lock
  • No local Python test suite - 0 tests found in industrial_ci package
Temps d'installation
9 minutes
De la machine vierge à la fin
10 minutes
Erreurs rencontrées et corrigées
3 rencontrées, 0 corrigée sans aide humaine
Comment le résultat a été prouvé
python3 industrial_ci/scripts/run_travis exited 0 listing 3 jobs; bash -n on all 34 shell scripts passed; 15/15 travis module unit tests passed; ROS distro config for noetic/humble/jazzy/rolling produced correct OS_CODE_NAME/ROS_VERSION/BUILDER
Tokens de modèle utilisés
166 698
Commit exact testé
125164b9f188
Image de conteneur
sha256:cdd920bce783

Ce qui n'a pas été mesuré

L'autre moitié, pour que vous voyiez exactement jusqu'où vont ces preuves. Une lacune est affichée comme une lacune et n'est jamais comblée.

Pic de mémoire GPU
cette exécution a eu lieu sur une machine CPU, il n'y avait donc pas de GPU à mesurer
Comportement sur une longue durée
chaque tentative utilise les réglages documentés les plus légers et un budget de temps fixe : on mesure donc s'il fonctionne, pas comment il tient sous la charge
Comportement face aux vrais services
cette exécution n'a été vérifiée qu'avec des services de substitution

Regarder la session

L'exécution complète, depuis une machine propre, à la vitesse réelle. Rien n'est coupé et rien n'est accéléré.

Un enregistrement de la tentative 2, exécutée le , la tentative qui a décidé le verdict ci-dessus. L'enregistrement du terminal dont elle est tirée constitue la preuve, conservée avec une empreinte sha256 ; la vidéo n'en est qu'un rendu. Rien n'est chargé depuis l'hébergeur de la vidéo tant que vous n'appuyez pas sur lecture.

La fin de l'enregistrement

Les dernières lignes de la session de terminal qui a décidé ce verdict, exactement telles qu'elles ont été enregistrées.

      "msg": "No local Python test suite - 0 tests found in industrial_ci package",
      "fix": "",
      "minutes": 0.0
    }
  ],
  "test_depth": "tier2_mock",
  "notes": "industrial_ci is a CI tool that requires Docker and a ROS container to run fully. Pytho…
  "verified_how": "python3 industrial_ci/scripts/run_travis exited 0 listing 3 jobs; bash -n on all…
  "final_state": "The industrial_ci Python package installs, all shell scripts pass syntax check, t…
}
tokens used
166,698

Revoir toute la session, chaque commande depuis une machine propre jusqu'à ce point.

Comment le test a été mené

Un agent, un conteneur, aucune aide humaine. Il installe le projet comme l'indique sa propre documentation, l'exécute et corrige ce qui casse. Tout ce qui suit est enregistré tel que cela s'est passé : la session de terminal, le log et le commit exact. La méthode complète.

Points forts et limites

Des faits mesurés, pas des opinions. Comment ce site est rédigé.

Ce qui s'est bien passé

  • Installé en 9 minutes.
  • Sous licence Apache-2.0, selon son hébergeur.
  • Mesuré 2 fois, le résultat n'est donc pas un cas isolé.

Ce qui ne s'est pas bien passé, ou n'est pas connu

  • N'a atteint un état de fonctionnement qu'avec des services de substitution : rien ici ne prouve qu'il fonctionne avec les vrais.
  • A rencontré 3 erreurs pendant l'installation, dont 3 n'ont pas été résolues.

Également testés, dans le même domaine

Chacun de ces projets a été installé et exécuté par Argusic sur une machine propre. Rien n'apparaît ici sans avoir été testé.

Historique des exécutions

testé partentativerésultatscorecoût USDdate
Argusic Runner2/3Fonctionne avec des mocks72,000,10
Argusic Runner1/3Non vérifié80,000,03

Sujets (depuis GitHub)

catkincontinuous-integrationgitlabrostravis

Intégrer le badge

Markdown pour le README du projet. Il renvoie vers cette page ; conditions sur la page des conditions.

[![Tested by Argusic](https://argusic.com/badge/industrial_ci.svg)](https://argusic.com/subject/industrial-ci)

Questions

industrial_ci fonctionne-t-il ?
industrial_ci fonctionne, avec des mocks à la place des services externes. Argusic l'a installé et lancé sur une machine propre en 9 minutes, en rencontrant 3 erreurs en route, et a enregistré la session.
Comment Argusic a-t-il testé industrial_ci ?
Sur une machine vierge et jetable, avec chaque commande enregistrée et le dépôt épinglé au commit 125164b9f188. 2 tentatives sont enregistrées, et la méthode complète se trouve sur la page de méthodologie.
Combien a coûté le test d'industrial_ci ?
L'exécution qui a produit ce verdict a coûté 0,10 USD : le coût réel du calcul et du modèle, pas un prix catalogue par million de tokens. Il est enregistré sur la page de cette exécution.
Combien de temps faut-il pour installer industrial_ci ?
9 minutes lors de l'exécution qui a décidé ce verdict, d'une machine propre à un état de fonctionnement. Il s'agit d'une tentative mesurée, pas d'une moyenne.
industrial_ci a-t-il besoin d'un GPU ?
Pas pour démarrer. Argusic a atteint un état de fonctionnement sur une machine sans GPU.
Qu'est-ce qui pose problème lors de l'installation d'industrial_ci ?
3 problèmes sont survenus lors de l'exécution enregistrée. Chacun, avec le temps qu'il a coûté, est listé sur cette page.
Où sont les preuves pour industrial_ci ?
Les 2 exécutions enregistrées se trouvent sur cette page, chacune avec un lien vers son log complet et son enregistrement du terminal, conservés avec une empreinte sha256 pour qu'ils ne puissent pas être modifiés discrètement.

Discussion