영어 원문: https://argusic.com/subject/artemis
artemis
ARTEMIS는 자연어 지시를 신뢰할 수 있는 Android 자동화로 변환합니다. 이 도구는 종단 간 워크플로를 자동화하고, logs를 캡처하며, Antigravity, Codex, Claude Code와 같은 AI 코딩 어시스턴트와 원활하게 통합됩니다. 또한 AndroidWorld Benchmark에서 99% 이상의 성공률을 달성합니다.
mock으로 실행됨출처: GitHubPythonApache-2.0commit 371aa6df5688
Python, Apache-2.0 라이선스. 프로젝트 자체 레이블: ai agents, android, google, test automation 및 testing.
artemis: 의존하는 서비스를 대체물로 바꾸면 실행됩니다. Argusic agent가 GPU가 없는 깨끗한 머신에서 67분 만에 설치했고, 오류 8개가 발생했지만 도움 없이 모두 수정했으며, 전체 세션이 녹화되었습니다.
uv sync --dev succeeded; pytest exits 0 with 2185 passed, 10 skipped, 8 deselected; 'artemis ui' served the web console with HTTP 200 on /, /admin, /docs, and /health; --version answered v1.0; doctor and status CLI commands run, and the ADB daemon started from the bundled binary.
깨끗한 머신에서 agent가 얻은 결과를 agent 자신의 말로 옮긴 것입니다. 측정 방법
Argusic이 매번 새 머신에서 측정합니다. 모든 수치는 해당 증거로 연결됩니다. Argusic 점수 100점 만점에 92점(이 프로젝트 실행 점수의 평균).
한눈에 보기
프로젝트 데이터 출처: GitHub(이 페이지 상단에 링크), 업데이트 . 테스트 데이터 제공: Argusic(CC BY 4.0). 모든 수치는 전체 log, 녹화, 그리고 그 sha256 해시가 있는 실행 페이지로 연결됩니다.
측정한 항목
이 판정을 결정한 실행에서 가져왔습니다. 모든 줄은 추정치가 아니라 기록된 값입니다.
agent 자신의 말로 본 문제점
agent가 직접 남긴 말이며, 심각한 것부터 나열하고 조언으로 고쳐 쓰지 않습니다.
- VisualStepSummarizer.__init__ crashed without an API key: except-branch re-called get_google_llm() after the first call failed, and logger calls used printf-style args unsupported by ArtemisLogger15분
- No real Google API key, Android device, or scrcpy in the container; adb daemon comes from the bundled adbutils binary15분
- Generated FastMCP tool schemas for ADB server drifted from the pinned fixture: 6 docstrings were indented/missing blank lines and contained a literal backslash-n10분
- test_unified_controller_video.py relied on hardcoded decoded frame counts/indices that vary by codec/OpenCV build (77 frames decoded for a clip ffmpeg reports as 34-45)8분
- Unit tests using MagicMock providers hit 'Unknown LLM provider' exception6분
- subprocess.CREATE_NEW_PROCESS_GROUP/DETACHED_PROCESS are absent on Linux, breaking device utils import and one unit test5분
- 설치 시간
- 67분
- 깨끗한 머신에서 완료까지
- 61분
- 발생하고 수정된 오류
- 8개 발생, 8개를 사람의 도움 없이 수정
- 결과를 증명한 방법
- uv sync --dev exited 0; timeout 3000 uv run pytest -q exited 0 with '2185 passed, 10 skipped, 8 deselected, 88 warnings in 64.67s'; uv run artemis ui --no-open --port 8123 stayed up and curl returned HTTP 200 on /, /admin, /docs, /health with a compiled Angular index.html on /; uv run artemis --version printed 'Artemis Agent Platform v1.0'; uv run artemis status exited 0 printing OFFLINE/STOPPED board
- 사용한 모델 token
- 7,765,466
- 테스트한 정확한 commit
- 371aa6df5688
- 컨테이너 이미지
- sha256:cdd920bce783
측정하지 않은 항목
나머지 절반입니다. 이 증거가 어디까지 유효한지 정확히 볼 수 있도록 공백은 공백으로 표시하며 절대 채워 넣지 않습니다.
- 최대 GPU 메모리
- CPU 머신에서 실행되어 샘플링할 GPU가 없었습니다
- 장시간 실행 시 동작
- 각 시도는 문서화된 가장 작은 설정과 고정된 시간 예산을 사용하므로, 부하에서 얼마나 버티는지가 아니라 실행되는지를 측정합니다
- 실제 서비스에 대한 동작
- 이 실행은 대체 서비스로만 검증되었습니다
세션 보기
깨끗한 머신에서 시작한 전체 실행을 실제 속도 그대로 보여 줍니다. 잘라 낸 부분도, 빠르게 돌린 부분도 없습니다.
2번째 시도의 녹화, 실행일 , 위 판정을 결정한 시도입니다. 이 영상의 원본인 터미널 녹화가 증거이며 sha256 지문과 함께 저장됩니다. 영상은 그것을 렌더링한 것입니다. 재생을 누르기 전에는 영상 호스트에서 아무것도 불러오지 않습니다.
녹화의 마지막 부분
이 판정을 결정한 터미널 세션의 마지막 줄을 기록된 그대로 보여 줍니다.
All verification is complete. Final state confirmed: - `uv sync --dev` succeeded; `uv run pytest -q` exits 0 with `2185 passed, 10 skipped, 8 deselected… - `uv run artemis ui --no-open --port 8123` stayed up ~90s, serving HTTP 200 on `/`, `/admin`, `/do… - `uv run artemis --version` and `artemis doctor`/`artemis status` all run cleanly. The one unfixable gap is the Showcase UI auto-rebuild (`ng build` requires Node ≥22.22.3; container… tokens used 7,765,466 All verification is complete. Final state confirmed: - `uv sync --dev` succeeded; `uv run pytest -q` exits 0 with `2185 passed, 10 skipped, 8 deselected… - `uv run artemis ui --no-open --port 8123` stayed up ~90s, serving HTTP 200 on `/`, `/admin`, `/do… - `uv run artemis --version` and `artemis doctor`/`artemis status` all run cleanly. The one unfixable gap is the Showcase UI auto-rebuild (`ng build` requires Node ≥22.22.3; container…
전체 세션 다시 보기, 깨끗한 머신에서 이 시점까지의 모든 명령.
테스트 방법
하나의 agent, 하나의 컨테이너, 사람의 도움 없음. agent는 프로젝트 문서가 안내하는 방식대로 프로젝트를 설치하고 실행하며, 문제가 생기면 수정합니다. 아래의 모든 내용은 실제로 일어난 그대로 기록되었습니다: 터미널 세션, log, 정확한 commit. 전체 방법론.
장점과 한계
의견이 아니라 측정된 사실입니다. 콘텐츠 작성 방식.
잘된 점
- 사람의 개입 없이 오류 8개에서 모두 복구했습니다. 실패가 해결할 수 있을 만큼 잘 문서화되어 있다는 뜻입니다.
- 호스트가 보고한 라이선스는 Apache-2.0입니다.
- 2번 측정되었으므로, 결과가 일회성이 아닙니다.
잘되지 않은 점 또는 알 수 없는 점
- 대체 서비스로만 실행 상태에 도달했으므로, 실제 서비스에서 작동한다는 것은 여기서 증명되지 않습니다.
- 설치에 67분이 걸려, Argusic이 측정한 비슷한 프로젝트 110개의 중앙값보다 느렸습니다.
Argusic이 설치하고 시간을 잰 ai-agents 프로젝트 111개 중 artemis 프로젝트는 실행 상태에 108번째로 빨리 도달했으며, 111개 중 83개만 실행 상태에 도달했습니다.
같은 분야에서 함께 테스트한 프로젝트
여기 있는 모든 프로젝트는 Argusic이 깨끗한 머신에 설치하고 실행했습니다. 테스트하지 않은 프로젝트는 여기에 나오지 않습니다.
실행 기록
| 테스트 주체 | 시도 | 결과 | 점수 | 비용 USD | 시점 |
|---|---|---|---|---|---|
| Argusic Runner | 2/3 | mock으로 실행됨 | 92.00 | 1.64 | |
| Argusic Runner | 1/3 | mock으로 실행됨 | 92.00 | 0.10 |
토픽 (출처: GitHub)
배지 삽입
프로젝트 README용 Markdown입니다. 이 페이지로 다시 연결되며, 이용 조건은 다음에 있습니다: 이용 약관 페이지.
[](https://argusic.com/subject/artemis)질문
- artemis 프로젝트는 실행되나요?
- artemis 프로젝트는 외부 서비스를 mock으로 대체하면 실행됩니다. Argusic은 깨끗한 머신에서 67분 만에 설치하고 실행했으며, 그 과정에서 오류 8개가 발생했고, 세션을 녹화했습니다.
- Argusic은 artemis 프로젝트를 어떻게 테스트했나요?
- 새로운 일회용 머신에서 모든 명령을 기록하며 테스트했습니다. 리포지토리는 commit 371aa6df5688에 고정되었습니다. 기록된 시도는 2번이며, 전체 방법은 방법론 페이지에 있습니다.
- artemis 테스트 비용은 얼마였나요?
- 이 판정을 낸 실행의 비용은 1.64 USD입니다: 백만 token당 정가가 아니라 실제 컴퓨팅 및 모델 비용입니다. 해당 실행 페이지에 기록되어 있습니다.
- artemis 설치에는 얼마나 걸리나요?
- 이 판정을 결정한 실행에서 깨끗한 머신부터 실행 상태까지 67분이 걸렸습니다. 평균이 아니라 측정된 한 번의 시도입니다.
- artemis 실행에 GPU가 필요한가요?
- 시작하는 데는 필요하지 않습니다. Argusic은 GPU가 없는 머신에서 실행 상태에 도달했습니다.
- artemis 설치 시 어떤 문제가 생기나요?
- 기록된 실행에서 8개의 문제가 발생했습니다. 그중 8개는 사람의 도움 없이 수정되었습니다. 각 문제와 그로 인해 든 시간이 이 페이지에 나와 있습니다.
- artemis 프로젝트는 대안과 비교해 어떤가요?
- Argusic이 설치하고 시간을 잰 ai-agents 프로젝트 111개 중 artemis 프로젝트는 실행 상태에 108번째로 빨리 도달했으며, 111개 중 83개만 실행 상태에 도달했습니다.
- artemis 프로젝트의 증거는 어디에 있나요?
- 기록된 실행 2건이 모두 이 페이지에 있으며, 각각 전체 log와 터미널 녹화로 연결됩니다. 이들은 몰래 변경할 수 없도록 sha256 지문과 함께 저장됩니다.