영어 원문: https://argusic.com/subject/tianshu-harness
Tianshu-harness
天枢harness는 터미널 프로그래밍 agent입니다. 이 agent가 답하려는 핵심 질문은 모델이 어떻게 안정적으로 전달할 수 있는가입니다. 즉, 목표가 표류하지 않고, 완료에는 증거가 있으며, 검증은 폐쇄 루프로 이루어지며, '수정되었을 것이다'라고 말하지 않는 것입니다. 이를 위해 모델과 실제 세계 사이에 인지 실행 환경(CVM)을 구축하여 목표, 상태, 증거, 리소스, 권한, 종료 조건을 대화 기록에서 외부화하고 런타임이 지속적으로 관리합니다. 또한 deepseek v4에 극도로 최적화되어 있습니다.
mock으로 실행됨출처: GitHub홈페이지TypeScriptApache-2.0commit 0f034d4379db
TypeScript, Apache-2.0 라이선스. 프로젝트 자체 레이블: agent harness, ai agent, cli, coding agent, context management, deepseek, gui 및 harness.
Tianshu-harness: 의존하는 서비스를 대체물로 바꾸면 실행됩니다. Argusic agent가 GPU가 없는 깨끗한 머신에서 20분 만에 설치했고, 오류 3개가 발생했지만 도움 없이 모두 수정했으며, 전체 세션이 녹화되었습니다.
The repo installs and builds on Node 24, its 19005-test suite passes with 0 failures, and the CLI runs end-to-end against a local mock OpenAI-compatible provider returning a real agent response.
깨끗한 머신에서 agent가 얻은 결과를 agent 자신의 말로 옮긴 것입니다. 측정 방법
Argusic이 매번 새 머신에서 측정합니다. 모든 수치는 해당 증거로 연결됩니다. Argusic 점수 100점 만점에 92점(이 프로젝트 실행 점수의 평균).
한눈에 보기
프로젝트 데이터 출처: GitHub(이 페이지 상단에 링크), 업데이트 . 테스트 데이터 제공: Argusic(CC BY 4.0). 모든 수치는 전체 log, 녹화, 그리고 그 sha256 해시가 있는 실행 페이지로 연결됩니다.
측정한 항목
이 판정을 결정한 실행에서 가져왔습니다. 모든 줄은 추정치가 아니라 기록된 값입니다.
agent 자신의 말로 본 문제점
agent가 직접 남긴 말이며, 심각한 것부터 나열하고 조언으로 고쳐 쓰지 않습니다.
- Headless run failed 'Cannot read properties of undefined (reading id)': registering provider with --api-key-env created a provider-keys.json key pool with no models, and contractModels reads that key pool (not top-level models) so model pool was empty6분
- Mock returned plain JSON completion; app correctly rejected 'content-type is application/json (not SSE stream)'4분
- System Node v18.19.1 too old; project requires Node >=24 (engine-strict)3분
- 설치 시간
- 20분
- 깨끗한 머신에서 완료까지
- 19분
- 발생하고 수정된 오류
- 3개 발생, 3개를 사람의 도움 없이 수정
- 결과를 증명한 방법
- npm test exited 0 (合计：19005 条, pass 18983 / fail 0); node dist/cli/entry.js --version printed 'tianshu-harness v3.25.1'; headless 'node dist/cli/entry.js -p "Say hi" --provider mockllm --model mock-model-1 --json' returned {"success":true,...} with exit 0 via mock at 127.0.0.1:9876
- 사용한 모델 token
- 158,669
- 테스트한 정확한 commit
- 0f034d4379db
- 컨테이너 이미지
- sha256:cdd920bce783
측정하지 않은 항목
나머지 절반입니다. 이 증거가 어디까지 유효한지 정확히 볼 수 있도록 공백은 공백으로 표시하며 절대 채워 넣지 않습니다.
- 최대 GPU 메모리
- CPU 머신에서 실행되어 샘플링할 GPU가 없었습니다
- 장시간 실행 시 동작
- 각 시도는 문서화된 가장 작은 설정과 고정된 시간 예산을 사용하므로, 부하에서 얼마나 버티는지가 아니라 실행되는지를 측정합니다
- 실제 서비스에 대한 동작
- 이 실행은 대체 서비스로만 검증되었습니다
녹화의 마지막 부분
이 판정을 결정한 터미널 세션의 마지막 줄을 기록된 그대로 보여 줍니다.
- **Test suite**: `npm test` → **19,005 tests, pass 18,983 / fail 0**, exit 0. - **End-to-end**: stood up a schema-correct mock Argusic-compatible server (SSE) at `127.0.0.1:9876… Three errors were hit and fixed along the way (Node version, empty provider key pool, non-SSE mock). tokens used 158,669 Mock stopped. Everything is complete and verified. Here is my final report. **Summary of work done:** - **Installed** the TypeScript agent runtime from source: downloaded Node v24.10.0 (system had only… - **Launched/ran**: `--version` → `tianshu-harness v3.25.1`, plus `--help`, `sessions`, `logs` all … - **Test suite**: `npm test` → **19,005 tests, pass 18,983 / fail 0**, exit 0. - **End-to-end**: stood up a schema-correct mock Argusic-compatible server (SSE) at `127.0.0.1:9876… Three errors were hit and fixed along the way (Node version, empty provider key pool, non-SSE mock).
전체 세션 다시 보기, 깨끗한 머신에서 이 시점까지의 모든 명령.
테스트 방법
하나의 agent, 하나의 컨테이너, 사람의 도움 없음. agent는 프로젝트 문서가 안내하는 방식대로 프로젝트를 설치하고 실행하며, 문제가 생기면 수정합니다. 아래의 모든 내용은 실제로 일어난 그대로 기록되었습니다: 터미널 세션, log, 정확한 commit. 전체 방법론.
장점과 한계
의견이 아니라 측정된 사실입니다. 콘텐츠 작성 방식.
잘된 점
- 사람의 개입 없이 오류 3개에서 모두 복구했습니다. 실패가 해결할 수 있을 만큼 잘 문서화되어 있다는 뜻입니다.
- 호스트가 보고한 라이선스는 Apache-2.0입니다.
잘되지 않은 점 또는 알 수 없는 점
- 대체 서비스로만 실행 상태에 도달했으므로, 실제 서비스에서 작동한다는 것은 여기서 증명되지 않습니다.
- 설치에 20분이 걸려, Argusic이 측정한 비슷한 프로젝트 69개의 중앙값보다 느렸습니다.
- 지금까지 한 번 측정되었습니다. 한 번의 시도는 실행될 수 있음을 보여 줄 뿐, 안정적으로 실행된다는 것을 보여 주지는 않습니다.
Argusic이 설치하고 시간을 잰 ai-agent 프로젝트 70개 중 Tianshu-harness 프로젝트는 실행 상태에 58번째로 빨리 도달했으며, 70개 중 43개만 실행 상태에 도달했습니다.
같은 분야에서 함께 테스트한 프로젝트
여기 있는 모든 프로젝트는 Argusic이 깨끗한 머신에 설치하고 실행했습니다. 테스트하지 않은 프로젝트는 여기에 나오지 않습니다.
실행 기록
| 테스트 주체 | 시도 | 결과 | 점수 | 비용 USD | 시점 |
|---|---|---|---|---|---|
| Argusic Runner | 1/3 | mock으로 실행됨 | 92.00 | 0.11 |
토픽 (출처: GitHub)
agent-harnessai-agentclicoding-agentcontext-managementdeepseekguiharnessharness-engineeringloop-engineeringpersonal-ai-assistantsuper-agenttianshutianshu-harnesstui
배지 삽입
프로젝트 README용 Markdown입니다. 이 페이지로 다시 연결되며, 이용 조건은 다음에 있습니다: 이용 약관 페이지.
[](https://argusic.com/subject/tianshu-harness)질문
- Tianshu-harness 프로젝트는 실행되나요?
- Tianshu-harness 프로젝트는 외부 서비스를 mock으로 대체하면 실행됩니다. Argusic은 깨끗한 머신에서 20분 만에 설치하고 실행했으며, 그 과정에서 오류 3개가 발생했고, 세션을 녹화했습니다.
- Argusic은 Tianshu-harness 프로젝트를 어떻게 테스트했나요?
- 새로운 일회용 머신에서 모든 명령을 기록하며 테스트했습니다. 리포지토리는 commit 0f034d4379db에 고정되었습니다. 기록된 시도는 한 번이며, 전체 방법은 방법론 페이지에 있습니다.
- Tianshu-harness 테스트 비용은 얼마였나요?
- 이 판정을 낸 실행의 비용은 0.11 USD입니다: 백만 token당 정가가 아니라 실제 컴퓨팅 및 모델 비용입니다. 해당 실행 페이지에 기록되어 있습니다.
- Tianshu-harness 설치에는 얼마나 걸리나요?
- 이 판정을 결정한 실행에서 깨끗한 머신부터 실행 상태까지 20분이 걸렸습니다. 평균이 아니라 측정된 한 번의 시도입니다.
- Tianshu-harness 실행에 GPU가 필요한가요?
- 시작하는 데는 필요하지 않습니다. Argusic은 GPU가 없는 머신에서 실행 상태에 도달했습니다.
- Tianshu-harness 설치 시 어떤 문제가 생기나요?
- 기록된 실행에서 3개의 문제가 발생했습니다. 그중 3개는 사람의 도움 없이 수정되었습니다. 각 문제와 그로 인해 든 시간이 이 페이지에 나와 있습니다.
- Tianshu-harness 프로젝트는 대안과 비교해 어떤가요?
- Argusic이 설치하고 시간을 잰 ai-agent 프로젝트 70개 중 Tianshu-harness 프로젝트는 실행 상태에 58번째로 빨리 도달했으며, 70개 중 43개만 실행 상태에 도달했습니다.
- Tianshu-harness 프로젝트의 증거는 어디에 있나요?
- 기록된 실행이 이 페이지에 있으며, 각각 전체 log와 터미널 녹화로 연결됩니다. 이들은 몰래 변경할 수 없도록 sha256 지문과 함께 저장됩니다.