영어 원문: https://argusic.com/subject/codex-security

codex-security

보안 취약점을 찾고, 검증하고, 수정하기 위한 OpenAI의 Codex Security CLI 및 TypeScript SDK.

실행됨출처: GitHub홈페이지TypeScriptApache-2.0commit 8c78e6553215

TypeScript, Apache-2.0 라이선스. 프로젝트 자체 레이블: ai security, application security, cli, code scanning, codex, codex security, cybersecurity 및 devsecops.

codex-security: 실행됩니다. Argusic agent가 GPU가 없는 깨끗한 머신에서 6분 만에 설치했고, 오류 6개가 발생했으며, 전체 세션이 녹화되었습니다.

TypeScript SDK builds and lints cleanly, CLI prints version 0.1.31 and full help, bun test suite passes 551+ tests, Python pytest suite passes 615+ tests, ruff lint/format pass, bundled plugin builds with 142 files, and pre-submit compatibility checks all pass.

깨끗한 머신에서 agent가 얻은 결과를 agent 자신의 말로 옮긴 것입니다. 측정 방법

Argusic이 매번 새 머신에서 측정합니다. 모든 수치는 해당 증거로 연결됩니다. Argusic 점수 100점 만점에 94.3점(이 프로젝트 실행 점수의 평균).

한눈에 보기

판정
실행됨
Argusic 점수
94.3 / 100
검증 실행 비용
0.18 USD(측정값)
기록된 실행
2
마지막 테스트
스타
11,301
포크
902
열린 issue
152
watcher
36
크기
70 MB
생성일
마지막 push

프로젝트 데이터 출처: GitHub(이 페이지 상단에 링크), 업데이트 . 테스트 데이터 제공: Argusic(CC BY 4.0). 모든 수치는 전체 log, 녹화, 그리고 그 sha256 해시가 있는 실행 페이지로 연결됩니다.

측정한 항목

이 판정을 결정한 실행에서 가져왔습니다. 모든 줄은 추정치가 아니라 기록된 값입니다.

codex-security 테스트 중 각 실패로 잃은 시간, 기록된 실행에서 그림
각 막대는 agent가 기록한 실패와 그로 인해 소요된 시간입니다. 다른 곳이 아닌 이 실행에서 그렸습니다.

agent 자신의 말로 본 문제점

agent가 직접 남긴 말이며, 심각한 것부터 나열하고 조언으로 고쳐 쓰지 않습니다.

  • Node.js v18.19.1 is too old (requires >=22.13.0)2분
  • pnpm not available and corepack signature verification failed for [email protected]1분
  • Stale /work/repo/.npmrc with prefix=/home/runner/.npm-global prevented npm configuration changes0.5분
  • Python pip install failed due to externally-managed environment0.5분
  • Native prebuilt directory plugins/codex-security/native/prebuilt/ did not exist0.5분
  • bwrap: No permissions to create a new namespace (kernel restriction)0.5분
설치 시간
6분
깨끗한 머신에서 완료까지
15분
발생하고 수정된 오류
6개 발생, 5개를 사람의 도움 없이 수정
결과를 증명한 방법
bun test over 25 files exited 0 with 551 pass/7 skip/0 fail; python -m pytest over all plugin tests exited 0 with 615 pass/1 fail (Windows-only, expected)/4 skip; node bin/codex-security.mjs --version returned 0.1.31; --help returned help text with 20+ commands
사용한 모델 token
79,006
테스트한 정확한 commit
8c78e6553215
컨테이너 이미지
sha256:cdd920bce783

측정하지 않은 항목

나머지 절반입니다. 이 증거가 어디까지 유효한지 정확히 볼 수 있도록 공백은 공백으로 표시하며 절대 채워 넣지 않습니다.

최대 GPU 메모리
CPU 머신에서 실행되어 샘플링할 GPU가 없었습니다
장시간 실행 시 동작
각 시도는 문서화된 가장 작은 설정과 고정된 시간 예산을 사용하므로, 부하에서 얼마나 버티는지가 아니라 실행되는지를 측정합니다

녹화의 마지막 부분

이 판정을 결정한 터미널 세션의 마지막 줄을 기록된 그대로 보여 줍니다.

4. **Python externally-managed environment** — created a venv and installed plugin+test deps there
5. **Native prebuilt directory missing** — created stub files for all platforms so bundled plugin b…
6. **bwrap (bubblewrap) namespace restriction** in this container — some Argusic Agent config tests…
**Verified:**
- `bun test` over 25 test files: **551 pass, 7 skip, 0 fail**
- `python -m pytest` over all Python plugin tests: **615 pass, 1 fail (Windows E2E, expected on Lin…
- `codex-security --version` returns `0.1.31`
- `codex-security --help` shows 20+ commands
- `ruff check` and `ruff format --check` both pass
- TypeScript `tsc --noEmit` and `tsc -p tsconfig.ci.json` both succeed
- `check_plugin_source_compatibility.mjs` passes
- Bundled plugin builds with 142 files

전체 세션 다시 보기, 깨끗한 머신에서 이 시점까지의 모든 명령.

테스트 방법

하나의 agent, 하나의 컨테이너, 사람의 도움 없음. agent는 프로젝트 문서가 안내하는 방식대로 프로젝트를 설치하고 실행하며, 문제가 생기면 수정합니다. 아래의 모든 내용은 실제로 일어난 그대로 기록되었습니다: 터미널 세션, log, 정확한 commit. 전체 방법론.

장점과 한계

의견이 아니라 측정된 사실입니다. 콘텐츠 작성 방식.

잘된 점

  • 깨끗한 머신에서 실행 상태에 도달했으며, 세션이 녹화되었습니다.
  • 6분 만에 설치되었습니다.
  • GPU 없이 실행되었으므로, 시작하는 데 GPU가 필요하지 않습니다.
  • 호스트가 보고한 라이선스는 Apache-2.0입니다.
  • 2번 측정되었으므로, 결과가 일회성이 아닙니다.

잘되지 않은 점 또는 알 수 없는 점

  • 설정 중 오류 6개가 발생했습니다. 그중 1개는 해결되지 않았습니다.

적합한 용도

  • 노트북이나 작은 서버에서 시험해 보기: GPU 없이 실행 상태에 도달했습니다.
  • 빠른 평가: clone한 뒤 6분 만에 실행되고 있었습니다.

같은 분야에서 함께 테스트한 프로젝트

여기 있는 모든 프로젝트는 Argusic이 깨끗한 머신에 설치하고 실행했습니다. 테스트하지 않은 프로젝트는 여기에 나오지 않습니다.

  • Graft 실행 검증됨 · TypeScript · 공통 토픽 3개
  • Trail-Code 실행 검증됨 · TypeScript · 공통 토픽 3개
  • OpenOSINT 실행 검증됨 · Python · 공통 토픽 3개
  • codemap 실행 검증됨 · Go · 공통 토픽 3개
  • unsnooze 실행 검증됨 · JavaScript · 공통 토픽 3개
  • Uni-CLI 실행 검증됨 · TypeScript · 공통 토픽 3개

실행 기록

테스트 주체시도결과점수비용 USD시점
Argusic Runner2/3실행됨96.670.18
Argusic Runner1/3mock으로 실행됨92.000.26

토픽 (출처: GitHub)

ai-securityapplication-securityclicode-scanningcodexcodex-securitycybersecuritydevsecopsnodejsnpmopenaisdksecuritytypescriptvulnerability-scanning

배지 삽입

프로젝트 README용 Markdown입니다. 이 페이지로 다시 연결되며, 이용 조건은 다음에 있습니다: 이용 약관 페이지.

[![Tested by Argusic](https://argusic.com/badge/codex-security.svg)](https://argusic.com/subject/codex-security)

질문

codex-security 프로젝트는 실행되나요?
예. codex-security 프로젝트는 실행됩니다. Argusic은 깨끗한 머신에서 6분 만에 설치하고 실행했으며, 그 과정에서 오류 6개가 발생했고, 세션을 녹화했습니다.
Argusic은 codex-security 프로젝트를 어떻게 테스트했나요?
새로운 일회용 머신에서 모든 명령을 기록하며 테스트했습니다. 리포지토리는 commit 8c78e6553215에 고정되었습니다. 기록된 시도는 2번이며, 전체 방법은 방법론 페이지에 있습니다.
codex-security 테스트 비용은 얼마였나요?
이 판정을 낸 실행의 비용은 0.18 USD입니다: 백만 token당 정가가 아니라 실제 컴퓨팅 및 모델 비용입니다. 해당 실행 페이지에 기록되어 있습니다.
codex-security 설치에는 얼마나 걸리나요?
이 판정을 결정한 실행에서 깨끗한 머신부터 실행 상태까지 6분이 걸렸습니다. 평균이 아니라 측정된 한 번의 시도입니다.
codex-security 실행에 GPU가 필요한가요?
시작하는 데는 필요하지 않습니다. Argusic은 GPU가 없는 머신에서 실행 상태에 도달했습니다.
codex-security 설치 시 어떤 문제가 생기나요?
기록된 실행에서 6개의 문제가 발생했습니다. 그중 5개는 사람의 도움 없이 수정되었습니다. 각 문제와 그로 인해 든 시간이 이 페이지에 나와 있습니다.
codex-security 프로젝트의 증거는 어디에 있나요?
기록된 실행 2건이 모두 이 페이지에 있으며, 각각 전체 log와 터미널 녹화로 연결됩니다. 이들은 몰래 변경할 수 없도록 sha256 지문과 함께 저장됩니다.

Discussion