Original em inglês: https://argusic.com/subject/ratel
ratel
The self-improvement layer for AI agents. Ratel reads your agent's traces, finds what fails, recommends fixes and runs evals on real sessions before you ship. Self-hosted: one app, one Postgres. Includes the TypeScript and Python SDK
Não foi possível verificarfonte: GitHubpágina do projetoTypeScriptMITcommit 99aee29b51a6
TypeScript, licença MIT. O projeto se descreve como: accuracy, agents, ai agents, context, context engineering, evals, harness e llm.
A Argusic não conseguiu fazer ratel executar. Em uma máquina limpa sem GPU, um agent da Argusic não encontrou nenhum erro, e a sessão inteira foi gravada.
Medido pela Argusic em uma máquina nova, todas as vezes. Cada número tem link para as suas evidências. Pontuação Argusic 0 de 100 (a média das pontuações das execuções deste projeto).
Visão geral
Dados do projeto de GitHub, com link no topo desta página, atualizado em . Dados de teste da Argusic (CC BY 4.0); cada número tem link para uma página de execução com o log completo, a gravação e os hashes sha256 deles.
O que foi medido
Da execução que decidiu este veredito. Cada linha é um valor registrado, não uma estimativa.
- Commit exato testado
- 99aee29b51a6
- Imagem do container
- sha256:cdd920bce783
O que não foi medido
A outra metade, para você ver exatamente até onde estas evidências vão. Uma lacuna é mostrada como lacuna e nunca é preenchida.
- Tempo de instalação
- a execução não informou esse tempo
- Da máquina limpa até o fim
- a tentativa foi interrompida no limite de tempo depois de 87 minutos, então nunca terminou
- Erros encontrados e corrigidos
- a tentativa foi cortada no limite de tempo antes de informar o que tinha encontrado
- Como o resultado foi comprovado
- as execuções anteriores a 2026-09-07 não registravam o comando usado para conferir o resultado
- Pico de memória da GPU
- esta execução foi em uma máquina com CPU, então não havia GPU para medir
- Tokens de modelo usados
- não registrado nesta execução
- Comportamento em uma execução longa
- cada tentativa usa as menores configurações documentadas e um orçamento de tempo fixo, então isto mede se ele executa, não como ele se comporta sob carga
- Se ele funciona de algum modo
- a tentativa não avançou o bastante para verificar algo antes do limite de tempo
O fim da gravação
As últimas linhas da sessão de terminal que decidiu este veredito, exatamente como foram gravadas.
│ │ │ Ignored build scripts: @clerk/[email protected], [email protected], │ │ [email protected], [email protected], [email protected], [email protected]. │ │ Run "pnpm approve-builds" to pick which dependencies should be allowed │ │ to run scripts. │ │ │ ╰──────────────────────────────────────────────────────────────────────────────╯ Done in 51.7s using pnpm v10.28.2 exec /bin/sh -lc 'export PATH="$HOME/.local/bin:$HOME/.cargo/bin:$PATH" cd /work/repo cargo build --workspace 2>&1 | tail -40' in /work/repo
Reproduzir a sessão inteira, cada comando desde a máquina limpa até este ponto.
Como foi testado
Um agent, um container, nenhuma ajuda humana. Ele instala o projeto do jeito que a própria documentação do projeto manda, executa o projeto e corrige o que quebra. Tudo abaixo é registrado como aconteceu: a sessão de terminal, o log e o commit exato. A metodologia completa.
Pontos fortes e limites
Fatos medidos, não opiniões. Como este conteúdo é escrito.
O que deu certo
- Nada quebrou no caminho: zero erros entre o clone e a execução.
- Licença MIT, segundo a plataforma onde o projeto está hospedado.
- Medido 2 vezes, então o resultado não é um caso isolado.
O que não deu certo, ou não se sabe
- Um agent sem limite de tempo não conseguiu fazê-lo executar.
Também testados, na mesma área
Cada um destes foi instalado e executado pela Argusic em uma máquina limpa. Nada aparece aqui sem ter sido testado.
Histórico de execuções
| testado por | tentativa | resultado | pontuação | custo USD | quando |
|---|---|---|---|---|---|
| Argusic Runner | 2/3 | Tempo esgotado | 0,00 | 0,09 | |
| Argusic Runner | 1/3 | Não executou | 0,00 | 0,14 |
Tópicos (de GitHub)
accuracyagentsai-agentscontextcontext-engineeringevalsharnessllmmcpmcp-serverobservabilityopentelemetryoptimizationself-hostedskillstoken-optimizationtool-callingtool-selectiontracingtypoescript
Incorporar o selo
Markdown para o README do projeto. Ele tem link de volta para esta página; os termos estão na página de termos.
[](https://argusic.com/subject/ratel)Perguntas
- ratel executa?
- A Argusic não conseguiu verificar se ratel executa. A Argusic o instalou e iniciou em uma máquina limpa, encontrando 0 erros no caminho, e gravou a sessão.
- Como a Argusic testou ratel?
- Em uma máquina nova e descartável, com cada comando gravado e o repositório fixado no commit 99aee29b51a6. Há 2 tentativas registradas, e a metodologia completa está na página da metodologia.
- Quanto custou testar ratel?
- A execução que produziu este veredito custou US$ 0,09: custo real de computação e de modelo, não um preço de tabela por milhão de tokens. Esse valor está registrado na página da execução.
- ratel precisa de GPU?
- Não para iniciar. A Argusic chegou a um estado de execução em uma máquina sem GPU.
- O que dá errado ao instalar ratel?
- Nada deu errado na execução registrada: zero erros entre o clone e a execução.
- Onde estão as evidências de ratel?
- Todas as 2 execuções registradas estão nesta página, cada uma com link para o seu log completo e a sua gravação do terminal, guardados com uma impressão digital sha256 para que não possam ser alterados discretamente.