英語の原文: https://argusic.com/subject/ethora

ethora

Ethora チャット / メッセージングプラットフォーム向けの SDK モノレポ。(1) フロントエンドスタック用の SDK を選択します。(2) 手動または ethora-setup で統合します。(3) 必要に応じてアプリ設定を構成し、AI エージェントなどをデプロイします。サーバー: ethora.com クラウド(無料)、セルフホスト型(AWS、Docker、Helm、Cloudron)、または SLA 付きのマネージド専用サーバー。すべてのオプション: ethora.com/get

モックで動作するソース: GitHubホームページJavaScriptApache-2.0コミット 0f289ba4b045

JavaScript、Apache-2.0 ライセンス. プロジェクト自身の表記: ai chat、chat、chat engine、chat sdk、chat widget、chatbot、developer tools、ejabberd.

ethora は、依存するサービスを代わりのものに置き換えたうえで動作します。Argusic のエージェントが GPU のないクリーンなマシンで 77 分でインストールし、8 件のエラーに遭遇してすべてを自力で修正し、セッション全体が記録されました。

In this container the Ethora monorepo installs and runs: MCP CLI (stdio+HTTP), backend-integration SDK (13 tests), app-reactjs (build+serve 200), playground (build+serve 200), setup CLI (works end-to-end against a local mock), features renderer, and the React Native SDK test suite (880/881) all execute;

クリーンなマシンでエージェントが最終的に得た結果 (エージェント自身の言葉)。 計測方法

Argusic が毎回新しいマシンで計測しています。 すべての数値はその証拠にリンクしています。 Argusic スコア 100 点中 92 点 (このプロジェクトの実行スコアの平均)。

概要

判定
モックで動作する
Argusic スコア
92 / 100
検証した実行のコスト
0.50 USD (実測)
記録された実行
1
最終テスト
スター
552
フォーク
112
未解決の Issue
1
ウォッチャー
12
サイズ
486 MB
作成日
最終プッシュ

プロジェクトのデータは GitHub から取得 (このページの冒頭にリンクあり)、更新日 。テストデータは Argusic によるもので (CC BY 4.0)、すべての数値は、完全なログ、録画、それらの sha256 ハッシュを含む実行ページにリンクしています。

計測した内容

この判定を決めた実行から取得しています。 各行は記録された値であり、推定値ではありません。

ethora のテスト中に各失敗で失われた時間 (記録された実行から作成)
各バーはエージェントが記録した失敗と、それにかかった時間です。この実行のデータのみから描いています。

うまくいかなかった点 (エージェント自身の言葉)

エージェント自身の言葉を、深刻なものから順に掲載しています。助言に書き換えることはありません。

  • sdk-reactjs production build still OOM-killed by the container during vite bundle phase (peak ~1.45GB RSS vs 2GB total incl. agent) even at max-old-space-size=150030 分
  • sdk-reactjs: npm install fails (exit 137, OOM) because the package.json 'prepare' script runs two full tsc+vite builds; container has 2GB RAM, no swap20 分
  • setup CLI verification: initial scripted drive accidentally used the real Cloud QA API (network reachable) instead of my mock, writing a real profile18 分
  • api/tags.js was invalid JavaScript (missing commas between exported tag objects), causing api/index.js (Swagger middleware) to throw SyntaxError and the api/ docs component to be unusable12 分
  • sdk-reactjs build fails: Vite 7.3.1 (pinned by package.json) requires Node >=20.19, container had Node 18.19.1 and no nvm; system root unavailable6 分
  • sdk-reactnative: hooksBundle.test.tsx 'usePendingNotification' test fails deterministically (asserts AsyncStorage cleared before the asynchronous effect completes); repo test at __tests__/hooksBundle.test.tsx:3356 分
インストール時間
77 分
クリーンなマシンから完了まで
78 分
遭遇したエラーと修正したエラー
8 件に遭遇、8 件を人の手を借りずに修正
結果の証明方法
npx vitest run (sdk-reactjs) -> 194/196 files, 1274 passed; sdk-reactnative npx jest -> 880 passed/1 failed (hooksBundle race); backend-integration npm test -> 13 passed; MCP initialize handshake returned serverInfo 26.9.5; app-reactjs vite build ok + vite preview -> HTTP 200 on / and /assets/index.js; playground next build ok + next start -> HTTP 200 on / and /api/config; setup CLI driven against mock 127.0.0.1:8899 -> all 19 steps OK and profile saved; api harness /api-docs/ -> 200 and /swagger.json -> 200 (10 tags, 110 paths)
使用したモデルのトークン
2,266,084
テストした正確なコミット
0f289ba4b045
コンテナイメージ
sha256:cdd920bce783

計測していない内容

残りの半分です。この証拠がどこまでを示すのかを正確に確認できます。欠けている部分は欠けているものとして表示し、埋めることはありません。

GPU メモリのピーク
CPU マシンで実行したため、サンプリングする GPU がありませんでした
長時間の実行での振る舞い
各試行はドキュメントにある最小の設定と決まった時間予算を使うため、計測しているのは動作するかどうかであり、負荷のもとでどう持ちこたえるかではありません
実際のサービスに対する振る舞い
この実行は代わりのサービスに対してのみ検証されました

録画の最後

この判定を決めたターミナルセッションの最後の行を、記録されたとおりに表示しています。

  \"test_depth\": \"tier2_mock\",
  \"notes\": \"14 submodules fetched; npm installs done for mcp-cli(setup,backend-integration,sdk-r…
  \"verified_how\": \"npx vitest run (sdk-reactjs) -> 194/196 files, 1274 passed; sdk-reactnative n…
  \"final_state\": \"In this container the Ethora monorepo installs and runs: MCP CLI (stdio+HTTP),…
}
print(json.dumps(result))
PY
python3 /tmp/summarize.py" in /work/repo
 succeeded in 0ms:
{"install_succeeded": true, "launch_succeeded": true, "install_minutes": 77, "errors": [{"msg": "sd…
tokens used
2,266,084

セッション全体を再生 (クリーンなマシンからこの時点までのすべてのコマンド)。

テスト方法

1 つのエージェント、1 つのコンテナで、人の手は借りません。エージェントはプロジェクト自身のドキュメントに書かれた方法でインストールし、実行し、壊れた部分を修正します。以下はすべて、実際に起きたとおりに記録されています: ターミナルセッション、ログ、そして正確なコミットです。 評価方法の全文.

強みと限界

意見ではなく、計測された事実です。コンテンツの作成方法.

うまくいった点

  • 77 分でインストールできました。
  • 8 件のエラーすべてから、人の介入なしに回復しました。失敗が解決できる程度にはドキュメント化されていることを示しています。
  • ホストの報告によると、ライセンスは Apache-2.0 です。

うまくいかなかった点、または不明な点

  • 代わりのサービスに対してのみ実行状態に達したため、実際のサービスで動作することはここでは証明されていません。
  • これまでの計測は 1 回です。1 回の試行は動作し得ることを示すだけで、安定して動作することは示しません。

同じ分野でテストしたプロジェクト

ここに挙げたものはすべて、Argusic がクリーンなマシンにインストールして実行しました。テストしていないものは表示されません。

実行履歴

テスト担当試行結果スコアコスト (USD)日時
Argusic Runner1/3モックで動作した92.000.50

トピック (出典: GitHub)

ai-chatchatchat-enginechat-sdkchat-widgetchatbotdeveloper-toolsejabberdethoralow-codemcpmessagingmessenger-platformopen-sourceragreactreact-nativereactjswalletxmpp

バッジを埋め込む

プロジェクトの README に貼る Markdown です。バッジはこのページにリンクします。利用条件: 利用規約ページ.

[![Tested by Argusic](https://argusic.com/badge/ethora.svg)](https://argusic.com/subject/ethora)

質問

ethora は動作しますか?
ethora は、外部サービスの代わりにモックを使って動作します. Argusic はクリーンなマシンで 77 分でインストールして起動し、途中で 8 件のエラーに遭遇し、セッションを記録しました。
Argusic は ethora をどのようにテストしましたか?
新しい使い捨てのマシンで、すべてのコマンドを記録しながらテストしました (リポジトリはコミット 0f289ba4b045 に固定)。記録された試行は 1 回で、手順の全体は評価方法のページに掲載しています。
ethora のテストにはいくらかかりましたか?
この判定を出した実行のコストは 0.50 USD です: 100 万トークンあたりの定価ではなく、実際の計算資源とモデルのコストです。その実行のページに記録されています。
ethora のインストールにはどのくらい時間がかかりますか?
この判定を決めた実行では、クリーンなマシンから実行状態まで 77 分でした。これは 1 回の計測された試行であり、平均ではありません。
ethora には GPU が必要ですか?
起動には必要ありません。Argusic は GPU のないマシンで実行状態に達しました。
ethora のインストールでは何がうまくいきませんか?
記録された実行では 8 件の問題が発生しました。そのうち 8 件は人の手を借りずに修正されました。それぞれの問題と、かかった時間をこのページに掲載しています。
ethora の証拠はどこにありますか?
記録された実行をこのページに掲載しており、それぞれが完全なログとターミナル録画にリンクしています。録画は sha256 フィンガープリントとともに保存されているため、こっそり改変することはできません。

Discussion