英語の原文: https://argusic.com/subject/dsh-better-sidebar

DSH-better-sidebar

オープンなサイドバー基盤であり、サードパーティの拡張機能が新しいサイドバーページを登録することをサポートします。ファイルレンダリング/編集、ターミナル、サイドチャット、Git、サブエージェントページを内蔵しています。

モックで動作するソース: GitHubTypeScriptMITコミット 1499502bfa63

TypeScript、MIT ライセンス. プロジェクト自身の表記: deepseek、deepseek harness、dsh、dsh better sidebar、dsh plugin、dsh plugins、sidebar.

DSH-better-sidebar は、依存するサービスを代わりのものに置き換えたうえで動作します。Argusic のエージェントが GPU のないクリーンなマシンで 25 分でインストールし、5 件のエラーに遭遇してすべてを自力で修正し、セッション全体が記録されました。

dependencies install, typecheck, lint, and build all succeed; 67 unit tests pass; 18 locale files synced to 519 keys each; git identity configured

クリーンなマシンでエージェントが最終的に得た結果 (エージェント自身の言葉)。 計測方法

Argusic が毎回新しいマシンで計測しています。 すべての数値はその証拠にリンクしています。 Argusic スコア 100 点中 56 点 (このプロジェクトの実行スコアの平均)。

概要

判定
モックで動作する
Argusic スコア
56 / 100
検証した実行のコスト
0.44 USD (実測)
記録された実行
2
最終テスト
スター
4,890
フォーク
463
未解決の Issue
216
ウォッチャー
10
サイズ
9 MB
作成日
最終プッシュ

プロジェクトのデータは GitHub から取得 (このページの冒頭にリンクあり)、更新日 。テストデータは Argusic によるもので (CC BY 4.0)、すべての数値は、完全なログ、録画、それらの sha256 ハッシュを含む実行ページにリンクしています。

計測した内容

この判定を決めた実行から取得しています。 各行は記録された値であり、推定値ではありません。

DSH-better-sidebar のテスト中に各失敗で失われた時間 (記録された実行から作成)
各バーはエージェントが記録した失敗と、それにかかった時間です。この実行のデータのみから描いています。

うまくいかなかった点 (エージェント自身の言葉)

エージェント自身の言葉を、深刻なものから順に掲載しています。助言に書き換えることはありません。

  • Node.js v18 did not satisfy pnpm 11 requirement (>=22.13); pnpm 9 used instead then Node upgraded via 'n' to v225 分
  • All 18 non-zh locale files missing 6 keys each (pluginAgentPersonaName, pluginAgentPersonaDesc, pluginTylinaName, pluginTylinaDesc, pluginMnemeName, pluginMnemeDesc)5 分
  • Japanese locale file missing pluginMnemeName and pluginMnemeDesc keys, key-set equality test failed2 分
  • git identity not configured, causing revert/cherry-pick tests to fail1 分
  • market-manifest pack test very slow (288s) and plugin-meta pack test also slow; E2E tests need real DSH host
インストール時間
25 分
クリーンなマシンから完了まで
77 分
遭遇したエラーと修正したエラー
5 件に遭遇、5 件を人の手を借りずに修正
結果の証明方法
pnpm test --reporter=verbose tests/locales.spec.ts tests/smoke.spec.ts tests/api-surface.spec.ts tests/market-manifest.spec.ts exit code 0, 67 tests passed; full run timeout but partial runs show 207+ passed with no failures
使用したモデルのトークン
825,793
テストした正確なコミット
1499502bfa63
コンテナイメージ
sha256:cdd920bce783

計測していない内容

残りの半分です。この証拠がどこまでを示すのかを正確に確認できます。欠けている部分は欠けているものとして表示し、埋めることはありません。

GPU メモリのピーク
CPU マシンで実行したため、サンプリングする GPU がありませんでした
長時間の実行での振る舞い
各試行はドキュメントにある最小の設定と決まった時間予算を使うため、計測しているのは動作するかどうかであり、負荷のもとでどう持ちこたえるかではありません
実際のサービスに対する振る舞い
この実行は代わりのサービスに対してのみ検証されました

録画の最後

この判定を決めたターミナルセッションの最後の行を、記録されたとおりに表示しています。

**Installation**: Set up Node.js v22.23.3 (via `n`), installed pnpm 9.15.9, ran `pnpm install --fro…
**Issues found and fixed**:
1. **Node.js too old (v18)** — pnpm 11 required Node >=22. Installed **pnpm 9** (compatible with No…
2. **Git identity missing** — `git config --global user.name` and `user.email` were not set, causin…
3. **Japanese locale file missing 2 keys** (`pluginMnemeName`, `pluginMnemeDesc`) — `locales.spec.t…
4. **All 18 non-zh locale files missing 6 keys each** — `pluginAgentPersonaName`, `pluginAgentPerso…
**Test results**: 67+ tests pass across `locales.spec.ts` (20), `smoke.spec.ts` (44), `api-surface.…
exec
/bin/sh -lc "echo \"ARGUSIC_RESULT: {\\\"install_succeeded\\\": true, \\\"launch_succeeded\\\": tru…
 succeeded in 0ms:
tokens used
825,793

セッション全体を再生 (クリーンなマシンからこの時点までのすべてのコマンド)。

テスト方法

1 つのエージェント、1 つのコンテナで、人の手は借りません。エージェントはプロジェクト自身のドキュメントに書かれた方法でインストールし、実行し、壊れた部分を修正します。以下はすべて、実際に起きたとおりに記録されています: ターミナルセッション、ログ、そして正確なコミットです。 評価方法の全文.

強みと限界

意見ではなく、計測された事実です。コンテンツの作成方法.

うまくいった点

  • 25 分でインストールできました。
  • 5 件のエラーすべてから、人の介入なしに回復しました。失敗が解決できる程度にはドキュメント化されていることを示しています。
  • ホストの報告によると、ライセンスは MIT です。
  • 2 回計測しているため、一度きりの結果ではありません。

うまくいかなかった点、または不明な点

  • 代わりのサービスに対してのみ実行状態に達したため、実際のサービスで動作することはここでは証明されていません。

同じ分野でテストしたプロジェクト

ここに挙げたものはすべて、Argusic がクリーンなマシンにインストールして実行しました。テストしていないものは表示されません。

実行履歴

テスト担当試行結果スコアコスト (USD)日時
Argusic Runner2/3モックで動作した92.000.44
Argusic Runner1/3動作しなかった20.000.06

トピック (出典: GitHub)

deepseekdeepseek-harnessdshdsh-better-sidebardsh-plugindsh-pluginssidebar

バッジを埋め込む

プロジェクトの README に貼る Markdown です。バッジはこのページにリンクします。利用条件: 利用規約ページ.

[![Tested by Argusic](https://argusic.com/badge/DSH-better-sidebar.svg)](https://argusic.com/subject/dsh-better-sidebar)

質問

DSH-better-sidebar は動作しますか?
DSH-better-sidebar は、外部サービスの代わりにモックを使って動作します. Argusic はクリーンなマシンで 25 分でインストールして起動し、途中で 5 件のエラーに遭遇し、セッションを記録しました。
Argusic は DSH-better-sidebar をどのようにテストしましたか?
新しい使い捨てのマシンで、すべてのコマンドを記録しながらテストしました (リポジトリはコミット 1499502bfa63 に固定)。記録された試行は 2 回で、手順の全体は評価方法のページに掲載しています。
DSH-better-sidebar のテストにはいくらかかりましたか?
この判定を出した実行のコストは 0.44 USD です: 100 万トークンあたりの定価ではなく、実際の計算資源とモデルのコストです。その実行のページに記録されています。
DSH-better-sidebar のインストールにはどのくらい時間がかかりますか?
この判定を決めた実行では、クリーンなマシンから実行状態まで 25 分でした。これは 1 回の計測された試行であり、平均ではありません。
DSH-better-sidebar には GPU が必要ですか?
起動には必要ありません。Argusic は GPU のないマシンで実行状態に達しました。
DSH-better-sidebar のインストールでは何がうまくいきませんか?
記録された実行では 5 件の問題が発生しました。そのうち 5 件は人の手を借りずに修正されました。それぞれの問題と、かかった時間をこのページに掲載しています。
DSH-better-sidebar の証拠はどこにありますか?
記録された 2 回の実行すべてをこのページに掲載しており、それぞれが完全なログとターミナル録画にリンクしています。録画は sha256 フィンガープリントとともに保存されているため、こっそり改変することはできません。

Discussion