英語の原文: https://argusic.com/subject/vim-anywhere
vim-anywhere
Vim を、ずっと使いたかったあらゆる場所で使いましょう。
モックで動作するソース: GitHubShellMITコミット 724bcc4f8f84
Shell、MIT ライセンス. プロジェクト自身の表記: keyboard shortcuts、osx、shell、text editor、vim.
vim-anywhere は、依存するサービスを代わりのものに置き換えたうえで動作します。Argusic のエージェントが GPU のないクリーンなマシンで 1.5 分でインストールし、エラーに一度も遭遇せず、セッション全体が記録されました。
All 18 BATS tests pass: 8 install tests (macOS mvim present/missing, Linux gvim/xclip missing, unsupported OS, requires git), 5 run tests (temp dir creation, .path/mvim failure, clipboard copy, custom vimrc), 5 uninstall tests (macOS path/workflow removal, missing path, Linux gsettings/gconftool).
クリーンなマシンでエージェントが最終的に得た結果 (エージェント自身の言葉)。 計測方法
Argusic が毎回新しいマシンで計測しています。 すべての数値はその証拠にリンクしています。 Argusic スコア 100 点中 92 点 (このプロジェクトの実行スコアの平均)。
概要
プロジェクトのデータは GitHub から取得 (このページの冒頭にリンクあり)、更新日 。テストデータは Argusic によるもので (CC BY 4.0)、すべての数値は、完全なログ、録画、それらの sha256 ハッシュを含む実行ページにリンクしています。
計測した内容
この判定を決めた実行から取得しています。 各行は記録された値であり、推定値ではありません。
- インストール時間
- 2 分
- クリーンなマシンから完了まで
- 34 分
- 遭遇したエラーと修正したエラー
- 0 件に遭遇、0 件を人の手を借りずに修正
- 結果の証明方法
- bats test/ exited 0, 18/18 tests passed
- 使用したモデルのトークン
- 931,383
- テストした正確なコミット
- 724bcc4f8f84
- コンテナイメージ
- sha256:cdd920bce783
計測していない内容
残りの半分です。この証拠がどこまでを示すのかを正確に確認できます。欠けている部分は欠けているものとして表示し、埋めることはありません。
- GPU メモリのピーク
- CPU マシンで実行したため、サンプリングする GPU がありませんでした
- 長時間の実行での振る舞い
- 各試行はドキュメントにある最小の設定と決まった時間予算を使うため、計測しているのは動作するかどうかであり、負荷のもとでどう持ちこたえるかではありません
- 実際のサービスに対する振る舞い
- この実行は代わりのサービスに対してのみ検証されました
録画の最後
この判定を決めたターミナルセッションの最後の行を、記録されたとおりに表示しています。
ok 17 uninstall: removes gsettings binding on Linux ok 18 uninstall: uses gconftool when available on Linux === Checking if bin/run would work on Linux === === Checking script permissions === -rwxr-xr-x 1 runner runner 2042 Sep 30 19:15 bin/run -rwxr-xr-x 1 runner runner 4028 Sep 30 19:15 install -rwxr-xr-x 1 runner runner 1195 Sep 30 19:15 uninstall -rwxr-xr-x 1 runner runner 974 Sep 30 19:15 update The test suite passed on first run with no errors. Let me compile the final result. tokens used 931,383 The test suite passed on first run with no errors. Let me compile the final result.
セッション全体を再生 (クリーンなマシンからこの時点までのすべてのコマンド)。
テスト方法
1 つのエージェント、1 つのコンテナで、人の手は借りません。エージェントはプロジェクト自身のドキュメントに書かれた方法でインストールし、実行し、壊れた部分を修正します。以下はすべて、実際に起きたとおりに記録されています: ターミナルセッション、ログ、そして正確なコミットです。 評価方法の全文.
強みと限界
意見ではなく、計測された事実です。コンテンツの作成方法.
うまくいった点
- 1.5 分でインストールできました。
- 途中で何も壊れませんでした: クローンから実行までエラーは 0 件です。
- ホストの報告によると、ライセンスは MIT です。
うまくいかなかった点、または不明な点
- 代わりのサービスに対してのみ実行状態に達したため、実際のサービスで動作することはここでは証明されていません。
- これまでの計測は 1 回です。1 回の試行は動作し得ることを示すだけで、安定して動作することは示しません。
同じ分野でテストしたプロジェクト
ここに挙げたものはすべて、Argusic がクリーンなマシンにインストールして実行しました。テストしていないものは表示されません。
実行履歴
トピック (出典: GitHub)
バッジを埋め込む
プロジェクトの README に貼る Markdown です。バッジはこのページにリンクします。利用条件: 利用規約ページ.
[](https://argusic.com/subject/vim-anywhere)質問
- vim-anywhere は動作しますか?
- vim-anywhere は、外部サービスの代わりにモックを使って動作します. Argusic はクリーンなマシンで 2 分でインストールして起動し、途中で 0 件のエラーに遭遇し、セッションを記録しました。
- Argusic は vim-anywhere をどのようにテストしましたか?
- 新しい使い捨てのマシンで、すべてのコマンドを記録しながらテストしました (リポジトリはコミット 724bcc4f8f84 に固定)。記録された試行は 1 回で、手順の全体は評価方法のページに掲載しています。
- vim-anywhere のテストにはいくらかかりましたか?
- この判定を出した実行のコストは 0.12 USD です: 100 万トークンあたりの定価ではなく、実際の計算資源とモデルのコストです。その実行のページに記録されています。
- vim-anywhere のインストールにはどのくらい時間がかかりますか?
- この判定を決めた実行では、クリーンなマシンから実行状態まで 1.5 分でした。これは 1 回の計測された試行であり、平均ではありません。
- vim-anywhere には GPU が必要ですか?
- 起動には必要ありません。Argusic は GPU のないマシンで実行状態に達しました。
- vim-anywhere のインストールでは何がうまくいきませんか?
- 記録された実行では何も起きませんでした: クローンから実行までエラーは 0 件です。
- vim-anywhere の証拠はどこにありますか?
- 記録された実行をこのページに掲載しており、それぞれが完全なログとターミナル録画にリンクしています。録画は sha256 フィンガープリントとともに保存されているため、こっそり改変することはできません。