VectorDBBench は動作しますか?

はい。VectorDBBench は動作します. Argusic はクリーンなマシンで 12 分でインストールして起動し、途中で 6 件のエラーに遭遇し、セッションを記録しました。

Argusic は VectorDBBench をどのようにテストしましたか?

新しい使い捨てのマシンで、すべてのコマンドを記録しながらテストしました (リポジトリはコミット 1760db148b95 に固定)。記録された試行は 2 回で、手順の全体は評価方法のページに掲載しています。

VectorDBBench のテストにはいくらかかりましたか?

この判定を出した実行のコストは 0.28 USD です: 100 万トークンあたりの定価ではなく、実際の計算資源とモデルのコストです。その実行のページに記録されています。

VectorDBBench のインストールにはどのくらい時間がかかりますか?

この判定を決めた実行では、クリーンなマシンから実行状態まで 12 分でした。これは 1 回の計測された試行であり、平均ではありません。

VectorDBBench には GPU が必要ですか?

起動には必要ありません。Argusic は GPU のないマシンで実行状態に達しました。

VectorDBBench のインストールでは何がうまくいきませんか?

記録された実行では 6 件の問題が発生しました。そのうち 6 件は人の手を借りずに修正されました。それぞれの問題と、かかった時間をこのページに掲載しています。

VectorDBBench の証拠はどこにありますか?

記録された 2 回の実行すべてをこのページに掲載しており、それぞれが完全なログとターミナル録画にリンクしています。録画は sha256 フィンガープリントとともに保存されているため、こっそり改変することはできません。

英語の原文: https://argusic.com/subject/vectordbbench

VectorDBBench

ベクトルデータベース向けベンチマーク。

動作するソース: GitHub ホームページPythonMITコミット 1760db148b95

Python、MIT ライセンス. プロジェクト自身の表記: benchmark、cost effectiveness、performance、vector database、vector search、vectordb.

VectorDBBench は動作します。Argusic のエージェントが GPU のないクリーンなマシンで 12 分でインストールし、6 件のエラーに遭遇してすべてを自力で修正し、セッション全体が記録されました。

vectordb-bench installed from source in venv, 247 of 256 unit tests pass, CLI and REST API both operable
クリーンなマシンでエージェントが最終的に得た結果 (エージェント自身の言葉)。計測方法

Argusic が毎回新しいマシンで計測しています。 すべての数値はその証拠にリンクしています。 Argusic スコア 100 点中 60 点 (このプロジェクトの実行スコアの平均)。

概要

判定: 動作する
Argusic スコア: 60 / 100
検証した実行のコスト: 0.28 USD (実測)
記録された実行: 2
最終テスト: 2026-10-10
スター: 1,200
フォーク: 451
未解決の Issue: 179
ウォッチャー: 14
サイズ: 5 MB
作成日: 2023-05-10
最終プッシュ: 2026-11-04

プロジェクトのデータは GitHub から取得 (このページの冒頭にリンクあり)、更新日 2026-11-04。テストデータは Argusic によるもので (CC BY 4.0)、すべての数値は、完全なログ、録画、それらの sha256 ハッシュを含む実行ページにリンクしています。

計測した内容

この判定を決めた実行から取得しています。各行は記録された値であり、推定値ではありません。

VectorDBBench のテスト中に各失敗で失われた時間 (記録された実行から作成) — 各バーはエージェントが記録した失敗と、それにかかった時間です。この実行のデータのみから描いています。

うまくいかなかった点 (エージェント自身の言葉)

エージェント自身の言葉を、深刻なものから順に掲載しています。助言に書き換えることはありません。

Missing optional deps: opensearch-py, chromadb, pinecone, elasticsearch, mysql-connector-python, turbopuffer, pyvespa, flask3 分
PEP 668 externally managed environment blocks system pip install2 分
test_elasticsearch_cloud.py imports broken ElasticsearchConfig from wrong module2 分
test_bench_runner.py uses DB.Milvus.config() and CaseType.PerformanceSZero which don't exist2 分
test_fts_filter_runner.py mocks lack case_config attr needed by CaseRunner2 分
test_models.py merge test globs legacy dbPrices.json without run_id key1 分

インストール時間: 12 分
クリーンなマシンから完了まで: 22 分
遭遇したエラーと修正したエラー: 6 件に遭遇、6 件を人の手を借りずに修正
結果の証明方法: pytest returned '247 passed, 1 skipped' across runnable unit tests; vectordbbench --help exits 0; init_bench_rest Flask server starts and /get_status returns 200
使用したモデルのトークン: 207,659
テストした正確なコミット: 1760db148b95
コンテナイメージ: sha256:cdd920bce783

計測していない内容

残りの半分です。この証拠がどこまでを示すのかを正確に確認できます。欠けている部分は欠けているものとして表示し、埋めることはありません。

GPU メモリのピーク: CPU マシンで実行したため、サンプリングする GPU がありませんでした
長時間の実行での振る舞い: 各試行はドキュメントにある最小の設定と決まった時間予算を使うため、計測しているのは動作するかどうかであり、負荷のもとでどう持ちこたえるかではありません

録画の最後

この判定を決めたターミナルセッションの最後の行を、記録されたとおりに表示しています。

**REST API verification:** `init_bench_rest --help` starts the Flask server, `/get_status` returns …
exec
/bin/sh -lc "cat << 'ENDOFJSON'
{\"install_succeeded\": true, \"launch_succeeded\": true, \"install_minutes\": 12, \"errors\": [{\"…
ENDOFJSON" in /work/repo
 succeeded in 0ms:
{"install_succeeded": true, "launch_succeeded": true, "install_minutes": 12, "errors": [{"msg": "PE…
`vectordb-bench` installed and verified. 247 tests pass, CLI works, REST API starts. Fixed 6 issues…
2026-10-10T02:27:53.449943Z ERROR codex_core::session: failed to record rollout items: thread 01a12…
tokens used
207,659
`vectordb-bench` installed and verified. 247 tests pass, CLI works, REST API starts. Fixed 6 issues…

セッション全体を再生 (クリーンなマシンからこの時点までのすべてのコマンド)。

テスト方法

1 つのエージェント、1 つのコンテナで、人の手は借りません。エージェントはプロジェクト自身のドキュメントに書かれた方法でインストールし、実行し、壊れた部分を修正します。以下はすべて、実際に起きたとおりに記録されています: ターミナルセッション、ログ、そして正確なコミットです。評価方法の全文.

強みと限界

意見ではなく、計測された事実です。コンテンツの作成方法.

うまくいった点

クリーンなマシンで実行状態に達し、セッションが記録されました。
12 分でインストールできました。
6 件のエラーすべてから、人の介入なしに回復しました。失敗が解決できる程度にはドキュメント化されていることを示しています。
GPU なしで動作したため、起動に GPU は必要ありません。
ホストの報告によると、ライセンスは MIT です。
2 回計測しているため、一度きりの結果ではありません。

適している用途

ノートパソコンや小さなサーバーで試す場合: GPU なしで実行状態に達しました。

同じ分野でテストしたプロジェクト

ここに挙げたものはすべて、Argusic がクリーンなマシンにインストールして実行しました。テストしていないものは表示されません。

実行履歴

テスト担当	試行	結果	スコア	コスト (USD)	日時
Argusic Runner	2/3	動作した	100.00	0.28	2026-10-10 02:28 UTC
Argusic Runner	1/3	動作しなかった	20.00	0.30	2026-10-10 01:57 UTC

トピック (出典: GitHub)

benchmark cost-effectiveness performance vector-database vector-search vectordb

バッジを埋め込む

プロジェクトの README に貼る Markdown です。バッジはこのページにリンクします。利用条件: 利用規約ページ.

[![Tested by Argusic](https://argusic.com/badge/VectorDBBench.svg)](https://argusic.com/subject/vectordbbench)

質問

VectorDBBench は動作しますか?: はい。VectorDBBench は動作します. Argusic はクリーンなマシンで 12 分でインストールして起動し、途中で 6 件のエラーに遭遇し、セッションを記録しました。
Argusic は VectorDBBench をどのようにテストしましたか?: 新しい使い捨てのマシンで、すべてのコマンドを記録しながらテストしました (リポジトリはコミット 1760db148b95 に固定)。記録された試行は 2 回で、手順の全体は評価方法のページに掲載しています。
VectorDBBench のテストにはいくらかかりましたか?: この判定を出した実行のコストは 0.28 USD です: 100 万トークンあたりの定価ではなく、実際の計算資源とモデルのコストです。その実行のページに記録されています。
VectorDBBench のインストールにはどのくらい時間がかかりますか?: この判定を決めた実行では、クリーンなマシンから実行状態まで 12 分でした。これは 1 回の計測された試行であり、平均ではありません。
VectorDBBench には GPU が必要ですか?: 起動には必要ありません。Argusic は GPU のないマシンで実行状態に達しました。
VectorDBBench のインストールでは何がうまくいきませんか?: 記録された実行では 6 件の問題が発生しました。そのうち 6 件は人の手を借りずに修正されました。それぞれの問題と、かかった時間をこのページに掲載しています。
VectorDBBench の証拠はどこにありますか?: 記録された 2 回の実行すべてをこのページに掲載しており、それぞれが完全なログとターミナル録画にリンクしています。録画は sha256 フィンガープリントとともに保存されているため、こっそり改変することはできません。