jev-search-rerank-eval
zhuyansen
9,831 件のペアと 164 件の日英クエリを用いて、Jev リランクと単語検索、ベクトル検索、ハイブリッド検索を比較検証する評価システムです。
- ライセンス
- MIT
- GitHub Stars
- 4
- ソース確認日
- 2026-09-19
Jev が判断する箇所
評価パイプライン内で Jev 判定器を呼び出し、複数段階の関連度スコアを算出して順位指標や判定者の循環バイアスを測定します。
このプロジェクトの用途
多言語カタログ検索において、離散判断リランカーがベクトル検索に対してどの程度優位性を持つかを実証的に明らかにします。
確認の範囲
固定コミットのソースを確認済み。評価スイートと CLI スクリプトを確認。データセットは Agent Skills Hub に準拠しています。
ソースと実装
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/rankers/jev.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/label/jev_judge.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__init__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__main__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/catalog.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/cli.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/evaluate.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/README.md
同じカテゴリのプロジェクト
pg-jev
realZachi · データ・検索
PostgreSQL の行を自然言語で絞り込み、分類、順位付けする。
jev-search
superagents-lab · データ・検索
Jev が検索元と期間を選び、取得したウェブリンクを並べ替える検索ツール。
llama-index-jev
WiktorB2004 · データ・検索
LlamaIndex 向けに、検索文章の採点と問い合わせ先の選択を行う Jev 部品を提供する。
jevsome-projects
ozers · データ・検索
接続の根拠を保存し、任意で Jev に分類させるプロジェクト一覧と探索パイプライン。