jev-search-rerank-eval
zhuyansen
中英文检索重排效果评估系统,对比 Jev 重排与词法搜索、向量检索及混合融合基线,并分析评审者自循环偏差。
- 许可证
- MIT
- GitHub Stars
- 4
- 源码核查日期
- 2026-09-19
Jev 在哪一步做判断
在评估流水线中调用 Jev 判断器对 9,831 对样本和 164 个中英查询进行多级相关度评分,比较重排前后排序指标。
这个项目的用途
为搜索算法工程师提供了严谨的定性与定量对比依据,以实测实验揭示了 Jev 在跨语种技能目录搜索中的真实收益与边界。
核查范围
源码已核验。包含完整的评估套件、基准数据提取与统计脚本;评测数据集来自 Agent Skills Hub,不同领域需重新校准。
源码与说明
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/rankers/jev.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/label/jev_judge.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__init__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__main__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/catalog.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/cli.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/evaluate.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/README.md
同类项目
pg-jev
realZachi · 数据与搜索
在 PostgreSQL 查询中用自然语言给数据行筛选、分类和排序。
jev-search
superagents-lab · 数据与搜索
用自然语言搜网页:Jev 选择搜索来源和时间范围,再给返回的链接排序。
llama-index-jev
WiktorB2004 · 数据与搜索
为 LlamaIndex 提供 Jev 重排序器和路由器,给检索片段评分或选择查询工具。
jevsome-projects
ozers · 数据与搜索
一个 Jev 项目目录与发现流水线,保存接入证据,并可用 Jev 辅助分类。