jev-search-rerank-eval
zhuyansen
9,831개 쌍과 164개 한/영 쿼리를 바탕으로 Jev 리랭킹과 어휘 검색, 벡터 검색, 하이브리드 검색을 다각도로 비교 분석하는 평가 시스템입니다.
- 라이선스
- MIT
- GitHub Stars
- 4
- 소스 확인일
- 2026-09-19
Jev가 판단하는 지점
평가 파이프라인에서 Jev 판정기를 호출하여 다단계 관련도 점수를 부여하고 순위 지표와 심사 순환 편향을 측정합니다.
프로젝트의 용도
다국어 카탈로그 검색에서 이산 판단 리랭커가 임베딩 검색 대비 갖는 실제 개선 효과와 한계를 실증 데이터로 검증합니다.
검토 범위
고정 커밋 기준 소스 확인 완료. 전체 평가 도구와 CLI를 확인했으나 데이터셋은 Agent Skills Hub 기준에 맞춰져 있습니다.
소스 및 구현
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/rankers/jev.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/label/jev_judge.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__init__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__main__.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/catalog.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/cli.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/evaluate.py
- zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/README.md
같은 분류의 프로젝트
pg-jev
realZachi · 데이터 및 검색
PostgreSQL의 행을 자연어로 필터링하고 분류하며 순위를 매긴다.
jev-search
superagents-lab · 데이터 및 검색
Jev가 검색 출처와 기간을 고르고 반환된 웹 링크를 정렬하는 검색 도구다.
llama-index-jev
WiktorB2004 · 데이터 및 검색
LlamaIndex에서 검색 문단을 평가하고 쿼리 도구를 선택하는 Jev 구성 요소를 제공한다.
jevsome-projects
ozers · 데이터 및 검색
연동 근거를 저장하고 선택적으로 Jev로 분류하는 프로젝트 목록과 탐색 파이프라인.