zhuyansen /
Data & Searchjev-search-rerank-eval
中英文检索重排效果评估系统,对比 Jev 重排与词法搜索、向量检索及混合融合基线,并分析评审者自循环偏差。
License: MITLanguage: Python最近提交:2026/9/18#search-retrieval#evaluation-benchmarks#classification-ranking
JEV 在该架构中的决策位置
在评估流水线中调用 Jev 判断器对 9,831 对样本和 164 个中英查询进行多级相关度评分,比较重排前后排序指标。
核心架构收益
为搜索算法工程师提供了严谨的定性与定量对比依据,以实测实验揭示了 Jev 在跨语种技能目录搜索中的真实收益与边界。
固定版本源码审校依据
本站人工核验过该仓库的以下固定 commit 源码文件,确认 Jev 决策逻辑的真实接入方式:
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/rankers/jev.py#L1-L46
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/label/jev_judge.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__init__.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/__main__.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/catalog.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/cli.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/src/jse/evaluate.py
zhuyansen/jev-search-rerank-eval/blob/c896f14e944182e17a002dd7546f06ba3788d586/README.md
审校说明与基准口径:源码已核验。包含完整的评估套件、基准数据提取与统计脚本;评测数据集来自 Agent Skills Hub,不同领域需重新校准。
快速克隆仓库
git clone https://github.com/zhuyansen/jev-search-rerank-eval.git
同分类相关项目推荐(数据与搜索)
realZachi
pg-jev
Data & SearchPostgreSQLShell
在 PostgreSQL 查询中用自然语言给数据行筛选、分类和排序。
JEV 在这里做什么
将行内容交给 Jev,返回是否匹配、类别或等级分数,供 SQL 条件与排序使用。
↳ 把语义条件与已有 SQL 查询放在一起,并复用缓存结果。
#database-vector#classification-ranking
10✓ 3 处源码证据
查看详情 →superagents-lab
jev-search
Data & SearchMITTypeScript
用自然语言搜网页:Jev 选择搜索来源和时间范围,再给返回的链接排序。
JEV 在这里做什么
判断查询意图、来源与时间条件,并给各条搜索结果打相关性分数。
↳ 保留链接、摘要、可调整过滤条件和来源失败提示。
#search-retrieval#classification-ranking
22✓ 2 处源码证据
查看详情 →WiktorB2004
llama-index-jev
Data & SearchMITPython
为 LlamaIndex 提供 Jev 重排序器和路由器,给检索片段评分或选择查询工具。
JEV 在这里做什么
用 Score 给候选片段评相关性,用 Choice 选择查询引擎或工具。
↳ 把 Jev 判断接入已有的检索与查询流程。
#search-retrieval#classification-ranking#llm-routing-cost
✓ 2 处源码证据
查看详情 →