jev-tmmluplus-eval
lianghsun
该项目通过 Jev 的四选一作答接口对 TMMLU+ v1.1 繁体中文基准进行评测与计分。
- 许可证
- MIT
- GitHub Stars
- 3
- 源码核查日期
- —
Jev 在哪一步做判断
Jev 对每道 TMMLU+ 题目在 A、B、C、D 四个选项中做出四选一单选决策并返回校准概率。
这个项目的用途
把语义判断接到已有的命令行工作流。
核查范围
根据仓库简介与 README 自动提炼;决策机制为规则归类,待人工复核,未独立测试性能。
源码与说明
同类项目
SemDecide
sharziki · 命令行与流水线
基于 Python 的语义判断 CLI,可给文本或 JSONL 管道做判断、分类、打分和过滤。
TypeSafe AI Playground
markjaquith · 命令行与流水线
Rust 命令行实验集,可筛查医疗隐私信息、检查代码注释、分析语气并分类行业和职业。
jev-cli
tumf · 命令行与流水线
为 Jev 提供 CLI 和 stdio MCP 入口,输入文本或 JSON,输出结构化判断。
jev-cli
jtsang4 · 命令行与流水线
在终端里问 Jev 判断题。输入文本或 JSON,再给出分类、是非或评分问题,拿回脚本能直接读取的 JSON。