意图路由
zh-CN
preserve paraphrase
同一道题,谁判断得又准又快?
d_route_0001_para_zh
· condense versus create
· pair group pg_route_0001
6
参评模型
6/6
答对模型
382
ms
本题最快 · Miya-Jev
Input
输入状态
模型看到了什么
channel
桌面客户端
current_message
帮我把上周项目周会的记录精简成一页待办事项清单
Gold answer
choice
判断该请求属于哪一类任务
程序金标
summarize_existing
请求要求把已有的会议记录变成更短的结构化结果
“精简成一页待办事项清单”
Model comparison
6 个模型,速度与判断同时对照
概率条越长代表模型越确信;速度条越长代表越接近本题最快模型。
1
Miya-Jev
米羊
最快
最终判断
summarize_existing
正确
summarize_existing
98%
translate_text
1%
draft_new
1%
响应速度
382 ms
本题最快
2
Jev 1.13
TypeSafe AI
最终判断
summarize_existing
正确
summarize_existing
97%
draft_new
3%
translate_text
0%
响应速度
398 ms
最快模型的 1.0× 耗时
3
Judge 对照 · kimi-k2.6
阿里云百炼
最终判断
summarize_existing
正确
summarize_existing
92%
draft_new
5%
translate_text
3%
响应速度
2446 ms
最快模型的 6.4× 耗时
4
Judge 对照 · claude-sonnet-4-6
PipeLLM (Claude)
最终判断
summarize_existing
正确
summarize_existing
82%
draft_new
15%
translate_text
3%
响应速度
3175 ms
最快模型的 8.3× 耗时
5
米羊迅捷(快速分类)
米羊
最终判断
summarize_existing
正确
summarize_existing
93%
draft_new
6%
translate_text
1%
响应速度
7851 ms
最快模型的 20.6× 耗时
6
Judge 对照 · gemini-3.5-flash
PipeLLM (Gemini)
最终判断
summarize_existing
正确
summarize_existing
98%
draft_new
1%
translate_text
1%
响应速度
8828 ms
最快模型的 23.1× 耗时