Benchmark

Tau2 Telecom

communication reasoning text

τ²-Bench telecom domain evaluates conversational agents in a dual-control environment modeled as a Dec-POMDP, where both agent and user use tools in shared telecommunications troubleshooting scenarios that test coordination and communication capabilities.

Top 10

榜单概览

1GPT-596.72Claude Haiku 4.583.03Kimi K2-Instruct-090565.84Qwen3-235B-A22B-Thinkin…45.65Qwen3-Next-80B-A3B-Thin…43.96Qwen3-Next-80B-A3B-Inst…13.2
数据说明

分数为 0-100 百分制综合成绩(Elo 榜为相对评分,仅供同榜内比较)。评测分数属事实数据,整理自公开评测体系与厂商公开资料,部分分数为厂商自报口径,不同榜单的评测方法与数据集可能存在差异,请结合多个榜单交叉参考。

Ranking

模型排名

名次 模型 机构 分数 来源
1 GPT-5 OpenAI 96.7 来源
2 Claude Haiku 4.5 Anthropic 83.0 来源
3 Kimi K2-Instruct-0905 Moonshot AI 65.8 来源
4 Qwen3-235B-A22B-Thinking-2507 Alibaba Cloud / Qwen Team 45.6 来源
5 Qwen3-Next-80B-A3B-Thinking Alibaba Cloud / Qwen Team 43.9 来源
6 Qwen3-Next-80B-A3B-Instruct Alibaba Cloud / Qwen Team 13.2 来源