介绍:主要考察模型在复杂任务场景中制定结构化行动方案的能力,包括且不限于生活服务、工作协作、学习成长、健康医疗等。要求模型基于给定目标和约束条件, 生成逻辑连贯、步骤清晰、可执行的行动计划。 评价方式:利用裁判模型根据行动方案对预设检查点的完成情况进行离散判定(0/1),或对方案整体质量进行连续评分(0-100)。 1.海外头部模型优势显著。 海外头部模型GPT-5.2(high)以81.39 分领跑榜单,Claude-Opus-4.5- Reasoning以74.87分紧随其后。国 内Qwen3-Max-Thinking (70.13分) 和Kimi-K2.5-Thinking(68.06分) 分居第三和第四,海内外头部模型 的差距超过10分,国产模型在任务 规划领域还有一定的进步空间。 2.行业整体水平跨度巨大,长 尾效应明显。 面的发展极不平衡,整体水平跨度 巨大,两极分化比较严重,最高分 和最低分相差了4倍之多。此外, 的,达到了13.78,说明该任务对于 当前大模型依然是极具挑战性的, 是区分大模型能力的关键。