AutomationBench

Name: AutomationBench
Keywords: AutomationBench, AI 基准测试, 模型评估, AI 基准测试排行榜, AI 模型表现

AI 基准测试结果和模型表现

类型: percentageAgents

31.42%

13.50% - 54.80%

54.80% - DeepSeek V4.1 Flash

分数变化趋势

按日期绘制的单项基准测试分数。

模型结果

组织	模型	报告时间	最高分数	信息	自行报告	来源
DeepSeek	DeepSeek V4.1 Flash	2026年9月10日	54.80%	Instruct model; reasoning_effort=100; Pass@1	是	来源
Google	Gemini 4 Carbon	2026年10月28日	53.90%	Google-reported launch evaluation; Zapier; source chart: https://storage.googleapis.com/gweb-uniblog-publish-prod/images/gemini_4_carbon__evals-table.original.png; methodology: deepmind.google/models/evals-methodology/gemini-4-carbon	是	来源
Google	Gemini 4 Argon	2026年10月13日	51.30%	Google-reported launch evaluation; source chart: https://storage.googleapis.com/gweb-uniblog-publish-prod/original_images/gemini-4-argon_table_blog.gif	是	来源
Moonshot	Kimi K3	2026年7月16日	30.80%	600-task public subset; otherwise follows the official GitHub setup.	是	来源
Anthropic	Claude Opus 5	2026年7月24日	26%	Private held-out evaluation set; max effort	是	来源
DeepSeek	DeepSeek V4 Flash 0731	2026年7月31日	25.10%	Public subset; DeepSeek-V4-Flash-0731	是	来源
Anthropic	Claude Fable 5	2026年6月09日	17.40%	Higher of Mythos 5 / Fable 5 in Anthropic's launch table	是	来源
Anthropic	Claude Mythos 5	2026年6月09日	17.40%	Higher of Mythos 5 / Fable 5 in Anthropic's launch table	是	来源
Anthropic	Claude Sonnet 5	2026年6月30日	13.50%	Zapier leaderboard private held-out tasks; max effort	是	来源

帮助保持公开数据准确