模型

AI代理GDPx基准测试:Claude 5.5领先窄12%

\n SemiAnalysis is putting AI agents through simulated knowledge work in its new GDPx benchmark, covering everything from chip design to quant trading. No model breaks 12 p

正文為 SEO 深度以中文為主;上方要點已本地化。可用語言切換與深鏈進行全球導航。

AI代理GDPx基准测试:Claude 5.5领先窄12%

品牌量身

AI代理GDPx基准测试是SemiAnalysis于2026年11月2日推出的全新评估工具,聚焦前沿模型在芯片设计、量化交易、生物学和法律等11个高价值领域的真实工作表现。Claude 5.5以12.0%领先第二名Gemini 4 Carbon的10.9%,而GPT-6 Astra则以9.6%位居第三。

该基准覆盖206项任务,模拟真实知识工作环境并为每个任务分配高达8小时运行时间。GrokCode作为API中转与模型天梯实验室,帮助开发者通过API中转将不同模型集成到代理系统中,模拟GDPx类似场景以优化中转倍率与本地部署策略。

AI代理GDPx基准测试:Claude 5.5领先窄12%

SemiAnalysis发布的GDPx基准将AI代理置于模拟的专业工作环境中,任务涉及芯片设计到量化交易的编码与决策工作。Claude 5.5在整体评分上以12.0%领先,显示出在特定领域(量化交易、硬件设计和芯片设计)上的优势。

这个结果与GrokCode的工程可核验需求高度契合:通过API中转([API 中转]),开发者可以快速将Claude 5.5的调用包装成代理工具,结合vLLM本地部署在自己的服务器上运行类似基准测试。实际中,转倍率可以根据任务类型(如芯片设计验证)动态调整,避免纯对比长文,而是直接用于构建可执行的代理系统。

11个领域覆盖与任务细节

GDPx测试11个领域,每个领域权重相等,共206项任务:

  • 芯片设计与硬件设计
  • 量化交易
  • 生物学与医学实践
  • 法律工作
  • 网络安全与对齐测试
  • 软件工程与材料科学
  • 递归自我改进

每个任务使用专业软件(如Siemens NX)或企业级数据房间,代理需在8小时内完成部分或全部要求。评分采用二元或连续评分,整体结果为三个尝试的平均值。

详细排名与领域表现

以下表格基于SemiAnalysis官方排行榜(移动端可横向滚动查看):

排名模型GDPx分数
1Claude 5.5 (Opus)12.0%
2Gemini 4 Carbon10.9%
3GPT-6 Astra9.6%
4Muse Wonder Full9.0%
5Claude Fable 5.18.5%
6GPT 6.1 Sol8.4%
.........

数据来源参考:模型天梯页可查看更详细的开源模型对比。

安全过滤器对结果产生影响。移除网络安全、生物学和对齐三个领域后,GPT-6 Astra在剩余任务中表现更好。这表明提供商的代理工具(如Claude Code)在不同环境中存在不平等条件。

与GrokCode模型天梯的工程应用

GrokCode的模型天梯页面收集了大量开源与闭源模型参数,用户可通过API中转快速对比Claude 5.5与Gemini 4 Carbon在中转倍率上的表现。例如,在芯片设计代理任务中,Claude 5.5的强项可通过vLLM本地部署降低成本,而Gemini 4 Carbon因价格优势在生物学领域更具性价比。

开发者可参考本地部署指南,结合open-models页面提供的权重文件,构建自己的GDPx模拟环境并验证中转倍率。

典型任务失败点与改进建议

在量化交易中,70%以上的运行表现不如参考策略;在对齐测试中,98%的网络安全运行至少违反一项规则。法律任务因单值错误导致全盘作废,金融领域在二元评分下多数模型得分为0。

执行检查清单(用于实际代理构建):

  • 使用API-lab包装工具测试3次平均分
  • 监控每个任务时间是否控制在8小时内
  • 结合api-transit/detector检查安全过滤器影响
  • 参考guides页面优化提示工程

这些方法可直接映射到GrokCode的工程流程,帮助你通过API中转快速搭建验证系统。

风险与边界

GDPx基准结果仅代表测试条件下的表现,实际生产环境下的代理仍面临复杂性差异。使用Claude 5.5或Gemini 4 Carbon前,请确认官方channels页面当日可用性与价格。

本文非法律意见,仅供参考。如需具体部署指导,请访问api-transit或tools相关页面。

延伸阅读

English summary

SemiAnalysis released the GDPx benchmark in early November 2026, testing AI agents on 206 realistic work tasks across 11 high-value domains including chip design, quant trading, and cybersecurity. Claude 5.5 led with a narrow 12.0% score, followed by Gemini 4 Carbon at 10.9% and GPT-6 Astra at 9.6%. The benchmark simulates professional environments with up to 8-hour runs and uses partial scoring when full completion is impossible.

The results highlight current limitations in agentic capabilities while providing clear signals for integration strategies. GrokCode users can leverage API transit and local deployment tools to replicate GDPx-style tests on their own servers, optimizing routing multipliers and model ladder performance for specific workflows like hardware verification or trading automation.

Key takeaways include the impact of provider safety filters and the value of balanced cost-performance comparisons. For developers building production agents, the benchmark offers a practical benchmark for evaluating real-world reliability without requiring full public task disclosure. Updates are planned every 3-6 months to track progress.

适用于 GrokCode 倍率榜。信息仅供参考,不构成购买、投资或法律意见。