最近好多人拿国内其他模型跟智谱GLM-5.1大模型比较,别忘了,当时的Coding Evaluation评测结果可是震惊了整个AI圈。让我们再来回顾一下。

在编程能力评测中,GLM-5.1获得了54.9分的高分,相比上一代GLM-5的35.4分直接飙升近20分,提升幅度高达28%。更令人惊叹的是,这一成绩距离当前全球公认最强的编程模型Claude Opus 4.6的57.5分,仅差2.6分,达到了闭源天花板95.4%的水平。作为一款开源模型,这样的表现堪称降维打击。

一、GLM-5.1核心升级:长程任务能力断档领先

官方将GLM-5.1定位为"面向长程任务的开源第一模型",在长时间跨度、长链路依赖、多工具协同、持续执行、目标保持等关键能力方面实现了质的飞跃。

所谓长程任务,指的是需要多轮交互、分多个步骤推进,且需要持续记住上下文信息的复杂任务,例如跨文件工程开发、端到端项目交付等。是否具备强大的长程任务能力,是衡量AI Agent从"工具调用"走向"自主执行复杂任务"的核心标尺。

具体来看,GLM-5.1的核心升级体现在三个方面:

  1. 更强的长程规划与目标保持:能够将复杂目标自主拆解为可执行的多阶段计划,并在长链路执行中始终围绕最终目标推进,中途遇到意外可自行修正,减少跑偏和遗忘约束的问题。模型能够自主完成需要数小时、跨十几个步骤的完整工程任务,交付物可直接使用。
  2. 更稳的多工具协同与持续执行:在代码编写、工具调用、环境调试、API对接等多个环节之间实现了更稳定的衔接,支持更长时间跨度的连续执行。过去开源模型在长任务后半程容易断链、需要人工介入的问题得到了显著改善,中间环节出错时能自主排查修复。
  3. 更好的状态延续与上下文整合:面对长时间跨度、多轮反馈和大量上下文信息,能够稳定追踪已完成内容、当前阶段和下一步动作,持续整合新信息,保持执行链路的一致性,不再出现"做到一半忘了前面约束"的问题。

二、技术解析:高效架构+自研训练框架

GLM-5.1的能力提升并非简单的"加参数、堆数据",而是通过架构优化和技术创新实现的高效进化。其核心技术参数如下:

  • 总参数数量:744B(MoE架构,256个专家)
  • 活跃参数:40B
  • 上下文窗口:200K tokens
  • 最大输出:131,072 tokens
  • 架构特性:MLA + DeepSeek Sparse Attention
  • Claude Code编码评分:45.3(达Claude Opus 4.6的94.6%)

从技术层面来看,GLM-5.1的主要创新点包括:

  1. 架构升级:从355B参数(32B激活)扩展到744B参数(40B激活)的MoE架构。值得注意的是,激活参数仅增加了8B,但能力却实现了飞跃式增长,充分体现了其架构效率的提升。
  2. 数据飞轮:预训练数据从23T token扩展到28.5T token,覆盖面更广、质量更高。
  3. 长上下文支持:集成了DeepSeek Sparse Attention(DSA)技术,在保持200K上下文窗口的同时,大幅降低了部署成本。
  4. Slime异步强化学习框架:这是智谱自研的RL训练框架,已开源。该框架让模型在推理和代码能力上获得了质的飞跃,是此次升级的关键技术之一。

三、价格才是真正的杀手锏

技术实力固然重要,但对于大多数开发者和普通用户来说,价格同样是关键考量因素。GLM-5.1在保持接近顶级闭源模型能力的同时,价格却极具竞争力。

与主流大模型的API价格对比:

  • GLM-5.1:输入$1.00/百万token,输出$3.20/百万token
  • Claude Opus 4.6:输入$5.00/百万token,输出$25.00/百万token
  • GPT-5.4:输入$2.50/百万token,输出$15.00/百万token

可以看出,GLM-5.1的输入成本仅为Claude Opus的1/5,是GPT-5.4的1/2.5;输出成本更是仅为Claude的1/7.8,GPT-5.4的1/4.7。简单来说,用户只需花费20%的价格,就能获得94.6%的Claude Opus能力,性价比优势十分明显。

四、多维能力对比

从代码生成、推理能力、上下文长度、工具调用、中文能力、性价比、代理能力七个维度综合评估,GLM-5.1展现出了均衡且突出的表现:

  • 中文能力:遥遥领先于其他国际大模型
  • 性价比:在所有对比模型中排名第一
  • 代码生成:接近Claude Opus水平
  • 代理能力:长程任务能力断档领先于其他开源模型
  • 工具调用:表现稳定可靠
  • 推理能力:与Gemini 3.1 Pro还有一定差距
  • 上下文长度:200K窗口满足大多数日常需求,但仍有提升空间

五、真实案例测评:需求文档一键转测试交付物

为了验证GLM-5.1的实际能力,我们选择了开发和测试工作中最常见的场景——"需求文档一键转换测试用例、测试代码",从长上下文理解、结构化提取、多层级生成、一致性保持四个维度进行了全面测评。

测评过程如下:

  1. 首先让GLM-5.1生成一份完整、规范的《微信支付功能需求文档》,包含功能概述、业务流程、接口定义、字段说明、支付状态流转、异常处理、安全规则、边界约束等13个章节,覆盖了创建订单、支付回调、退款、关单等完整支付链路。
  2. 然后一次性向GLM-5.1提出要求,基于这份需求文档生成四份交付物:测试用例集、自动化测试代码、覆盖度分析报告和风险识别报告。

测评结果令人惊喜:

  • 测试用例集:生成了158条测试用例,按6大模块分组,每条用例包含ID、模块、标题、前置条件、测试步骤、预期结果、优先级和关联需求章节,严格覆盖了功能测试、边界测试、异常测试等所有类型,且完全基于需求原文,没有臆造功能。
  • 自动化测试代码:生成了57个Pytest测试函数,采用POM模式设计,包含测试数据构造、异常断言和日志记录,代码结构规范,注释详细,只需替换真实的API地址即可运行。
  • 覆盖度分析报告:逐章列出了需求覆盖情况,总体覆盖率达到89.4%,标注了10个未覆盖点及原因,并给出了自动化和人工测试的策略建议。
  • 风险识别报告:识别出11个风险项,包括5个需求歧义、3个矛盾和3个测试难点,并提出了10个需要产品和开发澄清的问题清单。

整个生成过程仅用了几分钟时间,充分展现了GLM-5.1强大的长文本理解、逻辑推理和多任务处理能力。

六、AI编程的未来:长程任务时代

GLM-5.1的发布标志着AI编程正在进入一个新的阶段。回顾AI编程的发展历程:

  • 最早的AI coding只是程序员的效率工具,主要用于局部代码生成和辅助开发
  • 之后的Vibe Coding让更多非专业人士能够借助AI将想法快速变成产品原型
  • Agentic阶段让AI能够自主理解需求、制定计划、编写代码并迭代修复
  • 而GLM-5.1所代表的long horizon(长程任务)阶段,让AI能够像资深专家一样,在更长时间尺度上持续工作,协调复杂依赖,并交付完整结果

当开源模型的编码能力快速逼近闭源头部模型,且在长程任务能力上实现突破时,AI将能够胜任越来越多的中高级工程任务。这不仅会极大提升开发效率,也将推动整个软件行业的变革。

七、工具推荐

如果你想体验GLM-5.1的强大能力,但又担心API接入复杂、多模型管理麻烦,推荐使用TreeRouter(API中转站)。它支持一键接入包括GLM-5.1、Claude、GPT在内的主流大模型,提供统一的API接口,无需频繁切换不同平台的SDK,同时还具备流量控制、成本监控、日志分析等功能,让你的AI开发更加高效便捷。