来源Hacker News Best · Semgrep 安全研究团队1. 一个不寻常的基准结果如果你的安全团队每年花 50 万美元调用 Claude Code 做代码审计那这个数字可能需要重新谈一谈。Semgrep 安全研究团队发布了一份 IDORInsecure Direct Object Reference不安全的直接对象引用漏洞检测基准测试结果让不少人愣了一下智谱 AI 的开源模型 GLM 5.2 以 39% F1 的成绩击败了 Claude Code 的 32%。成本差距更夸张——每发现一个漏洞仅需 0.17 美元约为闭源前沿模型的六分之一。这不是某个不知名模型的偶然爆发。GLM 5.2 是智谱 AI 在 2026 年发布的旗舰开源模型此前在编程和推理任务上已积累了不少口碑。但这次它的对手不是一般的开源模型——Claude Code 被公认为当前最强的 AI 代码助手之一。更值得注意的细节是Semgrep 的测试并非刻意挑选 GLM 的优势场景。他们用的是同一套 IDOR 数据集、同一份提示词甚至没给模型任何额外辅助工具。裸提示词bare prompt条件下GLM 5.2 就是比 Claude Code 更擅长找出权限绕过漏洞。from openai import OpenAIclient OpenAI(api_key“your-key”,base_url“https://open.bigmodel.cn/api/paas/v4”)response client.chat.completions.create(model“glm-5.2”,messages[{“role”: “user”, “content”: prompt}])当然这并不意味着 GLM 5.2 在所有安全任务上都能赢。Semgrep 团队自己也说了这是一个任务、一个数据集、一次运行。IDOR 检测本身是一个非确定性问题换个漏洞类型结果可能完全翻转。但有一件事是确定的开源模型在安全领域的价值门槛已经被这次测试重新划定了。2. 为什么 IDOR 检测如此困难IDOR 漏洞可以简单理解为你访问了本不该属于你的数据。假设一个电商系统普通用户能通过GET /api/order/12345查看自己的订单。但如果系统没有做权限校验攻击者把12345改成12346就能看到别人的订单。这就是一个典型的 IDOR。这种漏洞在现代 Web 应用中极其普遍每年 OWASP Top 10 都榜上有名。但它恰恰是传统 SAST 工具最难检测的漏洞类型之一——因为要确认一个 API 端点是否存在 IDOR需要理解整个应用的权限模型而不仅仅是检查某一行代码。一个 AI 模型要做好 IDOR 检测至少需要理解路由结构识别出所有的 API 端点追踪数据流判断用户输入的 ID 参数是否直接用于数据查询推断权限边界判断是否存在授权检查以及检查是否充分跨文件推理权限逻辑往往分散在多个文件甚至多个微服务中这也是为什么 Semgrep 的内部多模态管道multimodal pipeline能跑到 53-61% F1——它在模型之外加了一层精心设计的脚手架harness帮模型做了大量的上下文预处理。裸提示词条件下的模型相当于一个新人安全工程师只给了一句话找出这个项目里的 IDOR 漏洞没有 IDE、没有调试器、没有任何辅助工具。在这种设定下GLM 5.2 能超过 Claude Code含金量是实打实的。3. 深入 GLM 5.2 的技术优势GLM 5.2 凭什么赢从 Semgrep 的测试数据和社区分析来看有几个关键因素。第一授权感知训练数据的积累。GLM 系列在训练阶段就纳入了大量包含权限控制逻辑的代码数据。智谱 AI 在中国互联网生态中有深厚的工程积累国内大量的权限系统RBAC、ABAC代码天然存在于训练语料中这让 GLM 5.2 对权限检查这个模式有更强的敏感性。第二长上下文窗口的工程优化。IDOR 检测需要模型跨文件追踪数据流GLM 5.2 在长上下文场景下的注意力机制做了针对性优化。Semgrep 的测试反馈显示GLM 5.2 在处理包含多个文件的代码库时上下文丢失率低于 Claude Code。第三推理成本的工程红利。GLM 5.2 每发现一个漏洞的成本是 0.17 美元约为 Claude Code 的六分之一。这个数字背后是模型架构的效率差异——GLM 5.2 采用了 MoE混合专家架构推理时只激活部分参数大幅降低了计算开销。但我们也需要冷静看待这份数据。GLM 5.2 的 39% 虽然领先 Claude Code 的 32%但两者都远低于 Semgrep 专用管道的 53-61%。换句话说最好的结果来自好的模型 好的脚手架而非模型本身。Semgrep 团队的原话很有启发性最大的性能差距不在于模型之间而在于配置之间——那些做了端点发现的和没做的之间。这意味着对安全团队来说当前最优先的投资不是换模型而是构建更好的检测管道。4. 开源安全模型的拐点这份基准测试放在更大的背景下看有更深层的意义。Anthropic 的 Mythos 项目在 2026 年初引起了轰动——它展示了一个高度专业化的 AI 安全代理能达到什么水平。但 Mythos 是闭源的而且是 Anthropic 的专属产品。这引发了一个现实问题全球的安全团队尤其是预算有限的中小团队能不能获得同等水平的 AI 安全能力Semgrep 的测试给出了一个初步答案可以而且不需要花大价钱。这次测试的其他开源模型表现如下MiniMax M323% F1Kimi K2.7 Code22% F1其他开源模型大部分低于 20%GLM 5.2 与其他开源模型之间的差距16 个百分点比它与 Claude Code 之间的差距7 个百分点还要大。这说明 GLM 5.2 在安全任务上的表现不是开源集体进步的结果而是一次个别的突破。但正是这种个别突破具有信号意义。一个开源模型能在特定安全任务上超越最好的闭源模型意味着安全团队有了真正的备选方案。不再被单一供应商锁定本地部署成为可能。GLM 5.2 可以完全运行在自己的环境中数据不外泄成本门槛大幅降低。每漏洞 0.17 美元的定价让中小团队也能用上 AI 安全审计from transformers import AutoModelForCausalLM, AutoTokenizermodel AutoModelForCausalLM.from_pretrained(“zhipuai/glm-5.2”,device_map“auto”,trust_remote_codeTrue)tokenizer AutoTokenizer.from_pretrained(“zhipuai/glm-5.2”,trust_remote_codeTrue)这也解释了为什么 HN 上 144 条评论中讨论最热烈的是本地部署和供应商锁定两个话题。开发者们对依赖单一 AI 提供商的安全性越来越警觉——尤其是当这个提供商的定价和策略都在快速变化时。5. 对安全工程师的启示GLM 5.2 的这次突围给安全工程师和团队提供了几个可以立刻动手的方向。第一建立模型评估流水线。不要依赖单一基准来评判模型。Semgrep 的方法值得借鉴用自己的数据集、自己的提示词、自己的任务来评估。不同漏洞类型IDOR vs SSRF vs SQLi下模型的排名可能完全不同。第二投资脚手架而非盲目升级模型。Semgrep 的数据清楚地表明精心设计的检测管道带来的提升53-61% F1远大于换一个更强模型带来的提升GLM 5.2 的 39% vs Claude 的 32%。先优化流程再考虑换引擎。第三给开源模型一个正式的评估席位。如果你的团队目前只用 Claude 或 GPT 做代码审计花一天时间跑 GLM 5.2 做 A/B 测试。你可能会发现在某些特定场景下开源模型的性价比高得惊人。第四关注模型的可复现性和数据主权。安全审计涉及敏感代码库数据不出企业网络是一个硬需求。GLM 5.2 可以在本地部署这对金融、医疗、政府等监管严格的行业意义重大。Semgrep 在文章结尾写了一句很实在的话别把所有鸡蛋放在一个 LLM 篮子里。一个模型可能在这个任务上领先但在另一个任务上落后。多样性不仅仅是风险管理策略——在安全这个领域它可能直接决定你能否发现下一个关键漏洞。对中国的开发者和安全团队来说GLM 5.2 的这次表现还有一个额外的含义在 AI 安全这个赛道上国产模型不再是追赶者而是在特定领域具备了领跑的能力。这份基准测试只是开始。真正的价值在于它打开了一个讨论空间——当最好的安全 AI 不再必须是价格最高的那个整个行业的安全水位都会跟着上升。本文基于 Semgrep 安全研究团队发布的《We have Mythos at Home: GLM 5.2 beats Claude in our Cyber Benchmarks》报告及 Hacker News 社区讨论撰写。原文发布于 2026年6月22日。
)
