基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
  • 知识卡片碎片时间过考点
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
    • AI 热点每日 AI 资讯与动向
AI 工作台
旧版
AIHT
内容
精选全部 AI 动态热点榜AI 日报收藏
分类
模型行业编程产品技术观点开源
更多
Agent 接入
返回首页开发者导航
AIHT
精选 / 资讯详情
8.0
热点
AI SCORE
编程提效2026-08-09 08:56

mini-swe-agent真实调试任务测评

dev.to · AI#SWE-agent#调试#AI编程工具
Editor brief · 编辑速览

mini-swe-agent在调试任务上Token消耗比Codex CLI低54%、通过率更高,简单bash+线性历史配置表现强劲。

文章思维导图
Knowledge map
拖拽缩放
Full translation

完整中文译文

DeepSWE 的评测对比让我产生了兴趣,于是在一组匹配的调试任务上用 GPT-5.6 SOL(High reasoning模式)跑了 mini-swe-agent。

当前的数据出乎我的意料:

Codex CLI High:151.91M tokens,60% 通过率

plain mini-swe-agent:70.33M tokens,67%

同样的 mini harness 加上 macro execution(不改变 prompt):60.59M tokens,78%

也就是说 plain mini-swe-agent 比 Codex 节省了约 54% 的 tokens,同时得分还高了 7 个百分点。在这个小规模的消融实验中,仅改变执行方式就又削减了约 14% 的 tokens,并提升了 11 个百分点。

这并不能证明它全面更优。这只是一组匹配的基准测试切片,DeepSWE 本身也指出 prompt 调优可能部分解释了这个 harness 差距。不过对于调试场景而言,这个极简的"bash + 线性历史"组合看起来异常强大。

有人用它做过日常 bug 修复或功能开发吗?在基准测试之外什么东西最先出问题:仓库配置、长时间运行的测试、权限,还是 patch 质量?

我的跑分记录:https://turaai.net/benchmark

mini-swe-agent:https://github.com/swe-agent/mini-swe-agent

DeepSWE 的解读:https://deepswe.datacurve.ai/blog/deepswe

Disclosure:我是 Tura 的维护者,以上基准测试也是我跑的。

Live benchmark token comparison

Original source

本文由 AI 翻译整理,来源 dev.to · AI,原文版权归原作者所有。

阅读原文
上一篇
评测黄金数据集正在腐烂:被忽视的Eval退化风险
下一篇
Node.js文本摘要SRE运行手册

资讯速览

dev.to · AI · 2026-08-09 08:56

AI 评分 8.0 / 10

相关标签

#SWE-agent#调试#AI编程工具

继续阅读

  • AI系统设计的两个极端错误:单体过载与过度微服务
  • 评测黄金数据集正在腐烂:被忽视的Eval退化风险
  • Node.js文本摘要SRE运行手册
  • 阿里发布Qwen 3.8 Max:百万上下文、输入降价至2美元/百万token
  • DeepSeek V4 Flash:ARC-AGI达61.4%且成本仅为GPT-5.6的1/4