8.0
热点
AI SCORE
编程提效2026-08-07 14:48
Composio 测试四大 AI 编程工具调用 DeepSeek V4 Flash 表现
IT之家#DeepSeek#AI编程工具#对比测试
Editor brief · 编辑速览
用 30 项真实任务测试 Oh My Pi、Claude Code、Codex、OpenCode 配合 DeepSeek V4 Flash 的效果:Oh My Pi 成功率最高(17/30)但速度最慢,Claude Code 速度最快(122秒/任务)但成本最高。
Composio 昨日(8 月 6 日)在 X 平台发布推文,使用 30 项任务测试 4 个 AI 编程智能体框架,观察哪个框架更能发挥 DeepSeek V4 Flash 正式版性能。
IT之家查询公开资料,Composio 成立于 2023 年,总部位于旧金山,定位开源 AI 智能体工具集成平台,核心是打通大语言模型与各类外部应用的连接,帮助开发者快速搭建可落地的生产级 AI 智能体。

Composio 使用 Gmail、GitHub、Slack 和 Notion 等真实工具测试 30 个 AI 智能体任务,统一调用 DeepSeek V4 Flash 正式版模型,其任务结果如下:


测试结果显示 Oh My Pi 的成功率最高(17/30),但速度最慢,每个任务耗时 272 秒。OpenCode 的成本最低,每个成功任务仅需 0.073 美元;而 Claude Code 速度最快,仅需 122 秒,但成本最高,每个任务耗时 0.195 美元,尽管它使用的工具调用次数最少,生成的输出词元(Tokens)也最少。

