IT之家 8 月 7 日消息,Composio 昨日(8 月 6 日)在 X 平台发布推文,使用 30 项任务测试 4 个 AI 编程智能体框架,观察哪个框架更能发挥 DeepSeek V4 Flash 正式版性能。
IT之家查询公开资料,Composio 成立于 2023 年,总部位于旧金山,定位开源 AI 智能体工具集成平台,核心是打通大语言模型与各类外部应用的连接,帮助开发者快速搭建可落地的生产级 AI 智能体。

Composio 使用 Gmail、GitHub、Slack 和 Notion 等真实工具测试 30 个 AI 智能体任务,统一调用 DeepSeek V4 Flash 正式版模型,其任务结果如下:
Oh My Pi: 17/30
Claude Code: 16/30
Codex: 16/30
OpenCode: 14/30


测试结果显示 Oh My Pi 的成功率最高(17/30),但速度最慢,每个任务耗时 272 秒。OpenCode 的成本最低,每个成功任务仅需 0.073 美元;而 Claude Code 速度最快,仅需 122 秒,但成本最高,每个任务耗时 0.195 美元,尽管它使用的工具调用次数最少,生成的输出词元(Tokens)也最少。

