Gleiche KI, andere Kosten: Die Wahl des Frameworks verändert den Preis fast um das Dreifache

Das KI-Tooling-Unternehmen Composio hat Deepseek V4 Flash in vier verschiedenen Agent-Frameworks getestet: Claude Code, Codex, OpenCode und Oh My Pi. Sie führten 30 Aufgaben mit realen Tools wie Gmail, GitHub, Slack und Notion durch. Das Ergebnis: Kein Framework war in allen Kategorien am besten. Oh My Pi erreichte die höchste Erfolgsrate (17 von 30), war aber am langsamsten (272 Sekunden pro Aufgabe). OpenCode war am günstigsten (0,073 Dollar pro erfolgreicher Aufgabe), Claude Code war am schnellsten (122 Sekunden), aber am teuersten (0,195 Dollar), obwohl es die wenigsten Tool-Aufrufe und Ausgabetokens verwendete. Sieben Aufgaben scheiterten oder gelangen ausschließlich abhängig vom verwendeten Framework. Insgesamt lagen die Erfolgsraten nahe beieinander, wobei OpenCode mit 14 von 30 etwas niedriger lag. Die größten Unterschiede gab es bei Preis und Geschwindigkeit: Die Wahl des Frameworks veränderte die Kosten um fast das Dreifache und die Geschwindigkeit um das 2,2-fache.