Mesma IA, Custos Diferentes: A Escolha do Framework Altera o Preço em Quase Três Vezes

A empresa de ferramentas de IA Composio testou o Deepseek V4 Flash em quatro frameworks diferentes de agentes: Claude Code, Codex, OpenCode e Oh My Pi. Eles executaram 30 tarefas usando ferramentas reais como Gmail, GitHub, Slack e Notion. O resultado: nenhum framework foi o melhor em todas as categorias. Oh My Pi alcançou a maior taxa de sucesso (17 de 30), mas foi o mais lento (272 segundos por tarefa). OpenCode foi o mais barato (0,073 dólares por tarefa bem-sucedida), Claude Code foi o mais rápido (122 segundos), mas o mais caro (0,195 dólares), apesar de usar o menor número de chamadas de ferramentas e tokens de saída. Sete tarefas tiveram sucesso ou falha dependendo exclusivamente do framework usado. No geral, as taxas de sucesso foram próximas, com OpenCode ligeiramente inferior, com 14 de 30. As maiores diferenças foram em preço e velocidade: a escolha do framework mudou os custos em quase três vezes e a velocidade em 2,2 vezes.