stamatios
← Voltar ao feed
Etiqueta de preço em queda ao lado de pilha de documentos de revisão de código, metáfora do Devin Review
Agentes · Dev & Engenharia

Custo do Devin Review por PR cai 82% desde agosto

resumo de ~3 min

Contexto: a revisão de código virou gargalo

O texto parte de um desequilíbrio: o volume de pull requests cresce, mas a capacidade de revisão manual não acompanha. Segundo a Cognition, a revisão de código, etapa imediatamente após a criação do PR, tornou-se o novo gargalo do ciclo de desenvolvimento de software. Deixar de revisar PRs, ou revisar menos, gera ganho de produtividade no curto prazo, mas custos de longo prazo em bugs para o cliente e em qualidade de código. A alternativa apresentada é usar agentes para apoiar a revisão.

O que é o Devin Review 2.0

A versão 2.0 torna o Devin Review a ferramenta padrão de revisão de PRs para quem trabalha com o Devin. A ferramenta procura bugs automaticamente e produz um roteiro guiado pelo PR, para que a revisão humana seja mais rápida e tenha mais contexto.

Custo por revisão

Desde agosto, o custo de uma revisão por PR caiu 82%, segundo a empresa. Uma revisão típica custa entre US$ 0,25 e US$ 0,75. A redução veio de uma combinação melhor de modelos e de otimizações no harness. A empresa afirma que a qualidade não caiu: a média de bugs encontrados por PR subiu de 1,22 para 1,32. Em média entre os clientes, cada bug corrigido custa cerca de US$ 2,25. O texto também informa que a latência mediana caiu de 139 para 94 segundos, cerca de 1,5 vez mais rápida.

Como a ferramenta é acionada

A revisão pode ser disparada em PRs individuais por meio do comentário /devin review no GitHub ou GitLab, ou a partir da página do Devin Review no Devin Cloud ou no Devin Desktop. Também é possível configurar execução automática quando o PR estiver pronto para revisão, de forma parecida com o CI. Regras detalhadas permitem revisar PRs em rascunho ou filtrar por caminhos de arquivo, branches, rótulos e outros critérios. Clientes usam essas regras para reduzir gastos, excluindo PRs de baixo valor.

Revisões incrementais

Quando a revisão roda de novo no mesmo PR, ela analisa apenas as partes alteradas. Segundo a empresa, isso traz duas vantagens: os novos achados ficam concentrados nas mudanças mais recentes, com menos ruído, e o custo cai, já que cada push é menor que o PR inteiro. Cerca de 80% dos PRs custam menos de US$ 1 para revisar, incluindo todos os pushes. Há ainda um limite de gasto por PR configurável. A empresa defende que revisar a cada push acompanha a evolução do PR, enquanto revisões pontuais deixam de cobrir grande parte do ciclo de vida.

Integração com o Devin

A ferramenta funciona com PRs de qualquer origem, mas, segundo o texto, funciona melhor junto com o Devin. Nesse caso, o Devin investiga cada achado e decide corrigi-lo, descartá-lo ou escalá-lo para a pessoa responsável.

Novos controles

Dois recursos ampliam o controle sobre a execução. O modo Ultra, um nível de esforço mais minucioso e mais caro, é indicado para áreas como faturamento ou código sensível à segurança, nas quais um bug não detectado custa muito mais que a revisão. Os revisores personalizados, em beta, permitem transformar verificações específicas da equipe em revisores próprios, com instruções definidas pelo usuário. A empresa diz usar internamente revisores para segurança de backend, migrações seguras de banco, consultas SQL performáticas e componentes de interface acessíveis. Esses revisores têm regras próprias de execução automática, seus achados aparecem nos resultados e entram na correção automática do Devin, e seguem os mesmos controles de custo.

Ponto de atenção

Os números de custo, de qualidade e de latência são informados pela própria empresa, sem metodologia detalhada no texto.