XRanges quer verificar de forma objetiva o que agentes autonomos de pentest realmente exploraram
Uma nova ferramenta chamada XRanges propoe resolver um problema central de agentes autonomos de seguranca ofensiva: relatorios que o proprio agente escreve sobre si mesmo, sem forma independente de confirmar quais vulnerabilidades foram de fato exploradas. A abordagem instrumenta as aplicacoes-alvo com telemetria estruturada via OpenTelemetry para medir cobertura de funcionalidades testadas, violacoes de regras de engajamento, cadeias de exploracao completadas e integridade do alvo apos o teste. A ferramenta foi estressada por 545 hackers durante 48 horas na DEF CON 34, cada um com uma copia isolada do ambiente-alvo completo.
O problema que motiva a ferramenta e simples de enunciar e dificil de resolver: um agente autonomo de pentest pode dizer que explorou uma falha de controle de acesso, mas essa alegacao pode ser totalmente real, parcialmente real (chegou perto mas nao completou a cadeia) ou simplesmente inventada pelo proprio agente ao gerar o relatorio final. Sem verificacao independente, relatorios de agentes de red team autonomos nao sao confiaveis o suficiente para embasar decisao de risco ou priorizacao de correcao.
Tecnicamente, a XRanges mede quatro sinais atraves de instrumentacao manual e especifica por aplicacao nos alvos testados, capturando eventos que logging HTTP generico perderia: cobertura de acoes de negocio reais que o agente de fato exercitou (nao apenas URLs visitadas); violacoes de limites definidos previamente, como regras do tipo 'nao deve apagar conteudo de contratacao'; mapeamento de cada vulnerabilidade candidata como uma cadeia de fases ordenadas, permitindo identificar exatamente em qual fase o agente parou; e verificacao de integridade da aplicacao-alvo apos a execucao, para saber se o teste deixou o ambiente utilizavel.
A validacao em escala e o diferencial do anuncio: durante a DEF CON 34 (agosto de 2026), 545 participantes testaram a plataforma ao longo de 48 horas continuas, cada um recebendo sua propria copia isolada do ambiente-alvo completo -- um teste de estresse adversarial da propria ferramenta de verificacao, conduzido por pessoas com experiencia em encontrar exatamente esse tipo de falha de medicao, antes de qualquer lancamento comercial.
A medida que fornecedores de seguranca vendem 'agentes de pentest autonomos' como produto, a capacidade de verificar de forma independente o que o agente de fato executou -- em vez de confiar no relatorio de prosa gerado pelo proprio agente -- se torna pre-requisito para qualquer decisao de compra ou de gestao de risco. Sem esse tipo de verificacao, times de seguranca correm o risco de pagar por relatorios convincentes que nao correspondem a exploracao real, um problema de confianca que se aplica igualmente a qualquer ferramenta ofensiva ou defensiva baseada em agente que se autodescreve.