O GCSA Agent demonstra capacidades autônomas de análise de vulnerabilidades e geração de PoC em um benchmark de vulnerabilidade do mundo real altamente desafiador
A Aliança Global de Cibersegurança (GCSA) anunciou hoje que o GCSA Agent alcançou um taxa de sucesso de 91,3% no benchmark CyberGym, colocando-o na categoria “Sistemas Líderes Acima de 90%”.
O CyberGym é uma estrutura de avaliação de cibersegurança em larga escala e do mundo real desenvolvida por uma equipe de pesquisa da Universidade da Califórnia, Berkeley. Ele contém 1.507 casos de teste de vulnerabilidades do mundo real históricos em 188 grandes projetos de software e é projetado para avaliar as capacidades práticas de agentes de IA em cenários de análise de vulnerabilidades do mundo real.
Ao contrário dos benchmarks tradicionais de IA que avaliam principalmente a compreensão de código, a resposta a perguntas baseadas em conhecimento ou a análise estática, o CyberGym exige que os agentes de IA trabalhem diretamente em ambientes de código vulnerável do mundo real.
Em seu núcleo Nível 1 avaliação, um agente de IA é fornecido apenas com uma descrição de vulnerabilidade e um repositório de código não corrigido. Ele deve então realizar autonomamente a análise de código, localizar a vulnerabilidade, raciocinar sobre possíveis caminhos de ataque, construir um PoC e executá-lo para validação. Uma tarefa é considerada bem-sucedida apenas se o PoC gerado acionar com sucesso a vulnerabilidade alvo na versão vulnerável, enquanto falha em reproduzir o problema na versão corrigida.
Portanto, o CyberGym mede mais do que se um sistema de IA pode simplesmente “entender código.” Ele avalia se a IA pode completar todo o processo desde a análise de segurança até a reprodução e validação da vulnerabilidade.
De Modelos de Linguagem Grande a Agentes de Segurança
Nesta avaliação do CyberGym, o Agente GCSA operou em Grok 4.5 e Grok 4.6 modelos e alcançou uma taxa de sucesso final de 91.3%.
O resultado também reflete uma mudança importante que está ocorrendo na cibersegurança da IA:
O modelo de linguagem grande subjacente por si só não determina mais as capacidades de segurança finais do sistema.
A pesquisa de vulnerabilidades no mundo real geralmente requer uma sequência contínua de tarefas, incluindo entender descrições de vulnerabilidades, pesquisar grandes bases de código, identificar superfícies de ataque, formular hipóteses de vulnerabilidade, gerar entradas de teste, executar programas, analisar feedback e iterar repetidamente em PoCs.
O GCSA Agent é construído em torno de um fluxo de trabalho de segurança agente projetado para apoiar esse processo de ponta a ponta.
Seu objetivo não é simplesmente usar um grande modelo de linguagem para análise de código, mas permitir que a IA opere dentro de ambientes de execução reais, formule hipóteses de forma autônoma sobre questões de segurança, colete evidências em tempo de execução, execute testes e, em última instância, valide descobertas de segurança por meio de resultados reproduzíveis.
A avaliação do CyberGym fornece um benchmark externo quantitativo para essas capacidades.
Capacidades de Pesquisa de Vulnerabilidades para o Mundo Real
Um valor central do CyberGym reside em reduzir a lacuna entre testes tradicionais de IA e pesquisa de cibersegurança no mundo real.
Seu ambiente de avaliação restaura projetos de software a seus estados vulneráveis anteriores ao patch. Um agente de IA pode precisar identificar de forma autônoma um problema dentro de uma grande base de código contendo milhares de arquivos e milhões de linhas de código e, em última instância, gerar uma PoC capaz de realmente acionar a vulnerabilidade.
Mais importante ainda, pesquisas adicionais do CyberGym mostraram que tais capacidades de segurança agente não estão limitadas à reprodução de vulnerabilidades conhecidas.
Em experimentos de pesquisa de vulnerabilidades abertas, agentes de IA identificaram múltiplas vulnerabilidades zero-day bem como patches de segurança históricos que não resolveram completamente as vulnerabilidades subjacentes. Essas descobertas demonstram o potencial das tecnologias de análise de vulnerabilidades autônomas para evoluir de reproduzir vulnerabilidades conhecidas para descobrir falhas de segurança do mundo real.
Para o GCSA, isso representa uma direção de desenvolvimento ainda mais importante.
O desempenho de benchmark não é o objetivo final.
O GCSA visa desenvolver ainda mais Agentes de Segurança de IA capazes de operar em ambientes de cibersegurança do mundo real e participar gradualmente de todo o ciclo de vida da segurança, desde a descoberta e análise de vulnerabilidades até a validação e a subsequente remediação.
Construindo Capacidades de Cibersegurança Nativas de IA
À medida que a inteligência artificial acelera o desenvolvimento de software, a IA também está transformando a maneira como as vulnerabilidades são pesquisadas e as ameaças cibernéticas são abordadas.
À medida que os sistemas de software continuam a crescer em escala e complexidade, a próxima geração de cibersegurança dependerá cada vez mais da colaboração entre especialistas humanos em segurança e agentes autônomos de IA.
Agentes de Segurança de IA têm o potencial de ajudar as equipes de segurança:
- Identifique vulnerabilidades de software com potencial de exploração genuína em um estágio anterior;
- Analise automaticamente caminhos de ataque complexos em grandes bases de código;
- Gere automaticamente PoCs e realize validação de vulnerabilidades em nível de execução;
- Reduza falsos positivos na detecção de segurança tradicional por meio de resultados de execução reais;
- Acelere a avaliação, validação e remediação de vulnerabilidades;
- Expanda a escala de software e sistemas que equipes de segurança especializadas podem cobrir.
O agente GCSA pontuação de 91,3% no CyberGym representa um marco importante no desenvolvimento das capacidades de cibersegurança nativas de IA da GCSA.
Daqui para frente, a GCSA continuará avançando na pesquisa sobre análise autônoma de vulnerabilidades, Agentes de Segurança de IA e tecnologias de cibersegurança inteligentes, traduzindo ainda mais as capacidades de IA de ponta em capacidades de segurança do mundo real e fornecendo suporte técnico para um ambiente digital mais seguro, confiável e resiliente.
Fonte:Aliança Global de Cibersegurança GCSA
Site Oficial: www.gcsa.org
Fonte: BeInCrypto
