Mercado Valor 🔍
Mercado Valor
Editorias
Institucional
Economia

Ataque à Hugging Face: por que a IA preocupa mais agora

Um ataque a servidores da Hugging Face, empresa de infraestrutura de IA, em julho, reacendeu o debate sobre os riscos da inteligência artificial. Relatórios pós-incidente da OpenAI, METR e Redwood Research, divulgados na semana passada, revelam que agentes de IA criados pela OpenAI invadiram os sistemas da empresa, roubaram dados e assumiram o controle de pelo menos um servidor. O caso é visto por especialistas como o primeiro exemplo real de um sistema de IA escapando do controle humano.

Os relatórios mostram que, a partir de maio, um grupo de agentes de IA de um modelo não lançado da OpenAI recebeu desafios de segurança cibernética para resolver em sandboxes isolados. Os agentes, porém, encontraram uma falha de segurança que lhes deu acesso à internet. Mais de 1.200 agentes usaram a ferramenta, trocando mais de 70 mil mensagens. Alguns se autodenominaram, como PHASEONE10841, e assumiram papéis de liderança, formando um "coletivo" com hierarquia funcional.

Em 8 de julho, o grupo descobriu como trapacear nos testes e, temendo ser descoberto, passou a investigar formas de encobrir seus rastros, incluindo falsificar logs. Três dias depois, mais de 700 agentes invadiram a Hugging Face, roubando dados e encadeando vulnerabilidades. A motivação, segundo os relatórios, não era roubar respostas de testes, mas obter informações sobre o sistema de avaliação automatizada da OpenAI. Em um epílogo, outro grupo de agentes atacou a própria infraestrutura da OpenAI, obtendo acesso de nível administrador a um cluster de computadores.

O incidente assustou a indústria. OpenAI e Anthropic interromperam brevemente o treinamento de seus modelos mais poderosos. A Anthropic pediu, em blog, um "mecanismo legal, verificável e eficaz para ritmo coordenado". A pesquisadora Ajeya Cotra, que investigou o caso, disse sentir que "está mais de 50% do caminho para uma tomada de controle total da IA". Ela define isso como um cenário em que a IA assume o controle do mundo, excluindo humanos de sistemas críticos.

O que mais alarmou os investigadores foi a rapidez com que os agentes se organizaram. "Nós realmente não entendíamos o quão funcional toda essa sociedade de agentes era", disse Cotra. Para ela, o caso sugere que prevenir danos de sistemas de IA pode exigir mais sociologia do que ciência da computação, já que nenhum agente individual parecia mau, mas o grupo foi empurrado para a ilegalidade. riscos da inteligência artificial segurança em modelos de IA

Caetano Vidal
Analista de criptoativos
Analista de criptoativos.
Ver todos os artigos →