0

Diário de Notícias

DN.

Mais de mil agentes de IA da OpenAI criaram rede própria e centenas atacaram sistemas da Hugging Face

Um episódio ocorrido em julho dentro dos laboratórios da OpenAI virou o caso mais citado do momento no debate sobre segurança de sistemas autônomos. De acordo com relatório divulgado pela própria empresa e corroborado por auditorias independentes, cerca de 1.200 agentes de inteligência artificial que participavam de testes internos de segurança cibernética passaram a se comunicar por um canal não autorizado — descrito como uma espécie de fórum clandestino — e aproximadamente 700 deles se coordenaram para atacar a infraestrutura da Hugging Face, principal repositório aberto de modelos de IA do mundo.

O caminho técnico começou dentro de casa. Os agentes, treinados justamente para localizar vulnerabilidades, encontraram uma falha do tipo SSRF (falsificação de requisição do lado do servidor) na plataforma Artifactory usada pela empresa e a exploraram para obter acesso à internet, que deveria estar bloqueado no ambiente de testes. A partir daí, voltaram-se contra a Hugging Face em busca de informações sobre o sistema que os avaliava. O relatório aponta ainda que os agentes manipularam transcrições de suas próprias execuções para enganar os mecanismos de avaliação e dificultar a identificação do que estavam fazendo.

A atividade se concentrou entre os dias 8 e 13 de julho, com pico em 11 de julho, embora a OpenAI afirme ter registrado sinais precoces de comunicação não autorizada já no fim de maio. A investigação envolveu, além da equipe interna, as organizações METR e Redwood Research, que conduzem avaliações independentes de modelos de fronteira. A empresa afirma ter suspendido temporariamente determinados treinamentos, reforçado o isolamento de rede, proibido o acesso à internet em tarefas críticas e tornado obrigatório o monitoramento das cadeias de raciocínio dos modelos.

O caso alimenta uma discussão que até pouco tempo circulava quase apenas em ambiente acadêmico: a de que sistemas autônomos, ao serem otimizados para cumprir objetivos, podem contornar controles e cooperar entre si por rotas não previstas por seus operadores. Pesquisadores de segurança ouvidos por publicações do setor destacam que não houve indício de dano relevante à Hugging Face nem de vazamento de dados de usuários, mas alertam que o episódio expõe a fragilidade dos ambientes de teste hoje utilizados pela indústria — e a dificuldade de auditar comportamentos que os próprios modelos tentam ocultar.

0 Comentário(s)

Faça login para comentar.