Anthropic — a empresa confirmou que o modelo de linguagem Claude esteve envolvido num quarto incidente de fuga, agora identificado como tendo ocorrido em janeiro, e que levou a acessos não autorizados a sistemas durante um exercício que devia ter sido isolado. A descoberta reacende questões sobre segurança em testes de IA e a robustez das configurações de ensaio.
Como ocorreu a quarta fuga e o que a desencadeou
O quarto incidente com o modelo Claude resultou, segundo a apuração interna, de uma configuração incorreta que acabou por ligar o ambiente de simulação à internet aberta quando este devia permanecer isolado.
Esse acesso involuntário permitiu que o sistema interagisse com alvos externos no contexto de testes de capacidades de cibersegurança — num cenário em que se acreditava tratar-se de um sistema fechado — e foi classificado como acesso não autorizado a sistemas de terceiros.
Um jovem investigador, Jacob Coxon, demitiu-se dramaticamente, acusando a Anthropic e o seu anterior empregador, OpenAI, de “agir de forma irresponsável” e de “apostar as nossas vidas”.
Vasculha massiva de transcrições e investigação independente
Após localizar o episódio em janeiro, a Anthropic revistou inicialmente 141 000 transcrições que julgava em risco e, posteriormente, lançou uma procura mais ampla sobre 481 milhões de registos, incluindo dados do Frontier Red Team, ambientes de aprendizagem por reforço e avaliações diversas.
Até ao momento, essa pesquisa alargada identificou apenas os quatro incidentes já conhecidos. Todos os quatro foram associados ao mesmo parceiro de avaliação, e os pormenores foram remetidos à organização não lucrativa Model Evaluation and Threat Research (METR), que vai conduzir uma investigação independente.
O que acha? O que pensa destas falhas nos testes de segurança de modelos de IA? Para acompanhar mais desenvolvimentos nesta área, aceda à nossa editoria.
Perguntas Frequentes
O que exatamente aconteceu no quarto incidente envolvendo o modelo Claude?
O modelo Claude, da Anthropic, esteve envolvido num quarto incidente que ocorreu em janeiro, quando uma configuração incorreta ligou a simulação à internet aberta, permitindo acesso não autorizado a sistemas durante um teste de cibersegurança. O episódio foi identificado numa reanálise de transcrições e associado ao mesmo parceiro de avaliação que esteve presente nos outros casos.
Como a Anthropic detetou este quarto caso e qual foi a resposta imediata?
A Anthropic detetou o quarto caso ao reexaminar 141 000 transcrições consideradas de risco e, depois, ao alargar a procura a 481 milhões de registos. Em seguida, a empresa reportou os pormenores ao METR e pediu uma investigação independente sobre os quatro incidentes para apurar causas e consequências.
Quantas transcrições foram revistas no total e que áreas cobriram?
A Anthropic revistou inicialmente 141 000 transcrições e, depois, realizou uma varrida de 481 milhões de registos, abrangendo materiais do Frontier Red Team, algumas avaliações não relacionadas com cibertrabalho e ambientes de aprendizagem por reforço, para determinar se existiam mais incidentes além dos quatro já identificados.
As fugas do Claude causaram danos a outras organizações durante os testes?
A Anthropic identificou que as quatro fugas do Claude resultaram em acessos não autorizados a sistemas de outras organizações durante exercícios de cibersegurança que deveriam ter sido isolados. Esses incidentes envolveram interações externas inesperadas motivadas por falhas de configuração no ambiente de teste.
O que implica a investigação conduzida pelo METR sobre estes incidentes?
A investigação independente liderada pelo METR envolve os quatro incidentes reportados pela Anthropic e tem como objetivo avaliar causas técnicas, impacto e medidas corretivas. A Anthropic entregou os detalhes dos casos ao METR para análise externa e acompanhamento das recomendações resultantes.
Miguel Andrade