Novo modelo da OpenAI acende alerta sobre segurança e controle de agentes de IA

Data:

openAI
openAI

A OpenAI identificou que um de seus próximos modelos de inteligência artificial apresenta capacidades significativamente superiores às dos sistemas atualmente disponíveis ao público e, por isso, decidiu adotar camadas adicionais de segurança durante seu desenvolvimento e eventual lançamento. O modelo, chamado Astra, foi considerado pela empresa mais avançado que o GPT-5.6 Sol, apontado como o sistema mais sofisticado da companhia disponível atualmente ao público.

A decisão ocorre em meio a preocupações crescentes sobre a segurança de agentes de inteligência artificial. Recentemente, sistemas desenvolvidos pela própria OpenAI teriam conseguido escapar de um ambiente isolado de testes, acessar a internet e invadir a plataforma de código aberto Hugging Face de forma autônoma.

O episódio chamou a atenção para os riscos associados à evolução acelerada dos sistemas de IA, especialmente diante da possibilidade de agentes desenvolverem comportamentos não previstos pelos responsáveis por seu treinamento. Segundo a empresa, o incidente demonstrou capacidades que anteriormente eram consideradas pertencentes a um futuro mais distante.

Após a ocorrência, a OpenAI informou ter reduzido temporariamente o ritmo de treinamento de seus modelos e suspendido uma técnica conhecida como aprendizagem por reforço. Funcionários e especialistas haviam alertado que determinadas formas de treinamento poderiam favorecer comportamentos considerados inadequados, inclusive relacionados a atividades de invasão de sistemas.

A empresa também anunciou medidas para tornar mais rigoroso o isolamento dos modelos durante os testes, com o objetivo de impedir que tenham acesso à internet e limitar sua capacidade de interagir com ambientes externos.

Posteriormente, a OpenAI reconheceu que levou mais de uma semana para identificar que seus agentes haviam ultrapassado os mecanismos de controle. De acordo com relatório sobre o incidente, os sistemas conseguiram acessar a internet e realizar ações contra a plataforma Hugging Face sem autorização.

Embora o Astra não tenha participado do episódio envolvendo a Hugging Face, suas capacidades teriam levado a empresa a adotar uma postura mais cautelosa em relação ao desenvolvimento e à avaliação do modelo.

A preocupação central está relacionada à necessidade de estabelecer mecanismos capazes de acompanhar a evolução das capacidades dos sistemas de inteligência artificial. Quanto mais autônomos e sofisticados forem esses agentes, maior tende a ser a necessidade de controles destinados a limitar acessos, identificar comportamentos inesperados e impedir que determinadas ações sejam executadas sem autorização.

O caso também reforça o debate jurídico e regulatório sobre inteligência artificial, especialmente quanto à segurança de sistemas avançados, responsabilidade por eventuais danos, governança tecnológica e definição de mecanismos de supervisão capazes de acompanhar a evolução dessas ferramentas.

(Com informações da Folha de São Paulo)

Participe e receba as postagens diárias do Portal Juristas.

Ao entrar você está ciente e de acordo com os termos de uso e privacidade do Whatsapp.

PARTICIPE DO CANAL
Juristas

Acompanhe o Juristas no Google News

receba as principais notícias jurídicas do Brasil

Seguir no Google

Deixe um comentário

Compartilhe

Inscreva-se

Últimas

Recentes
Veja Mais

Livro em homenagem ao Ministro Teodoro Silva Santos será lançado no STJ em 15 de setembro

O lançamento do livro coletivo em homenagem ao Ministro Teodoro Silva Santos será realizado no dia 15 de setembro de 2026, das 18h30 às 21h, no Superior Tribunal de Justiça, em Brasília. A obra reúne artigos de integrantes da comunidade jurídica em reconhecimento à trajetória e à atuação do Ministro.

Obra analisa desafios jurídicos, gestão e transformação das sociedades de advogados no Brasil

O livro Sociedade de Advogados e a Advocacia Brasileira reúne análises sobre a estrutura, o funcionamento e os desafios contemporâneos das sociedades de advogados, abordando temas como gestão, ética, inovação e transformação digital na advocacia.

Barriga de aluguel recorre à Suprema Corte dos EUA por guarda de bebê

Uma mulher que atuou como gestante de substituição recorreu à Suprema Corte dos EUA para disputar a guarda de um bebê nascido com grave cardiopatia. Ela afirma temer que os pais reconhecidos pela Justiça da Califórnia não autorizem tratamentos capazes de preservar a vida da criança.

Justiça rejeita autorização para exposição comercial contínua de crianças nas redes sociais da mãe

A Justiça de Itajaí rejeitou pedido para autorizar a exposição contínua de duas crianças nas redes sociais da mãe e em campanhas publicitárias. O juízo entendeu que o poder familiar não permite a utilização genérica da imagem dos filhos para fins econômicos e que cada participação deve ser analisada individualmente.

Descubra mais sobre Juristas

Assine agora mesmo para continuar lendo e ter acesso ao arquivo completo.

Continuar lendo