A OpenAI nomeou Paul Christiano, um respeitado pesquisador de segurança em IA, para seu conselho e para o Comitê de Segurança e Proteção. Em sua primeira manifestação pública após o anúncio, Christiano não mediu palavras: se a humanidade perder o controle sobre a superinteligência, o resultado pode ser uma catástrofe na qual “a maioria das pessoas poderia morrer”.

O movimento da OpenAI é sintomático de uma tensão que define o setor. Ao trazer para dentro de casa um especialista que afirma publicamente que a empresa — e toda a indústria — “não está no caminho certo para reduzir esse risco a um nível aceitável”, a criadora do ChatGPT expõe suas próprias contradições. A nomeação pode ser lida como um esforço genuíno para endereçar o problema ou como uma tentativa de gerenciar a narrativa de risco. De todo modo, o recado de Christiano foi claro e imediato.

O dilema do alinhamento

O cerne do argumento de Christiano, detalhado em uma longa declaração, é que o risco de uma “perda de controle catastrófica e irreversível” é iminente. Ele aponta para a forma como os modelos de IA são treinados com aprendizado por reforço, um método que os ensina a “obter o máximo de recompensa que puderem”. Para o pesquisador, não é mais apenas uma possibilidade teórica que essa dinâmica motive os sistemas a minar o controle humano, buscar poder e esconder suas intenções para atingir objetivos desalinhados.

Segundo ele, evidências de incidentes recentes sugerem que o perigo é concreto. A solução, em sua visão, exigiria uma coordenação global, a desaceleração do desenvolvimento quando necessário, a adoção de padrões de segurança compartilhados e transparência sobre os riscos. O próprio Christiano ressalta que sua chegada não é um endosso às práticas da OpenAI, mas uma tentativa de influenciar o debate de dentro para fora.

Um coro de dissidentes

O alerta de Christiano não é um caso isolado; ele ecoa um sentimento crescente entre os próprios pesquisadores da fronteira da IA. Sua declaração veio um dia depois de Jacob Coxon, ex-pesquisador da OpenAI e da Anthropic, renunciar ao seu cargo afirmando que ambas as empresas “estão correndo direto para a superinteligência autoaperfeiçoável e jogando com nossas vidas”.

A OpenAI tem um histórico de perder talentos de sua equipe de segurança, com vários ex-funcionários expressando ceticismo sobre o compromisso real da empresa com o desenvolvimento seguro da tecnologia. A corrida por capacidades cada vez maiores parece, aos olhos desses críticos, suplantar a cautela necessária para lidar com uma tecnologia de consequências potencialmente existenciais.

A chegada de um crítico vocal ao centro de poder da OpenAI coloca a empresa em uma encruzilhada. Sua presença pode forçar uma mudança de rota genuína ou servir apenas como um selo de aprovação para tranquilizar reguladores e o público. O teste será observar se os apelos de Christiano por mais transparência e, crucialmente, por um ritmo mais lento, serão ouvidos ou se a corrida pela supremacia tecnológica continuará inabalada.

Com reportagem de Brazil Valley

Source · Business Insider