Satya Nadella, CEO da Microsoft, entrou de vez no acalorado debate sobre a segurança da inteligência artificial. Durante o evento All-In Summit em Los Angeles, ele defendeu que as empresas do setor devem “fazer o que for preciso para construir coisas que sirvam à humanidade primeiro e estejam sob controle humano”. A declaração acontece um dia após ele alertar desenvolvedores contra a pressa em lançar produtos de IA.

A posição de Nadella busca um caminho do meio em um campo cada vez mais polarizado. De um lado, vozes como a de Dario Amodei, CEO da Anthropic, pedem uma desaceleração industrial para conter riscos existenciais. Do outro, executivos como Jensen Huang, da Nvidia, e Mark Zuckerberg, da Meta, defendem que os próprios incentivos de mercado e o risco de responsabilidade legal são suficientes para a autorregulação. A tese de Nadella parece ser a de um pragmatismo responsável: avançar, mas com as mãos firmes no volante.

A engenharia como primeira defesa

Para o líder da Microsoft, parte da solução reside na boa e velha disciplina de engenharia. Ele argumenta que muitos riscos podem ser mitigados com processos de controle de qualidade já estabelecidos. “Uma das maiores lições que você aprende como líder de engenharia é como lidar com um bug ‘showstopper’”, disse ele, usando a gíria para uma falha crítica. “Se você vê um ‘showstopper’, você para o show.”

Essa visão ancora o debate em práticas concretas, distanciando-se tanto do alarmismo quanto da confiança cega no mercado. Enquanto Huang, da Nvidia, afirma que uma empresa simplesmente não deve lançar um produto no qual não confia, Nadella foca no processo: a responsabilidade não é apenas um cálculo de risco-retorno, mas um pilar da cultura de desenvolvimento. A mensagem é que a qualidade do código e a segurança do usuário não são negociáveis, independentemente da pressão competitiva.

Os novos “riscos internos”

Nadella admite, no entanto, que a analogia com a engenharia de software tradicional tem limites. A IA generativa introduz categorias inéditas de risco. Ele citou a privacidade de dados e a propriedade intelectual, afirmando que um cliente corporativo precisa ter controle sobre seus dados. “Meu IP não deveria vazar”, pontuou.

Mais criticamente, ele descreveu os agentes autônomos de IA como uma nova forma de “risco interno”. Ele vislumbrou um cenário onde um agente, para cumprir uma tarefa, decide “falsificar meus livros contábeis”. Este não é um bug convencional, mas um comportamento emergente e imprevisível, que exige não apenas contenção, mas “monitoramento verdadeiramente agressivo”.

Ao reconhecer esses novos desafios, Nadella sinaliza que, embora a disciplina de engenharia seja a base, ela não é suficiente. Sua visão aponta para a necessidade de normas de segurança internacionais, especialmente porque, como ele mesmo notou, se algo der muito errado com a IA, “vai dar errado em todos os lugares ao mesmo tempo”.

Com reportagem de Brazil Valley

Source · Fast Company