Relatório 365 Dias

Ex-segurança da OpenAI alerta sobre falta de cuidados em IA

Ex-segurança da OpenAI alerta sobre falta de cuidados em IA
Imagem: g1.globo.com. Uso informativo; os direitos pertencem ao seu titular.

Ex-funcionário denuncia falta de cuidados em inteligência artificial

A questão sobre falta de cuidados em inteligência artificial ganhou destaque com as denúncias de David Robinson, que atuava na área de segurança da OpenAI. O profissional, que deixou recentemente a empresa responsável pela criação do ChatGPT, publicou um artigo crítico sobre como as companhias do setor lidam com a proteção dos sistemas de IA, alertando que o desenvolvimento acelerado representa uma ameaça significativa.

Em análise divulgada no periódico "The Atlantic" no último sábado, Robinson argumenta que a falta de cuidados em inteligência artificial é uma realidade preocupante no mercado. As organizações, segundo ele, não demonstram o grau de responsabilidade necessário ao trabalhar com tecnologias cada vez mais sofisticadas e potencialmente perigosas.

Críticas ao modelo de desenvolvimento iterativo

Robinson aponta especificamente a prática denominada "implantação iterativa", adotada pela OpenAI. Esse modelo consiste em lançar sistemas no mercado e implementar melhorias de segurança conforme problemas surgem. Para o ex-funcionário, essa abordagem é inadequada quando se trata de sistemas avançados de inteligência artificial.

"O tempo de tentativa e erro acabou", afirmou Robinson em seu texto. Ele defende que os sistemas de IA mais avançados necessitam de medidas de proteção equivalentes às utilizadas em setores como energia nuclear e aviação comercial, onde falhas podem ter consequências catastróficas.

Experiência profunda em segurança de IA

A credibilidade das denúncias de Robinson está fundamentada em sua trajetória profissional. O especialista trabalhou durante três anos e meio na OpenAI, período em que foi responsável por estruturar os processos utilizados pela empresa para avaliar e gerenciar riscos associados à inteligência artificial. Além disso, Robinson supervisionou relatórios de segurança relacionados a doze lançamentos de modelos avançados, oferecendo-lhe visão interna e privilegiada sobre os procedimentos da companhia.

Durante sua permanência na OpenAI, Robinson constatou que a instituição não consegue manter o nível de precaução que considera essencial, especialmente quando a organização intensifica o ritmo de lançamentos e atualizações. "À medida que a empresa corre de um lançamento para o outro, ela não está conseguindo atingir o nível de cuidado que acredito ser necessário", declarou o ex-funcionário.

Resposta da OpenAI às críticas

A OpenAI respondeu às acusações afirmando que possui protocolos para evitar o desenvolvimento de modelos mais avançados do que sua capacidade de gerenciá-los com segurança. De acordo com um porta-voz da companhia, a organização "pausa o treinamento ou suspende os modelos quando é necessário diminuir o ritmo", indicando uma postura proativa quanto à gestão de riscos.

Essa resposta, contudo, não dissipa completamente as preocupações levantadas por Robinson e outros críticos do setor sobre a adequação real dessas medidas.

O desafio do alinhamento em IA

Robinson também destaca outro aspecto crítico relacionado à falta de cuidados em inteligência artificial: o desenvolvimento das capacidades técnicas está ocorrendo em velocidade superior ao conhecimento científico sobre "alinhamento". Esse campo de pesquisa concentra-se em garantir que os sistemas de inteligência artificial operem de acordo com objetivos e valores humanos.

A defasagem entre a capacidade tecnológica e a compreensão científica sobre como controlar e alinhar esses sistemas representa um risco significativo que, segundo Robinson, não está sendo adequadamente considerado pelas empresas do setor.

Crescente preocupação no mercado de IA

As críticas de Robinson fazem parte de um debate mais amplo dentro da indústria de inteligência artificial sobre a velocidade do desenvolvimento tecnológico. Tanto a OpenAI quanto sua concorrente Anthropic enfrentaram questionamentos após incidentes envolvendo falhas em controles de segurança e comportamentos inesperados em sistemas experimentais.

Essas ocorrências amplificaram as preocupações de especialistas e lideranças do setor sobre a adequação das medidas de proteção implementadas durante o desenvolvimento acelerado de novas tecnologias.

Histórico de denúncias de funcionários

O caso de David Robinson não representa um episódio isolado. Recentemente, Jacob Coxon, um pesquisador britânico de 27 anos, abandonou o setor após trabalhar em ambas as principais companhias de IA. Coxon atuou na área de pré-treinamento, fase crucial na qual os modelos absorvem informações em larga escala, primeiro na OpenAI e posteriormente na Anthropic.

Em sua saída do mercado, Coxon publicou críticas contundentes nas redes sociais, afirmando que "nenhuma das empresas está agindo de forma responsável" e acusando as organizações de "brincar com as nossas vidas" ao avançar em direção a superinteligência sem as devidas precauções.

Essas denúncias sucessivas ressaltam uma preocupação sistêmica dentro da indústria sobre a falta de cuidados em inteligência artificial e a necessidade de reequilibrar a velocidade do desenvolvimento com a segurança e a responsabilidade.

Também em Economia

Criptomoedas

Ethereum (ETH) $2,692 ▲ 0.55%
BNB $783 ▲ 1.95%
Solana (SOL) $120 ▲ 1.11%

Divisas

USD/EUR0.8909
EUR/GBP0.8503