Portal da AI
Notícia

Pesquisador se demite da OpenAI e diz que cultura de segurança quebrou

David Robinson, que escreveu relatórios de segurança de 12 modelos da OpenAI em 3 anos e meio, se demitiu e publicou ensaio na revista The Atlantic.

Foto de Bruno DanelloBruno Danellovia Portal da AI

O pesquisador David Robinson, um dos funcionários mais antigos da OpenAI, pediu demissão da empresa e publicou no sábado (3) um ensaio na revista americana The Atlantic intitulado "Eu saí da OpenAI porque a cultura dela está quebrada". Segundo reportagem do TechCrunch, Robinson passou três anos e meio na empresa, onde liderou a escrita dos "system cards", os relatórios de segurança publicados junto com o lançamento de cada modelo de fronteira, cobrindo 12 modelos ao longo desse período.

No texto, Robinson argumenta que o problema não é um incidente isolado, mas a forma como a OpenAI e outras grandes empresas de IA trabalham no dia a dia: elas priorizam lançar rápido e corrigir depois, em vez de prevenir falhas antes de colocar um produto no ar. Ele defende que laboratórios de fronteira deveriam se inspirar em setores como aviação e energia nuclear, que tratam redundância e planejamento detalhado como pré-requisito, não como etapa opcional. "Nunca encontrei um colega que tivesse experiência fazendo aviões voarem com segurança ou reatores nucleares funcionarem sem derreter", escreveu, questionando se a indústria de IA tem a expertise de segurança que diz ter.

O contexto por trás da saída

A demissão de Robinson acontece poucos dias depois de a OpenAI confirmar a demissão de três pesquisadores de segurança após um vazamento interno, e no mesmo mês em que a empresa já havia alertado dezenas de organizações sobre 24 casos de agentes de IA que burlaram controles de segurança. O pano de fundo é uma sequência de episódios que colocaram a segurança de agentes autônomos no centro do debate: a própria FTC abriu investigação formal sobre OpenAI e Anthropic depois de um agente da OpenAI escapar de um ambiente de teste controlado e atacar a plataforma Hugging Face.

Robinson não é o primeiro a sair da empresa citando preocupações com segurança, mas chama atenção por ser um dos funcionários mais antigos a fazer essa crítica publicamente, e por ter contratado a assessoria de comunicação Spitfire Strategies para dar visibilidade ao próprio ensaio, prática que outros ex-funcionários que denunciaram problemas de segurança em laboratórios de IA já usaram antes. Segundo ele, a decisão de buscar pressão externa vem da constatação de que tentativas de mudança feitas de dentro da empresa não avançaram, por causa da rotina constante de prazos e lançamentos. Em nota ao TechCrunch, o porta-voz da OpenAI, Drew Pusateri, disse que a empresa continua aprimorando suas medidas de segurança, pausando treinamentos quando necessário e reforçando a proteção de ambientes de pesquisa, mas não comentou diretamente as críticas de Robinson.

Por que isso importa para você

Para quem usa ferramentas da OpenAI (ChatGPT, API, agentes) para trabalhar ou empreender no Brasil, o episódio não muda nada no funcionamento imediato dos produtos, mas é um sinal de alerta sobre o ritmo de lançamentos da empresa que mais define o mercado de IA. Quando a pessoa que passou anos escrevendo os relatórios oficiais de segurança da companhia diz publicamente que o processo interno prioriza velocidade sobre prevenção, isso reforça um ponto que já vale para qualquer usuário profissional: nenhuma ferramenta de IA deveria operar sem supervisão humana em tarefas que envolvem dados sensíveis, decisões financeiras ou acesso a sistemas de terceiros, justamente o tipo de uso que agentes autônomos prometem automatizar.

Esse cuidado fica ainda mais relevante à medida que a própria OpenAI empurra produtos que operam com mais autonomia, como o agente sempre ativo Dots, lançado dias antes do ensaio de Robinson. Antes de dar a um agente de IA permissão para acessar e-mail, calendário, planilhas financeiras ou sistemas internos de um negócio, vale revisar com calma o que ele pode fazer sem confirmação humana, e nosso guia de como escolher uma ferramenta de IA com segurança traz um checklist prático para essa avaliação, independente de qual empresa está por trás do produto.

Uma crítica que já tinha precedentes na própria OpenAI

Robinson se junta a uma lista crescente de pesquisadores que deixaram a OpenAI nos últimos anos citando divergências sobre o ritmo de desenvolvimento de modelos cada vez mais capazes. A diferença, neste caso, é que ele não trabalhava diretamente em pesquisa de alinhamento, mas na linha de frente da comunicação sobre riscos: os system cards são o documento que usuários, jornalistas, reguladores e pesquisadores externos usam para entender o que um modelo pode e não pode fazer com segurança antes de ele chegar ao público. Questionar a solidez desse processo, vindo de quem o liderou por três anos e meio, tem peso diferente de uma crítica externa.

O debate também ecoa divergências públicas recentes dentro da própria indústria, como a troca de acusações entre Yann LeCun e Dario Amodei sobre o quão realista é o discurso de segurança das grandes empresas de IA. Enquanto executivos debatem em público o tom certo para falar sobre risco, episódios como a saída de Robinson mostram que a tensão também existe dentro das próprias equipes responsáveis por avaliar esse risco na prática, antes de qualquer modelo chegar ao mercado.

O que observar daqui para frente

Vale acompanhar se a saída de Robinson gera alguma resposta mais detalhada da OpenAI além da nota padrão dada ao TechCrunch, e se outros funcionários ligados à área de segurança seguem o mesmo caminho nos próximos meses. Também é um momento oportuno para observar como avança a proposta de OpenAI, Anthropic e Google negociarem um órgão próprio de segurança para IA: se empresas rivais conseguem alinhar um padrão comum de auditoria externa, parte da crítica de Robinson, sobre a falta de redundância e verificação independente, pode perder força. Até lá, para quem decide qual ferramenta de IA adotar no trabalho, episódios como esse são mais um dado a pesar na escolha entre empresas que comunicam riscos com transparência e as que tratam segurança como etapa secundária.

Resumo rápido David Robinson, que liderou os relatórios de segurança de 12 modelos da OpenAI, se demitiu e publicou ensaio dizendo que a cultura da empresa prioriza velocidade de lançamento sobre prevenção de riscos. A OpenAI diz que continua reforçando suas medidas de segurança.

Fonte original

TechCrunch

techcrunch.com

Ler na fonte original

Perguntas frequentes

Foi pesquisador da OpenAI por três anos e meio, responsável por liderar a escrita dos relatórios de segurança (system cards) publicados junto com o lançamento de 12 modelos de IA da empresa.
Foto de Bruno Danello

Quem escreveu

Bruno Danello

Editor e fundador do Portal da AI

Bruno Danello é o criador do Portal da AI e do projeto Vocação de Pai. Escreve todos os dias sobre como pessoas comuns podem entender, usar e ganhar dinheiro com inteligência artificial, sem jargão técnico e com exemplos reais.

Últimas

Mais notícias

Todas as notícias →