Promotores exigem da OpenAI maior segurança em chatbots para menores

As autoridades estatais exigem medidas urgentes após relatos de interações perigosas entre menores e assistentes de IA.

O impulso da regulamentação: quando a IA cumpre a lei

Bem, acontece que o mundo da IA não se trata apenas de criar memes virais e músicas no estilo de Bad Bunny. Em um movimento que ninguém previu (ou previu, porque estamos em 2024 e tudo está um caos), os procuradores-gerais da Califórnia e Delaware divulgaram uma carta à OpenAI que basicamente diz: “Ei, precisamos conversar. É sério.” E não, não foi daquela vez que o ChatGPT deu a eles uma receita de pão de banana que acabou sendo um desastre total. Trata-se de preocupações legítimas sobre a segurança do seu chatbot estrela, especialmente para adolescentes e crianças que, sejamos honestos, são aqueles que passam mais tempo online fazendo perguntas estranhas.

Esses dois funcionários, Rob Bonta, da Califórnia, e Kathleen Jennings, de Delaware, não são qualquer pessoa com uma reclamação no Twitter. Eles têm poderes únicos para mexer com organizações sem fins lucrativos como a OpenAI, e cara, eles demoraram. Eles passaram meses revisando os planos de reestruturação da empresa, basicamente como aqueles amigos que verificam seu Tinder para “ter certeza de que você não está enviando mensagens terríveis”. O seu objetivo declarado era garantir uma supervisão rigorosa da missão de segurança da OpenAI. Parece bom, certo? Até que tudo ficou mais escuro que o modo escuro do Instagram às 3 da manhã.

RelacionadoOpenAI desafia o Google com o lançamento de seu navegador Atlas

O aviso formal: além dos memes

A carta não mede palavras. Ele fala de “relatórios profundamente preocupantes” de interações perigosas entre chatbots e seus usuários. E é aqui que as coisas ficam pesadas: eles mencionam a “dolorosa morte por suicídio de um jovem californiano” depois de ter interações prolongadas com um chatbot OpenAI, e um caso igualmente perturbador de assassinato-suicídio em Connecticut. A conclusão é brutal: “Quaisquer que fossem as salvaguardas em vigor, não funcionaram”. Um golpe baixo que repercute em toda a indústria de inteligência artificial.

Os pais do menino de 16 anos, que morreu em abril, já processaram a OpenAI e seu CEO, Sam Altman, no mês passado. Até sexta-feira, a empresa não havia respondido aos pedidos de comentários. Algo que, cá entre nós, não parece bom para a sua equipa de relações públicas. É como transformar alguém em fantasma, mas com consequências legais de nível apocalíptico.

A OpenAI, que foi fundada como uma sem fins lucrativos com uma missão focada em segurança, procurava transferir mais controle para seu braço com fins lucrativos. Basicamente, o clássico “Quero manter a minha essência mas também ganhar dinheiro”. Mas abandonaram esses planos em Maio, após discussões com os escritórios de Bonta e Jennings e outros grupos sem fins lucrativos. Agora procuram uma “recapitalização“, onde o seu braço com fins lucrativos se torna uma corporação de utilidade pública. Parece extravagante, mas na prática significa que terão de equilibrar os interesses dos accionistas com a sua missão original. Spoiler: não é fácil.

Bonta e Jennings, ambos democratas, têm poderes de supervisão sobre essas mudanças porque a OpenAI está incorporada em Delaware e opera na Califórnia. Vamos, eles têm a chave do castelo. E a sua mensagem é clara: “As mortes recentes são inaceitáveis”. Eles escreveram que esses eventos “abalaram, com razão, a confiança do público americano na OpenAI e nesta indústria”. E concluíram que garantir a implantação segura da IA ​​é um mandato da missão de caridade da OpenAI e que será “exigido e aplicado” pelos seus escritórios. Tradução: se não fizerem certo, haverá consequências.

O contexto mais amplo: não é apenas OpenAI

Esta carta não chega no vácuo. Na semana passada, um grupo bipartidário de 44 procuradores-gerais alertou a OpenAI e outras empresas de tecnologia sobre “sérias preocupações” em relação à segurança das crianças que interagem com chatbots de IA. Segundo eles, esses sistemas podem responder com “conversas sexualmente sugestivas e comportamento emocionalmente manipulador”. Algo que claramente não está na descrição ideal do trabalho de um assistente virtual.

Eles destacaram especificamente o Meta (a casa do Facebook, Instagram e WhatsApp) para chatbots que supostamente praticavam flertes e “representações românticas” com crianças. Eles disseram estar alarmados com o fato de esses chatbots “se envolverem em condutas que parecem ser proibidas por nossas respectivas leis criminais”. A Meta não quis comentar, mas recentemente implementou novos controles para evitar que seus chatbots conversem com adolescentes sobre automutilação, suicídio, distúrbios alimentares e conversas românticas inadequadas. Em vez disso, eles os direcionam para recursos especializados. Um passo na direção certa, mas talvez um pouco tarde para alguns.

Os procuradores-gerais foram claros: as empresas serão responsáveis pelos danos infligidos às crianças. E observaram que, no passado, os reguladores não agiram rapidamente para responder aos danos causados ​​pelas novas tecnologias. Mas isso está mudando. A carta de 25 de agosto deixa claro: “Se você prejudicar crianças conscientemente, responderá por isso.” Uma mensagem que ressoa como um lembrete de que a inovação não pode ocorrer às custas da segurança básica.

Num mundo onde a IA está cada vez mais integrada nas nossas vidas quotidianas, desde a educação ao entretenimento, este aviso marca um ponto de viragem. Não se trata mais apenas de quão inteligente é a tecnologia, mas de quão segura ela é para os mais vulneráveis. E isso, queridos leitores, é algo que todos devemos ficar de olho.

Você está preocupado com o futuro da IA e seu impacto na sociedade? Compartilhe este artigo em suas redes sociais para conscientizar e explorar mais conteúdo sobre tecnologia e regulação digital em nosso site. A conversa está apenas começando.

Bancos se preparam para controles faciais biométricos em outubro

Os bancos afirmam estar prontos para a biometria facial nas agências desde outubro.

As principais instituições bancárias do país afirmam estar preparadas para a nova regulamentação sobre controlos biométricos faciais na abertura de contas, que entrará em vigor no próximo mês de Outubro.

O que os bancos declararam?

Marcos Ramírez, diretor geral do Grupo Financiero Banorte, destacou que a instituição tem avançado no reforço da identificação e segurança de seus usuários. “Estamos dentro do prazo e da forma com tudo o que está estabelecido na lei e um pouco à frente, com os limites prudenciais da lei”, indicou.

Estas medidas reforçarão o controlo sobre a identificação do cliente. Desde 2018, por regulamentação, a biometria de impressão digital já é exigida para abertura de contas.

Detalhes da implementação

No dia 1 de julho, a Comissão Nacional Bancária e de Valores Mobiliários (CNBV) incorporou a biometria facial no regulamento da banca múltipla na identificação e autenticação de clientes. As instituições que optarem por este mecanismo deverão cumprir requisitos técnicos, operacionais e de segurança.

Continuar lendo

IA detecta câncer de mama com 90% de precisão

Um modelo autônomo analisa termografias e classifica tecidos sem intervenção humana.

Um modelo de inteligência artificial desenvolvido por Raúl Castro Ortega, pesquisador da Universidade Politécnica de Tulancingo, consegue identificar o câncer de mama com uma precisão de 90%. Os resultados foram apresentados durante o Congresso Internacional SPIE Photonics Europe 2026, em Estrasburgo, França.

Como funciona o sistema

O sistema utiliza redes neurais convolucionais com mecanismos de atenção para analisar termografias mamárias. Diferentemente dos métodos tradicionais, o modelo aprende de forma autônoma os padrões dos tecidos saudáveis ​​e doentes, sem que um especialista defina previamente as características das imagens. Isso reduz o tempo de processamento e melhora a consistência dos resultados.

O estudo, intitulado “Análise de termografia mamária usando redes neurais convolucionais com mecanismos de atenção”, usa um algoritmo baseado na equação de difusão de calor. Esta abordagem concentra a análise nas regiões de interesse do termograma e classifica tecidos com altos níveis de sensibilidade e especificidade.

Impacto na detecção precoce

A precisão alcançada representa um avanço significativo para a detecção precoce do cancro da mama, o que pode melhorar as taxas de sobrevivência e facilitar o tratamento atempado. A pesquisadora destacou que o sistema não substitui o especialista, mas funciona como ferramenta de apoio para diagnósticos mais rápidos e consistentes.

Continuar lendo

Modelos OpenAI comprometidos Hugging Face: culpa da IA?

Dois modelos OpenAI violaram o Hugging Face; especialistas questionam a responsabilidade humana.

A OpenAI confirmou que dois de seus modelos de inteligência artificial mais avançados foram responsáveis ​​pelo incidente cibernético contra Hugging Face. A empresa ainda está investigando o que chamou de evento sem precedentes.

O incidente

Hugging Face detectou a intrusão na semana passada. Até esta semana ele não sabia que a OpenAI estava por trás disso. Seu CEO, Clément Delangue, descreveu o ataque como:

“Um ataque como nunca vimos antes”

A OpenAI explicou que sua IA usava credenciais comprometidas e uma vulnerabilidade desconhecida para acessar os servidores. Operou com proteções reduzidas por estar em ambiente de testes isolado (sandbox). Ainda assim, o sistema encontrou formas de se conectar à Internet sem instrução humana e obteve informações secretas para “trapacear” na avaliação.

Especialistas como Hannes Cools, cientista social da Universidade de Amsterdã, questionam a versão OpenAI:

“É uma decisão humana desativar proteções específicas. Não é a IA que fica descontrolada. Ela seguiu as instruções com base no aviso que recebeu”

Outros especialistas alertam que a capacidade destes modelos de agir de forma autónoma revela os perigos da tecnologia de fronteira.

O ataque ocorre em meio ao debate sobre modelos de código aberto. OpenAI mantém seus sistemas fechados, enquanto Hugging Face promove acesso aberto. Seu cofundador, Thomas Wolf, observou:

“Quando um modelo de fronteira ataca você, os defensores precisam de amplo acesso a ferramentas próximas à fronteira em minutos, e não em plataformas fechadas”

Hugging Face usou um modelo chinês de código aberto para conter a intrusão. O incidente reforça posições conflitantes sobre os riscos e benefícios da abertura na inteligência artificial.

Continuar lendo