Uma nova ameaça impulsionada por IA chega às escolas

Especialistas em proteção infantil no Reino Unido estão orientando as escolas a remover fotos identificáveis de alunos de seus sites e redes sociais depois que chantagistas usaram essas imagens para criar material sexualmente explícito com ferramentas de IA. O alerta segue ao menos um caso confirmado em que uma escola secundária não identificada foi alvo depois que criminosos pegaram fotos de estudantes de fontes públicas on-line, as manipularam em imagens abusivas e depois exigiram dinheiro para não publicar o material.

O caso, descrito pela Internet Watch Foundation, aponta para uma evolução especialmente perturbadora dos danos on-line. Em vez de roubar material íntimo já existente, os infratores agora podem fabricá-lo a partir de retratos escolares comuns, fotos de eventos ou postagens em redes sociais. Isso reduz a barreira para o abuso e transforma até mesmo a visibilidade rotineira na internet em uma possível fonte de coação.

O que aconteceu no caso relatado

Segundo o relatório fornecido, a Internet Watch Foundation disse que uma escola secundária britânica não identificada foi alvo de uma tentativa de chantagem depois que criminosos usaram fotos retiradas do site da instituição ou de contas em redes sociais. Usando ferramentas de IA, eles transformaram essas imagens em material de abuso sexual infantil e enviaram os resultados à escola, ameaçando publicá-los on-line, a menos que fossem pagos.

A organização disse que converteu as imagens de chantagem em um hash digital, ou impressão digital, e compartilhou esses dados com grandes plataformas de tecnologia para ajudar a impedir que o material fosse carregado. O órgão de vigilância também afirmou que 150 imagens desse incidente poderiam ser classificadas como material de abuso sexual infantil segundo a lei do Reino Unido.

As autoridades indicaram que essa não era uma preocupação isolada. A Internet Watch Foundation disse ter conhecimento de outras tentativas de chantagem no Reino Unido envolvendo imagens manipuladas retiradas de sites escolares ou contas sociais, ainda que os detalhes desses casos não tenham sido divulgados publicamente.

Por que as escolas estão sendo orientadas a mudar a prática

A recomendação dos especialistas é contundente: remover dos sites e redes sociais fotos identificáveis do rosto dos estudantes, ou considerar não usá-las de forma alguma. Esse conselho reflete um modelo de ameaça alterado. Historicamente, as escolas podiam focar em consentimento, configurações de privacidade ou limitar comentários nas publicações. A ascensão da IA generativa significa que o risco não é mais apenas o uso indevido da imagem original. A própria imagem pode se tornar matéria-prima para abuso sintético.

Para as escolas, isso cria uma difícil troca. Fotos da vida estudantil costumam ser usadas para comunicar comunidade, celebrar conquistas e apresentar um perfil público acolhedor. Mas a visibilidade pública que antes parecia em grande parte benigna agora traz um risco mais agudo, especialmente quando as imagens são fáceis de baixar, recortar e reaproveitar em escala.

Como as autoridades estão respondendo

A Agência Nacional de Crime do Reino Unido e especialistas em proteção infantil estão tratando o problema como uma ameaça criminal emergente. Jess Phillips, ministra da proteção e da violência contra mulheres e meninas, descreveu a tentativa de chantagem às escolas como um desenvolvimento profundamente preocupante e disse que o governo atualizaria as leis sobre imagens explícitas geradas por IA se necessário. Suas declarações vieram após o anúncio de uma proibição de possuir modelos de IA projetados para gerar material de abuso sexual infantil.

A questão legal e de política aqui é mais ampla do que um único protocolo de segurança escolar. Os sistemas de IA estão comprimindo o tempo entre a captura da imagem, sua manipulação e a coação. Reguladores e autoridades policiais agora estão sob pressão não apenas para responder à distribuição de material ilegal, mas também às ferramentas e fluxos de trabalho que tornam o abuso sintético mais fácil de produzir.

A lição mais ampla

Esta história não é apenas sobre escolas. É sobre a colisão entre IA generativa e exposição digital cotidiana. Um site escolar, que antes funcionava principalmente como uma plataforma de informação e comunidade, agora pode se tornar um terreno de coleta para extorsão baseada em imagens. As vítimas podem ser instituições no início, mas o dano subjacente recai sobre as crianças, cujas imagens são reaproveitadas em fabricações abusivas.

O caso também ressalta um desafio recorrente na governança da IA: usos nocivos muitas vezes surgem não apenas por meio de sistemas altamente sofisticados, mas da combinação de ferramentas amplamente disponíveis e dados públicos facilmente acessíveis. Neste caso, os dados públicos são simplesmente o arquivo cotidiano de imagens que muitas escolas construíram ao longo de anos on-line.

Para líderes da educação, a implicação imediata é prática. Revisar políticas de fotos, limitar imagens identificáveis, reconsiderar o que precisa ser público e assumir que qualquer imagem voltada ao público pode ser manipulada. Para formuladores de políticas, a implicação é estrutural. Abuso sintético e chantagem não são mais casos extremos. Eles fazem parte do ambiente operacional das instituições digitais.

Portanto, o alerta dos especialistas do Reino Unido merece atenção muito além de um único país. À medida que as ferramentas de imagem generativa se espalham, a mesma vulnerabilidade existe em qualquer lugar onde escolas, organizações juvenis ou famílias publiquem fotos de crianças on-line sem levar totalmente em conta como essas imagens agora podem ser transformadas em arma.

Este artigo é baseado na reportagem do The Guardian. Leia o artigo original.

Originally published on theguardian.com