Personas de inteligência artificial começam a entrar no setor de pesquisas como uma forma de baixo custo para simular grupos focais e levantamentos. Mas uma pesquisadora da Syracuse University afirma que a tecnologia enfrenta um teste básico antes de ser considerada um substituto confiável para eleitores: sua capacidade de refletir mudanças na opinião pública.
Jennifer Stromer-Galley, professora da School of Information Studies da Syracuse que estuda metodologia de pesquisas, alerta que uma persona de IA pode ser consistente de uma forma que pessoas reais não são. A resposta de um eleitor em outubro pode ser diferente da resposta dada meses depois, quando as circunstâncias mudam. A capacidade de respondentes sintéticos representarem esse movimento depende de como são construídos e atualizados.
Essa questão está no centro das pesquisas sintéticas. A abordagem pode criar centenas ou milhares de personas baseadas em modelos de linguagem de grande escala usando dados de pesquisas e informações demográficas, e depois empregá-las em pesquisas ou grupos focais artificiais. A atração é clara: empresas de pesquisa poderiam ampliar suas ofertas sem os custos e a logística de recrutar pessoas reais.
O que as pesquisas sintéticas tentam fazer
Pesquisas tradicionais buscam respostas de pessoas em um momento específico. Pesquisas sintéticas constroem substitutos digitais destinados a representar eleitores em potencial ou outras populações. As personas podem receber informações demográficas relevantes e, em alguns casos, documentos e outros materiais destinados a detalhar suas posições.
Em princípio, uma empresa poderia criar personas com perspectivas detalhadas sobre questões e políticas e pedir que participassem de pesquisas baseadas em interesses ou grupos focais artificiais. A saída do sistema pode parecer útil para testar mensagens, explorar cenários ou ampliar produtos de pesquisa.
Stromer-Galley descreve o campo como estando no início de uma “era das personas sintéticas”. Para empresas de pesquisa, a possibilidade é oferecer estudos adicionais a um custo relativamente baixo. Mas custos operacionais menores não resolvem a questão metodológica de saber se respostas geradas representam adequadamente a opinião pública.
A consistência pode virar uma falha
Modelos de linguagem de grande escala geralmente trabalham a partir das instruções e informações usadas para construir uma persona. Isso pode tornar suas respostas estáveis. Para algumas aplicações, um comportamento estável é desejável: ele torna os testes repetíveis e facilita caracterizar um participante simulado.
Pesquisas, porém, lidam com pessoas cujas opiniões podem mudar. As questões que um respondente considera mais importantes no início de outubro podem não ser as mesmas três meses depois. Circunstâncias pessoais, novas informações e acontecimentos da vida pública podem afetar as respostas.
A preocupação, portanto, não é apenas que um sistema de IA possa ser impreciso em uma resposta. É que ele preserve fielmente demais um perfil inicial. Se a persona continuar reproduzindo suas premissas iniciais depois que as condições reais ao redor de sua suposta contraparte mudarem, ela poderá perder o movimento que a pesquisa pretende detectar.
O problema é especialmente relevante quando resultados sintéticos são interpretados como sinal de mudança no sentimento público. Um conjunto de personas pode gerar muitas respostas rapidamente, mas o volume, por si só, não prova que as respostas capturem a evolução das atitudes públicas.
Por que essa lacuna importa
Pesquisas de opinião pública historicamente foram valorizadas por confiabilidade, previsibilidade e consistência. Métodos sintéticos complicam esse quadro ao introduzir uma fonte diferente de incerteza: o desenho do respondente modelado.
Em uma pesquisa convencional, pesquisadores ainda precisam decidir sobre amostragem, perguntas e análise. Mas as respostas vêm de pessoas que vivem o momento presente. Com uma persona de IA, instruções, dados de origem e materiais suplementares tornam-se parte do próprio respondente. As premissas do sistema sobre um eleitor podem moldar as respostas antes mesmo de uma pergunta ser feita.
Isso torna atualização e validação questões centrais. Se uma empresa constrói uma persona com dados demográficos e sinais de políticas públicas, precisa determinar se a produção posterior reflete mudanças reais no ambiente público ou apenas variações geradas a partir de um perfil subjacente fixo.
O material disponível não prova que pesquisas sintéticas não possam ser úteis. Ele identifica uma preocupação ainda sem resposta: se a tecnologia consegue levar em conta mudanças de opinião. É um desafio mais específico, mas importante: um eleitor simulado não deve ser julgado apenas por produzir uma resposta plausível hoje, mas também por responder de modo crível quando mudam as condições que moldam respostas reais.
Uma questão metodológica, não apenas de IA
O debate é, em última análise, sobre evidências. Empresas de pesquisa podem ver personas de IA como uma oportunidade de criar ofertas mais completas sem o custo e a dificuldade de alcançar respondentes. A tecnologia também permite testar rapidamente muitos cenários. Mas essas eficiências não demonstram automaticamente que resultados sintéticos medem a opinião pública.
Para conquistar mais confiança, seus criadores precisarão enfrentar a diferença entre uma persona bem descrita e um respondente vivo. Um perfil que repete de modo confiável uma posição atribuída pode ser internamente coerente. Ainda assim, pode não representar uma pessoa cujas prioridades, opiniões ou circunstâncias mudaram.
Essa distinção provavelmente será mais importante à medida que empresas explorem personas detalhadas de políticas, grupos focais artificiais e pesquisas baseadas em interesses. Quanto mais importantes forem as decisões informadas pelos resultados, mais necessário será saber o que os respondentes de IA realmente estão modelando.
O alerta de Stromer-Galley oferece um padrão útil para avaliar as próximas alegações do setor. Pesquisas sintéticas devem ser avaliadas não apenas por velocidade, escala e realismo aparente, mas também pela capacidade de lidar com o tempo. Se a opinião pública mudar e as personas de IA não mudarem com ela, a tecnologia poderá produzir resultados organizados enquanto não capta o público que deveria representar.
Este artigo baseia-se em reportagem do Phys.org. Leia o artigo original.
Originally published on phys.org
