Las personas de inteligencia artificial empiezan a entrar en la industria de las encuestas como una forma barata de simular grupos focales y sondeos. Pero una investigadora de Syracuse University afirma que la tecnología afronta una prueba básica antes de poder considerarse un sustituto fiable de los votantes: si puede reflejar el cambio de la opinión pública.

Jennifer Stromer-Galley, profesora de la School of Information Studies de Syracuse que estudia la metodología de las encuestas, advierte que una persona de IA puede ser coherente de una manera que las personas reales no lo son. La respuesta de un votante en octubre puede diferir de la que dé meses después cuando cambien las circunstancias. Que los encuestados sintéticos puedan representar ese movimiento depende de cómo se construyan y actualicen.

La cuestión afecta al núcleo de las encuestas sintéticas. El método puede crear cientos o miles de personas basadas en modelos de lenguaje de gran escala usando datos de encuestas e información demográfica, y luego emplearlas en sondeos o grupos focales artificiales. El atractivo es claro: las empresas podrían ampliar sus servicios sin la logística ni el gasto de reclutar personas reales.

Qué intentan hacer las encuestas sintéticas

Las encuestas tradicionales buscan respuestas de personas en un momento concreto. Las sintéticas construyen sustitutos digitales destinados a representar a posibles votantes u otras poblaciones. Las personas pueden recibir información demográfica pertinente y, en algunos casos, documentos y otros materiales para hacer más detalladas sus posiciones.

En principio, una empresa podría crear personas con perspectivas detalladas sobre asuntos y políticas y pedirles participar en encuestas basadas en intereses o grupos focales artificiales. El resultado podría servir para probar mensajes, explorar escenarios o ampliar productos de investigación.

Stromer-Galley describe el campo como el comienzo de una “era de las personas sintéticas”. Para las empresas encuestadoras, la posibilidad es ofrecer investigación adicional a bajo coste. Pero unos costes operativos menores no resuelven la cuestión metodológica de si las respuestas generadas representan adecuadamente la opinión pública.

La coherencia puede convertirse en un defecto

Los modelos de lenguaje de gran escala suelen trabajar con las instrucciones y la información utilizadas para construir una persona. Eso puede estabilizar sus respuestas. Para algunas aplicaciones, un comportamiento estable es deseable: facilita repetir las pruebas y caracterizar al participante simulado.

Sin embargo, las encuestas tratan con personas cuyas opiniones pueden cambiar. Los asuntos que un encuestado considera más importantes a comienzos de octubre quizá no sean los mismos tres meses después. Las circunstancias personales, la nueva información y los acontecimientos públicos pueden afectar a sus respuestas.

La preocupación no es simplemente que un sistema de IA pueda ser inexacto en una respuesta. Es que conserve con demasiada fidelidad un perfil inicial. Si la persona sigue reproduciendo sus supuestos iniciales después de que cambien las condiciones reales que rodean a su supuesto equivalente, podría no detectar el movimiento que la encuesta pretende medir.

El problema es especialmente relevante cuando los resultados sintéticos se interpretan como una señal de cambio en el sentimiento público. Un conjunto de personas puede generar muchas respuestas rápidamente, pero el volumen no demuestra que capturen cómo evolucionan las actitudes.

Por qué importa la brecha

Las encuestas de opinión pública se han valorado históricamente por su fiabilidad, previsibilidad y coherencia. Los métodos sintéticos complican esa visión al introducir una fuente distinta de incertidumbre: el diseño del encuestado modelado.

En una encuesta convencional, los investigadores también deben decidir cómo muestrear, qué preguntar y cómo analizar. Pero las respuestas proceden de personas que viven el momento presente. En una persona de IA, las instrucciones, los datos de origen y los materiales adicionales forman parte del propio encuestado. Los supuestos del sistema sobre un votante pueden moldear las respuestas antes de formular cualquier pregunta.

Por eso la actualización y la validación son centrales. Si una empresa construye una persona a partir de datos demográficos y señales políticas, necesita determinar si el resultado posterior refleja cambios reales en el entorno público o meras variaciones de un perfil subyacente fijo.

El material disponible no demuestra que las encuestas sintéticas sean inútiles. Señala una preocupación pendiente: si la tecnología puede tener en cuenta los cambios de opinión. Es un reto más específico, pero importante: un votante simulado no debe juzgarse solo por producir hoy una respuesta plausible, sino también por responder de forma creíble cuando cambian las condiciones que influyen en las respuestas reales.

Una cuestión metodológica, no solo de IA

El debate trata, en última instancia, de la evidencia. Las empresas pueden ver las personas de IA como una oportunidad para crear ofertas más completas sin asumir el coste y la dificultad de llegar a encuestados. También permiten probar rápidamente muchos escenarios. Pero esas eficiencias no demuestran por sí solas que los resultados sintéticos midan la opinión pública.

Para ganar confianza, sus creadores deberán abordar la diferencia entre una persona bien descrita y un encuestado vivo. Un perfil que repite de forma fiable una postura asignada puede ser internamente coherente, pero aun así no representar a alguien cuyas prioridades, opiniones o circunstancias hayan cambiado.

La distinción será probablemente más importante a medida que las empresas exploren personas políticas detalladas, grupos focales artificiales y encuestas basadas en intereses. Cuanto más importantes sean las decisiones informadas por los resultados, más necesario será saber qué están modelando realmente los encuestados de IA.

La advertencia de Stromer-Galley ofrece un criterio útil para evaluar las próximas afirmaciones del sector. Las encuestas sintéticas deben evaluarse no solo por velocidad, escala y realismo aparente, sino también por su capacidad de manejar el tiempo. Si la opinión pública cambia y las personas de IA no lo hacen, la tecnología podría producir resultados ordenados mientras pierde de vista al público que pretende representar.

Este artículo se basa en información de Phys.org. Lea el artículo original.

Originally published on phys.org