Preferências de cookies

Escolha o que podemos usar. Cookies não essenciais só são ativados com a sua permissão. Detalhes na política de cookies.

Categorias de cookies

Personas de IA não são pessoas: por que simulações com perfis fixos podem distorcer dados sintéticos

Por · Publicado em · 1 fonte citada

Em resumo

  • Um estudo no arXiv argumenta que personas de IA, usadas para simular pessoas em pesquisas e testes, não conseguem reproduzir o comportamento de uma população que depende do contexto.
  • Segundo os autores, esse problema não se resolve com perfis mais detalhados.
  • Cada vez mais, pesquisadores e empresas usam populações sintéticas , grandes conjuntos de pessoas simuladas, no lugar de gente real para pré-testar pesquisas, simular usuários e comunidades e avaliar sistemas de IA.
The real published effect dips at both trust extremes (all six coefficients negative), while the domain-general mechanism shows no dip at either extreme (all six simulated coefficients are − 0.01 -0.01 or higher). Published coefficients are
Figura do estudo “Personas Are Not People: Identity as State, Not Attribute”, de Tamunotonye Harry e Yuanyuan Feng (arXiv) · CC BY 4.0

Cada vez mais, pesquisadores e empresas usam populações sintéticas, grandes conjuntos de pessoas simuladas, no lugar de gente real para pré-testar pesquisas, simular usuários e comunidades e avaliar sistemas de IA. Segundo o preprint Personas Are Not People: Identity as State, Not Attribute, publicado no arXiv, esse uso se apoia numa suposição que os autores consideram problemática: a de que a identidade de uma pessoa é um atributo estável, que se comporta do mesmo jeito em qualquer situação.

Como essas simulações funcionam

Cada pessoa simulada é definida por uma persona, um texto com traços fixos, dados demográficos e atitudes, que o modelo de linguagem recebe a instrução de representar. O artigo sustenta que isso ignora um dado conhecido da psicologia: segundo os autores, três décadas de pesquisa em personalidade apontam o contrário, ou seja, o comportamento de uma mesma pessoa varia mais entre contextos do que as pessoas variam entre si.

O que os autores propõem

Os autores separam o comportamento em três partes: traços estáveis, a identidade que um contexto ativa e a própria situação. Com base nisso, afirmam que, sob duas premissas explicitadas no trabalho, qualquer simulação baseada em personas fixas não consegue reproduzir a parte do comportamento de uma população que é específica do grupo e de suas circunstâncias. Segundo o texto, isso vale independentemente de quão detalhada seja a persona ou de quão grande seja o modelo.

Testes citados

Como alternativa, o grupo propõe um critério de avaliação e um desenho de "pessoa em contexto". Eles testaram uma versão em um corpus de personalidade extraído do Reddit e em uma pesquisa publicada sobre recrutamento para ensaio clínico, feita com uma comunidade que, segundo o estudo, tem desconfiança documentada em instituições médicas. O desenho gerou comportamento dependente do contexto, mas, em nenhum dos dois casos, acompanhou totalmente a população real.

O que muda para quem usa dados sintéticos

A consequência prática, de acordo com o resumo, é o risco de que avaliações com populações sintéticas distorçam justamente os grupos cujo comportamento mais depende do contexto. Segundo os autores, essa distorção não seria corrigida apenas com personas mais ricas.

O resumo não detalha as duas premissas usadas na prova nem os números dos testes. Essas informações estão no texto completo do artigo.

Fontes

  1. Personas Are Not People: Identity as State, Not Attribute (arXiv:2611.05292)

Este texto foi produzido com apoio de inteligência artificial a partir das fontes acima e revisado segundo a nossa política editorial. Encontrou um erro? Peça uma correção.

Leia também