Austrália Ocidental busca recuperação após surgirem erros no relatório

O governo da Austrália Ocidental está buscando um reembolso acelerado da Deloitte depois de descobrir erros em um estudo de viabilidade que examinava possíveis fusões entre as três principais universidades do estado. O governo pagou 166 mil dólares australianos à consultoria pelo trabalho sobre a University of Western Australia, a Curtin University e a Murdoch University.

A disputa se concentra em um relatório que incluía referências alucinadas por IA e grandes discrepâncias em seus cálculos de custos. O governo disse estar “extremamente decepcionado” com as falhas e busca recuperar o valor pago à Deloitte.

O estudo considerou três opções de fusão e apresentou cenários de custos baixo, médio e alto. O apêndice detalhou estimativas dos custos incorridos até o primeiro dia proposto da fusão e dos custos esperados nos cinco anos seguintes. Em pelo menos dois cenários, os totais escritos não correspondiam aos valores dos componentes apresentados no relatório.

C מאות de milhões separavam os valores dos totais

No cenário de alto custo para uma fusão entre Curtin e a University of Western Australia, a Deloitte listou 514 milhões de dólares australianos em custos até o primeiro dia e 145 milhões em custos posteriores ao longo de cinco anos. Esses valores somam 659 milhões. O relatório, porém, apresentou um total de 399 milhões, criando uma discrepância de 260 milhões.

Outro erro apareceu em um cenário de baixo custo envolvendo Curtin, UWA e Murdoch. O estudo listou 396 milhões em custos até o primeiro dia e 116 milhões nos cinco anos seguintes. Esses valores somam 512 milhões, mas o relatório declarou um total de 823 milhões — uma diferença de 311 milhões.

Não são pequenos erros de apresentação. As estimativas dizem respeito a uma proposta politicamente relevante que poderia remodelar a organização de três universidades. Quando os totais básicos não correspondem aos itens detalhados do próprio relatório, a confiabilidade da análise mais ampla é colocada em dúvida.

O uso de IA intensificou o escrutínio

O relatório também chamou atenção depois que a cobertura da imprensa encontrou referências alucinadas. A Deloitte reconheceu no relatório que usou IA generativa para apoiar seu trabalho. A oposição estadual descreveu o resultado como “lixo de IA”, enquanto o governo iniciou o processo para recuperar o gasto.

A questão não é simplesmente saber se uma empresa usou IA generativa. A preocupação imediata é se o cliente recebeu uma análise devidamente verificada, com fontes confiáveis e números internamente consistentes. Neste caso, referências inventadas e discrepâncias aritméticas foram identificadas em um trabalho encomendado para orientar uma decisão de política pública de alto impacto.

Placa da Deloitte
A Deloitte sofre pressão depois que um relatório sobre a possível fusão de três universidades da Austrália Ocidental apresentou referências alucinadas por IA e números incorretos. Foto: Dan Himbrechts/AAP

Stephen Bartos, especialista em governança do setor público da University of Canberra, afirmou que os erros desacreditaram o relatório. Segundo ele, o material provavelmente precisava ser refeito ou, no mínimo, retrabalhado manualmente desde o início, sem IA.

Um revés para as discussões sobre a fusão

Estudos de viabilidade geralmente estruturam as escolhas financeiras e operacionais enfrentadas pelos governos antes que decidam avançar com mudanças institucionais. Os erros da análise da Deloitte não determinam, por si só, se uma fusão seria benéfica ou acessível. Mas significam que o relatório não pode ser tratado como um guia confiável sem correção e revisão substanciais.

As conclusões são especialmente relevantes porque o relatório avaliou várias combinações das três universidades e apresentou cenários destinados a quantificar seus custos prováveis. Essas projeções exigem confiança nos cálculos que as sustentam. Quando os totais declarados se afastam dos valores subjacentes em centenas de milhões, formuladores de políticas e público ficam sem uma base sólida para comparar as opções.

O pedido de reembolso do governo concentra a atenção na responsabilização pelo aconselhamento contratado. A Deloitte foi paga para fornecer um estudo de viabilidade; as falhas descobertas levantam dúvidas sobre seus controles de qualidade, seu processo de verificação e o uso de ferramentas capazes de gerar citações plausíveis, mas falsas.

A lição mais ampla para consultorias assistidas por IA

A IA generativa pode ajudar em tarefas de redação e pesquisa, mas o episódio ilustra os limites de tratar a produção desses sistemas como análise verificada. Uma referência que parece confiável pode não existir. Um documento com aparência profissional ainda pode conter erros que uma verificação numérica básica revelaria.

Para órgãos públicos, a lição é prática. Quando relatórios externos influenciam decisões que envolvem gastos públicos substanciais ou o futuro de grandes instituições, os revisores precisam validar fontes, cálculos e premissas antes de confiar nas conclusões. Essa necessidade existe independentemente do uso de ferramentas de IA, mas a descoberta de referências alucinadas torna mais visível a obrigação de verificar.

A tentativa da Austrália Ocidental de recuperar o pagamento de 166 mil dólares australianos é uma resposta direta aos defeitos do relatório. A consequência mais ampla pode ser uma expectativa renovada de que consultorias expliquem claramente como o trabalho assistido por IA é verificado antes de chegar ao cliente — e que o produto final resista ao escrutínio comum de seus fatos e cálculos.

Este artigo baseia-se em reportagem do The Guardian. Leia o artigo original.

Originally published on theguardian.com