Como o Laboratório de Repórteres da Duke usou as convenções políticas para aperfeiçoar seu programa automatizado de verificação de fatos

Verificando Os Fatos

Cortesia do Duke Reporters ’Lab

As convenções políticas das últimas duas semanas forneceram as condições perfeitas para o Cooperativa de tecnologia e verificação no Laboratório de repórteres da Duke para aperfeiçoar seu programa automatizado de verificação de fatos, Squash, e seu componente humano, Gardener.

Squash é um programa de inteligência artificial que faz correspondências em tempo real entre verificações de fatos existentes em ClaimReview , o sistema de marcação de fatos do Laboratório de Repórteres e as declarações de um palestrante ao vivo. Ele usa uma combinação de Speech-to-Text ; ClaimBuster , que foi desenvolvido na Universidade do Texas em Arlington; e a própria codificação de Duke para combinar palavras faladas com as escritas em uma checagem de fatos. Essas checagens de fatos aparecem na tela para dar aos visualizadores mais contexto sobre quaisquer questões que estejam sendo discutidas.

programa de notícias a cabo com melhor classificação

No entanto, como os co-diretores do Reporting Lab, Bill Adair e Mark Stencel escreveram para Nieman Lab em julho , este sistema tem suas desvantagens.

“Às vezes, a voz para texto pode ser muito boa se o microfone for bom e a pessoa estiver falando claramente, mas tivemos alguns comicamente ruins”, disse Adair. Durante a votação nominal na Convenção Nacional Democrata, Squash comparou uma checagem de fatos sobre suor nas axilas aos votos do Kansas.

checagem de fatos fox news vs msnbc

Christopher Guess, o tecnólogo-chefe do Laboratório de Repórteres, disse que a tecnologia atual não permite que um computador entenda as nuances e o contexto da maneira como os políticos costumam falar.

“Um verificador de fatos humano muitas vezes berra e discute com os colegas de que ângulo você vai abordar isso”, disse Guess. “Isso é algo que um computador literalmente não pode fazer.”

Gardener é uma nova interface que a equipe Tech & Check construiu em cima do Squash para resolver essa deficiência. Squash fornece ao assistente humano (o “Jardineiro”) três possíveis checagens de fatos correspondentes, que essa pessoa escolhe para serem exibidas aos espectadores.

“Então, na verdade, estamos eliminando os ruins e exibindo os bons”, disse Adair. O programa ainda está em sua infância e, além de aperfeiçoar a correspondência e superar obstáculos na tecnologia de voz para texto, tanto Adair quanto Guess dizem que precisam de muito mais checagens de fatos para aperfeiçoar a tecnologia.

“Ele se baseia em um grande corpus de reivindicações previamente verificadas”, disse Guess. No momento, o ClaimReview tem um banco de dados de cerca de 60.000 reclamações, no entanto, Guess disse que apenas cerca de um terço delas são relevantes para a política americana. “O mundo do aprendizado de máquina geralmente funciona em milhões e bilhões, não dezenas de milhares”, disse Guess.

membros do conselho editorial do new york times

Enquanto espera por reivindicações adicionais, a equipe está experimentando outras maneiras de melhorar as partidas de verificação de fatos. Um deles é um programa chamado Caucus, que agrupa as verificações de fatos em categorias que podem então ser combinadas com as reivindicações obtidas por voz para texto.

“Então, digamos que esta frase seja sobre saúde, sobre política, sobre Idaho”, disse Guess. “Tenho uma teoria que afirma que afirmações que se enquadram nas mesmas categorias têm mais probabilidade de estar relacionadas do que afirmações que não o são.”

Adair não colocaria um cronograma sobre quando essa tecnologia estaria disponível ao público. “Nosso objetivo é apenas continuar a torná-lo melhor até que esteja pronto”, disse ele. “Fizemos muito progresso em três anos e você pode fazer muito com todas as pessoas inteligentes que vê aqui.”

Harrison Mantas é um repórter da International Fact-Checking Network, cobrindo checagem de fatos e desinformação. Alcance-o em hmantas@poynter.org ou no Twitter em @HarrisonMantas