Come il Duke Reporters' Lab ha utilizzato le convenzioni politiche per perfezionare il suo programma automatizzato di verifica dei fatti

Per gentile concessione del Duke Reporters' Lab

Le convenzioni politiche delle ultime due settimane hanno fornito le condizioni perfette per il Cooperativa Tech & Check al Duke Reporters' Lab per perfezionare il suo programma automatizzato di verifica dei fatti, Squash, e la sua componente umana, Gardener.

Squash è un programma di intelligenza artificiale che crea corrispondenze in tempo reale tra i fact check esistenti Revisione dei reclami , il sistema di tagging di verifica dei fatti del Reporters' Lab e le dichiarazioni di un relatore dal vivo. Utilizza una combinazione di Google Speech-to-Text ; ClaimBuster , che è stato sviluppato presso l'Università del Texas ad Arlington; e la codificazione di Duke per abbinare le parole pronunciate a quelle scritte in un fact-check. Questi fact-check vengono visualizzati sullo schermo per fornire agli spettatori più contesto su qualsiasi problema venga discusso.

Tuttavia, come hanno scritto i co-direttori di Reporting Lab Bill Adair e Mark Stencel Nieman Lab a luglio , questo sistema non è privo di inconvenienti.

'A volte il voice-to-text può essere davvero buono se il microfono è buono e la persona parla chiaramente, ma ne abbiamo avuti di comicamente cattivi', ha detto Adair. Durante la votazione per appello nominale alla Convenzione Nazionale Democratica, Squash ha eguagliato un fact-check sudore delle ascelle ai voti del Kansas.

Christopher Guess, il capotecnologo del Reporters' Lab, ha affermato che la tecnologia attuale non consente a un computer di comprendere le sfumature e il contesto del modo in cui i politici parlano spesso.

'Un fact-checker umano spesso controlla e discute con i colleghi a quale angolo ti avvicinerai a questo', ha detto Guess. 'È qualcosa che un computer letteralmente non può fare.'

Gardener è una nuova interfaccia che il team Tech & Check ha costruito su Squash per affrontare questa lacuna. Squash fornisce all'assistente umano (il 'Giardiniere') tre potenziali verifiche dei fatti corrispondenti, che questa persona sceglie quindi per essere mostrate agli spettatori.

'Quindi, in effetti, stiamo eliminando quelli cattivi e mostrando quelli buoni', ha detto Adair. Il programma è ancora agli inizi e, oltre a perfezionare la corrispondenza e il superamento degli ostacoli nella tecnologia voce-testo, sia Adair che Guess affermano di aver bisogno di molti più fact-check per essere in grado di perfezionare la tecnologia.

'Si basa su un ampio corpus di affermazioni precedentemente controllate', ha affermato Guess. In questo momento ClaimReview ha un database di circa 60.000 affermazioni, tuttavia, Guess ha affermato che solo circa un terzo di queste sono rilevanti per la politica americana. 'Il mondo dell'apprendimento automatico di solito funziona in milioni e miliardi, non in decine di migliaia', ha affermato Guess.

In attesa di ulteriori affermazioni, il team sta sperimentando altri modi per migliorare le partite di verifica dei fatti. Uno di questi è un programma chiamato Caucus, che raggruppa i controlli dei fatti in categorie che possono quindi essere abbinate alle affermazioni raccolte da voce a testo.

'Quindi dì che questa frase riguarda l'assistenza sanitaria, questo riguarda la politica, questo riguarda l'Idaho', ha detto Guess. 'Ho una teoria secondo cui le affermazioni che rientrano nelle stesse categorie hanno maggiori probabilità di essere correlate rispetto alle affermazioni che non lo sono'.

Adair non inserirà una sequenza temporale su quando questa tecnologia sarà disponibile al pubblico. 'Il nostro obiettivo è solo quello di continuare a migliorare fino a quando non sarà pronto', ha detto. 'Abbiamo fatto molti progressi in tre anni e puoi fare molto con tutte le persone intelligenti che vedi qui'.

Harrison Mantas è un giornalista dell'International Fact-Checking Network che si occupa di verifica dei fatti e disinformazione. Raggiungilo a e-mail o su Twitter all'indirizzo @HarrisonMantas