Як Duke Reporters’ Lab використовувала політичні конвенції, щоб удосконалити свою автоматизовану програму перевірки фактів

Надано лабораторією журналістів Дьюка

Політичні з’їзди останніх двох тижнів створили ідеальні умови для Tech & Check Cooperative біля Лабораторія репортерів Дюка удосконалити свою автоматизовану програму перевірки фактів Squash і її людський компонент Gardener.

Squash – це програма штучного інтелекту, яка в реальному часі звіряє наявні перевірки фактів у Огляд претензії , система тегів перевірки фактів Лабораторії журналістів і заяви доповідача в прямому ефірі. Він використовує комбінацію Google Перетворення мовлення в текст ; ClaimBuster , який був розроблений в Техаському університеті в Арлінгтоні; і власне кодування Дюка, щоб узгодити слова, сказані до тих, що були написані під час перевірки фактів. Ці перевірки фактів з’являються на екрані, щоб дати глядачам більше контексту щодо будь-яких проблем, які обговорюються.

Однак, як писали співдиректори Reporting Lab Білл Адейр і Марк Стенсел Лабораторія Німана в липні , ця система не позбавлена ​​недоліків.

«Іноді перетворення голосу в текст може бути дуже хорошим, якщо мікрофон хороший і людина говорить чітко, але у нас були деякі комічно погані», – сказав Адер. Під час поіменного голосування на Національному з’їзді Демократичної партії Сквош підійшов до перевірки фактів піт під пахвами голосів Канзасу.

Крістофер Гесс, провідний технолог Reporters’ Lab, сказав, що нинішні технології не дозволяють комп’ютеру зрозуміти нюанси та контекст того, як політики часто говорять.

«Людина, яка перевіряє факти, часто обговорює і обговорює з колегами, під яким кутом ви збираєтеся підійти до цього питання», — сказав Гесс. «Це те, що комп’ютер буквально не може зробити».

Gardener — це новий інтерфейс, який команда Tech & Check створила на основі Squash, щоб усунути цей недолік. Сквош надає помічнику ('Садівнику') три потенційні відповідні перевірки фактів, які ця особа потім вибирає для показу глядачам.

«Отже, по суті, ми відсіємо погані та показуємо хороші», — сказав Адер. Програма все ще знаходиться в зародковому стані, і на додаток до вдосконалення відповідності та подолання перешкод у технології передачі голосу в текст, як Adair, так і Guess кажуть, що їм потрібно ще багато перевірок фактів, щоб мати можливість удосконалити технологію.

«Це ґрунтується на великому наборі раніше перевірених претензій», – сказав Гасс. Зараз ClaimReview має базу даних приблизно з 60 000 претензій, однак, за словами Гасса, лише близько третини з них мають відношення до американської політики. «Світ машинного навчання зазвичай працює на мільйони й мільярди, а не на десятки тисяч», – сказав Гасс.

Очікуючи на додаткові претензії, команда експериментує з іншими способами покращення збігів перевірки фактів. Однією з них є програма під назвою Caucus, яка групує перевірки фактів за категоріями, які потім можна порівняти із заявами, отриманими за допомогою передачі голосу в текст.

«Тож скажімо, що це речення про охорону здоров’я, це про політику, це про Айдахо», – сказав Гасс. «У мене є теорія, згідно з якою твердження, які належать до тих самих категорій, більш імовірно пов’язані, ніж твердження, які не є такими».

Adair не став би визначати терміни, коли ця технологія стане доступною для громадськості. «Наша мета — просто продовжувати покращувати, поки він не буде готовий», — сказав він. «Ми досягли значного прогресу за три роки, і ви можете зробити багато з усіма розумними людьми, яких ви бачите».

Харрісон Мантас є репортером Міжнародної мережі перевірки фактів, який висвітлює перевірку фактів та дезінформацію. Зверніться до нього на електронна пошта або в Twitter за адресою @HarrisonMantas