Cách Phòng thí nghiệm của các phóng viên Duke đã sử dụng các quy ước chính trị để hoàn thiện chương trình xác minh tính xác thực tự động của mình

Được phép của Phòng thí nghiệm phóng viên Duke

Các đại hội chính trị trong hai tuần qua đã cung cấp các điều kiện hoàn hảo cho Hợp tác công nghệ & kiểm tra tại Phòng thí nghiệm của các phóng viên Duke để hoàn thiện chương trình xác minh thực tế tự động, Squash và thành phần con người của nó, Người làm vườn.

Squash là một chương trình trí tuệ nhân tạo tạo các trận đấu theo thời gian thực giữa các xác thực hiện có trong ClaimReview , hệ thống gắn thẻ xác minh tính xác thực của Phòng thí nghiệm báo cáo và phát biểu của một diễn giả trực tiếp. Nó sử dụng sự kết hợp của Google Chuyển giọng nói thành văn bản ; ClaimBuster , được phát triển tại Đại học Texas ở Arlington; và mã hóa riêng của Duke để khớp những từ được nói với những từ được viết trong xác thực. Những thông tin xác minh thực tế này xuất hiện trên màn hình để cung cấp cho người xem nhiều bối cảnh hơn về bất kỳ vấn đề nào đang được thảo luận.

Tuy nhiên, như các đồng giám đốc của Phòng thí nghiệm báo cáo, Bill Adair và Mark Stencel đã viết cho Nieman Lab vào tháng 7 , hệ thống này không phải là không có nhược điểm của nó.

“Đôi khi tính năng chuyển giọng nói thành văn bản có thể thực sự tốt nếu micrô tốt và người đó đang nói rõ ràng, nhưng chúng tôi đã gặp phải một số điều tồi tệ một cách hài hước,” Adair nói. Trong cuộc bỏ phiếu điểm danh tại Hội nghị Quốc gia của đảng Dân chủ, Squash khớp với một xác minh thực tế về mồ hôi nách cho phiếu bầu của Kansas.

Christopher Guess, nhà công nghệ chính của Phòng thí nghiệm phóng viên, cho biết công nghệ hiện tại không cho phép máy tính hiểu được sắc thái và bối cảnh của cách các chính trị gia thường nói.

Guess cho biết: “Một người kiểm tra thực tế của con người thường quan tâm và thảo luận với đồng nghiệp về góc độ nào bạn sẽ tiếp cận vấn đề này. “Đó là điều mà máy tính thực sự không thể làm được.”

Gardener là một giao diện mới mà nhóm Kỹ thuật & Kiểm tra đã xây dựng trên Squash để giải quyết thiếu sót này. Squash cung cấp cho trợ lý con người (“Người làm vườn”) ba thông tin xác thực phù hợp tiềm năng, sau đó người này chọn để hiển thị cho người xem.

“Vì vậy, trên thực tế, chúng tôi đang loại bỏ những cái xấu và trưng bày những cái tốt,” Adair nói. Chương trình vẫn còn trong giai đoạn sơ khai và ngoài việc hoàn thiện việc đối sánh và khắc phục những trở ngại trong công nghệ chuyển giọng nói thành văn bản, cả Adair và Guess đều cho biết họ cần thêm nhiều lần kiểm tra thực tế để có thể hoàn thiện công nghệ này.

Guess nói: “Nó dựa trên một kho dữ liệu lớn về các xác nhận quyền sở hữu đã được kiểm tra trước đó. Hiện tại ClaimReview có cơ sở dữ liệu khoảng 60.000 yêu cầu, tuy nhiên, Guess cho biết chỉ khoảng một phần ba trong số đó có liên quan đến chính trị Mỹ. Guess nói: “Thế giới máy học thường hoạt động theo hàng triệu và hàng tỷ, chứ không phải hàng chục nghìn.

Trong khi chờ đợi các xác nhận quyền sở hữu bổ sung, nhóm đang thử nghiệm các cách khác để cải thiện các trận đấu xác minh tính xác thực. Một trong số đó là chương trình có tên Caucus, nhóm các xác minh tính xác thực thành các danh mục mà sau đó có thể được đối sánh với các xác nhận quyền sở hữu được chọn bằng giọng nói thành văn bản.

“Vì vậy, hãy nói câu này là về chăm sóc sức khỏe, đây là về chính trị, đây là về Idaho,” Guess nói. “Tôi có một lý thuyết cho rằng các tuyên bố thuộc cùng một danh mục có nhiều khả năng có liên quan hơn các tuyên bố không thuộc.”

Adair sẽ không đặt ra mốc thời gian về thời điểm công nghệ này sẽ được cung cấp cho công chúng. “Mục tiêu của chúng tôi là tiếp tục làm cho nó tốt hơn cho đến khi nó sẵn sàng,” anh nói. “Chúng tôi đã đạt được rất nhiều tiến bộ trong ba năm và bạn có thể làm được nhiều điều với tất cả những người thông minh mà bạn thấy ở đây”.

Harrison Mantas là phóng viên của Mạng lưới Kiểm tra Dữ kiện Quốc tế về việc xác minh thông tin và thông tin sai lệch. Tiếp cận anh ấy tại e-mail hoặc trên Twitter tại @HarrisonMantas