idw – Informationsdienst Wissenschaft
Nachrichten, Termine, Experten
Nachrichten, Termine, Experten
Automatisch erstellte News-Artikel werden im Vergleich zu manuell verfassten Texten schlechter hinsichtlich der Verwendung von Zahlen und Wortwahl bewertet.
Traditionell verfasste Nachrichtentexte sind verständlicher als automatisch erstellte Artikel. Das hat eine neue LMU-Studie ergeben, deren Ergebnisse kürzlich im Fachmagazin Journalism: Theory, Practice, and Criticism erschienen sind. Dazu befragte das Forschungsteam des Instituts für Kommunikationswissenschaft und Medienforschung (IfKW) mehr als dreitausend Konsumentinnen und Konsumenten von Online-Nachrichten in Großbritannien. Die Befragten bewerteten jeweils einen von vierundzwanzig Texten, von denen die Hälfte automatisiert erstellt, die andere von menschlichen Journalisten verfasst worden war. „Insgesamt fanden die Leserinnen und Leser die zwölf automatisierten Artikel deutlich weniger verständlich“, fasst Hauptautorin Sina Thäsler-Kordonouri das Ergebnis zusammen. Und das, obwohl die KI-generierten Artikel vor der Veröffentlichung von Journalisten redigiert wurden.
Falscher Umgang mit Zahlen und Wortwahl
Das liege laut der Befragung unter anderem an der Art und Weise, wie die künstlich generierten Texte mit der Wortwahl umgehen. Laut den Leserinnen und Lesern beinhalten die mit KI-erstellten Artikel zu viel unpassende, komplizierte oder unübliche Sprache. Die Leserinnen und Leser beurteilten auch den Umgang mit Zahlen und Daten bei den automatisierten Artikeln als deutlich schlechter.
Die von den befragten Personen wahrgenommenen Schwächen im Umgang mit Zahlen und in der Wortwahl der automatisierten Artikel erklären laut den Autorinnen und Autoren zum Teil, warum sie schwerer zu verstehen waren. Mit dem „Charakter“ des Textes, der Erzählstruktur sowie dem Erzählfluss waren die Lesenden bei automatisierten und manuell verfassten Artikeln hingegen gleichermaßen zufrieden.
Mehr menschliche Nachbearbeitung nötig
Studienleiter Professor Neil Thurman schlägt daher vor, dass „Journalisten und Informatikerinnen bei der Erstellung und Nachbearbeitung automatisierter Nachrichtenartikel darauf achten sollten, die Menge an Zahlen zu reduzieren, Wörter, die Lesende wahrscheinlich nicht verstehen, besser zu erklären und den Anteil an Sprache zu erhöhen, der den Lesern hilft, sich ein Bild davon zu machen, worum es in der Geschichte geht.“
Diese Studie sei die erste, die sowohl die relative Verständlichkeit von manuell und automatisch verfassten Nachrichtenartikeln untersucht als auch die Gründe für die wahrgenommenen Unterschiede aufzeigt. „Unsere Ergebnisse zeigen, wie wichtig die menschliche Beteiligung an der automatisierten Produktion datengestützter News-Inhalte ist, und schlägt vor, wie diese verfeinert werden kann“, sagt Sina Thäsler-Kordonouri.
Prof. Dr. Neil Thurman
Institut für Kommunikationswissenschaft und Medienforschung
Ludwig-Maximilians-Universität
Tel.: +49 89 2180-9449
neil.thurman@ifkw.lmu.de
Sina Thaesler-Kordonouri, Neil Thurman, Ulrike Schwertberger & Florian Stalph: Too many numbers and worse word choice: Why readers find data-driven news articles produced with automation harder to understand. Journalism: Theory, Practice, and Criticism 2024
https://doi.org/10.1177/1464884924126220
Criteria of this press release:
Journalists
Information technology, Language / literature, Media and communication sciences, Psychology, Social studies
transregional, national
Research results, Scientific Publications
German
You can combine search terms with and, or and/or not, e.g. Philo not logy.
You can use brackets to separate combinations from each other, e.g. (Philo not logy) or (Psycho and logy).
Coherent groups of words will be located as complete phrases if you put them into quotation marks, e.g. “Federal Republic of Germany”.
You can also use the advanced search without entering search terms. It will then follow the criteria you have selected (e.g. country or subject area).
If you have not selected any criteria in a given category, the entire category will be searched (e.g. all subject areas or all countries).
