idw – Informationsdienst Wissenschaft

Nachrichten, Termine, Experten

Grafik: idw-Logo
Grafik: idw-Logo

idw - Informationsdienst
Wissenschaft

Science Video Project
idw-Abo

idw-News App:

AppStore

Google Play Store



Instance:
Share on: 
10/24/2024 14:59

KI-generierte Nachrichten sind schwerer verständlich

LMU Stabsstelle Kommunikation und Presse
Ludwig-Maximilians-Universität München

    Automatisch erstellte News-Artikel werden im Vergleich zu manuell verfassten Texten schlechter hinsichtlich der Verwendung von Zahlen und Wortwahl bewertet.

    Traditionell verfasste Nachrichtentexte sind verständlicher als automatisch erstellte Artikel. Das hat eine neue LMU-Studie ergeben, deren Ergebnisse kürzlich im Fachmagazin Journalism: Theory, Practice, and Criticism erschienen sind. Dazu befragte das Forschungsteam des Instituts für Kommunikationswissenschaft und Medienforschung (IfKW) mehr als dreitausend Konsumentinnen und Konsumenten von Online-Nachrichten in Großbritannien. Die Befragten bewerteten jeweils einen von vierundzwanzig Texten, von denen die Hälfte automatisiert erstellt, die andere von menschlichen Journalisten verfasst worden war. „Insgesamt fanden die Leserinnen und Leser die zwölf automatisierten Artikel deutlich weniger verständlich“, fasst Hauptautorin Sina Thäsler-Kordonouri das Ergebnis zusammen. Und das, obwohl die KI-generierten Artikel vor der Veröffentlichung von Journalisten redigiert wurden.

    Falscher Umgang mit Zahlen und Wortwahl

    Das liege laut der Befragung unter anderem an der Art und Weise, wie die künstlich generierten Texte mit der Wortwahl umgehen. Laut den Leserinnen und Lesern beinhalten die mit KI-erstellten Artikel zu viel unpassende, komplizierte oder unübliche Sprache. Die Leserinnen und Leser beurteilten auch den Umgang mit Zahlen und Daten bei den automatisierten Artikeln als deutlich schlechter.

    Die von den befragten Personen wahrgenommenen Schwächen im Umgang mit Zahlen und in der Wortwahl der automatisierten Artikel erklären laut den Autorinnen und Autoren zum Teil, warum sie schwerer zu verstehen waren. Mit dem „Charakter“ des Textes, der Erzählstruktur sowie dem Erzählfluss waren die Lesenden bei automatisierten und manuell verfassten Artikeln hingegen gleichermaßen zufrieden.

    Mehr menschliche Nachbearbeitung nötig

    Studienleiter Professor Neil Thurman schlägt daher vor, dass „Journalisten und Informatikerinnen bei der Erstellung und Nachbearbeitung automatisierter Nachrichtenartikel darauf achten sollten, die Menge an Zahlen zu reduzieren, Wörter, die Lesende wahrscheinlich nicht verstehen, besser zu erklären und den Anteil an Sprache zu erhöhen, der den Lesern hilft, sich ein Bild davon zu machen, worum es in der Geschichte geht.“

    Diese Studie sei die erste, die sowohl die relative Verständlichkeit von manuell und automatisch verfassten Nachrichtenartikeln untersucht als auch die Gründe für die wahrgenommenen Unterschiede aufzeigt. „Unsere Ergebnisse zeigen, wie wichtig die menschliche Beteiligung an der automatisierten Produktion datengestützter News-Inhalte ist, und schlägt vor, wie diese verfeinert werden kann“, sagt Sina Thäsler-Kordonouri.


    Contact for scientific information:

    Prof. Dr. Neil Thurman
    Institut für Kommunikationswissenschaft und Medienforschung
    Ludwig-Maximilians-Universität
    Tel.: +49 89 2180-9449
    neil.thurman@ifkw.lmu.de


    Original publication:

    Sina Thaesler-Kordonouri, Neil Thurman, Ulrike Schwertberger & Florian Stalph: Too many numbers and worse word choice: Why readers find data-driven news articles produced with automation harder to understand. Journalism: Theory, Practice, and Criticism 2024
    https://doi.org/10.1177/1464884924126220


    Images

    Criteria of this press release:
    Journalists
    Information technology, Language / literature, Media and communication sciences, Psychology, Social studies
    transregional, national
    Research results, Scientific Publications
    German


     

    Help

    Search / advanced search of the idw archives
    Combination of search terms

    You can combine search terms with and, or and/or not, e.g. Philo not logy.

    Brackets

    You can use brackets to separate combinations from each other, e.g. (Philo not logy) or (Psycho and logy).

    Phrases

    Coherent groups of words will be located as complete phrases if you put them into quotation marks, e.g. “Federal Republic of Germany”.

    Selection criteria

    You can also use the advanced search without entering search terms. It will then follow the criteria you have selected (e.g. country or subject area).

    If you have not selected any criteria in a given category, the entire category will be searched (e.g. all subject areas or all countries).