idw – Informationsdienst Wissenschaft
Nachrichten, Termine, Experten
Nachrichten, Termine, Experten
idw - Informationsdienst
Wissenschaft
Die Unstatistik des Monats Februar ist die Berichterstattung zahlreicher Technologie-Medien über eine Studie zur Vorhersagegenauigkeit der Deep-Learning-Architektur Brain2Qwerty.
„Metas KI kann Gedanken mit 80-prozentiger Genauigkeit lesen“, titelten die Online-Medien „futurezone.at“ und „MSN Microsoft News“. Ähnliche Schlagzeilen produzierten zahlreiche englischsprachige Nachrichtenportale, darunter „squaredtech.co“ und techdogs.com. Manche davon erwähnten später im Text, dass es sich um eine „bis zu 80-prozentige Genauigkeit“ handeln würde. Sie alle berufen sich auf eine Studie mit 35 Teilnehmerinnen und Teilnehmern, die in Zusammenarbeit von Meta, dem Konzern hinter Facebook, und dem Baskischen Zentrum für Kognition, Gehirn und Sprache durchgeführt wurde.
Die Technologie dekodiert Signale, die mittels Elektro- (EEG) oder Magnetoenzephalographie (MEG) generiert werden, während die Teilnehmerinnen und Teilnehmer verschiedene Sätze auf einer Tastatur eintippen. Wenn es gelingt, die Sätze anhand der Signale zu rekonstruieren, entspricht das einer Art „Gedankenlesen“ durch die Künstliche Intelligenz (KI) von Meta – wenngleich nur unter stark einschränkenden Laborbedingungen.
Dazu mussten sich die Probandinnen und Probanden in einem magnetisch abgeschirmten Raum an einen überdimensionierten Stuhl anschließen lassen, der ihre Gehirnströme messen konnte. Sie bekamen Wort für Wort kurze Sätze eingeblendet, die sie sich merken sollten; danach wurden sie durch ein visuelles Signal aufgefordert, den Satz in eine handelsübliche Tastatur einzutippen. Im Anschluss wurde verglichen, wie viel Prozent der Buchstaben von der KI richtig vorhergesagt wurden. Brain2Qwerty dekodiert dazu einerseits die motorischen Signale, die vom Gehirn gesendet werden, um die Fingerbewegungen auf der Tastatur auszulösen. Dazu kann man ausnutzen, dass bestimmte Buchstaben aufgrund ihrer Positionierung eher mit der rechten Hand, andere eher mit der linken Hand getippt werden. Fehler beim Dekodieren passieren oft, weil benachbarte Tasten von der Dekodierungs-Technologie verwechselt werden. Im Anschluss verknüpft die KI die dekodierten Buchstabenfolgen mit einem großen Sprachmodell (Large Language Model, LLM), um sicherzustellen, dass die vorhergesagten Wörter existieren und in ihrer Abfolge plausibel sind. Damit können Tippfehler von der KI korrigiert werden.
Von einer 80-prozentigen Gesamtgenauigkeit ist die KI (noch) weit entfernt
Nach einer Trainingsphase, in der die Technologie die Verbindung von Signalen und getippten Buchstaben erlernte, sollten neue, der KI unbekannte Sätze vorhergesagt werden. In den besten Einzelfällen konnte die KI 81 Prozent der empfangenen Signale richtig vorhersagen, in den schlechtesten hingegen nur 29 Prozent. Im Schnitt konnte die KI nicht – wie die Schlagzeilen suggerieren – 80 Prozent, sondern lediglich 68 Prozent der mittels MEG empfangenen Signale richtig vorhersagen; bei Verwendung von EEG waren es lediglich 33 Prozent. Von einer 80-prozentigen Genauigkeit insgesamt, also nicht nur in Ausnahmefällen, ist die Technologie also noch weit entfernt.
Nichtsdestotrotz sind das beachtliche Ergebnisse, die weit besser sind als bloßes Raten von Buchstaben. Insbesondere mit der Verbindung mit dem LLM hat man verglichen mit früheren Dekodierungs-Technologien – die schon seit knapp zehn Jahren existieren – einen großen Fortschritt erreicht. Derartige KI-Systeme könnten beispielsweise zukünftig Patienten helfen, die ihre Fähigkeit zu sprechen oder zu tippen verloren haben, aber sich Wörter noch Buchstabe für Buchstabe vorstellen und diese gedanklich auf einer Tastatur lokalisieren können. Aber es hat wenig mit dem zu tun, was wir üblicherweise unter „Gedankenlesen“ verstehen. Insbesondere „versteht“ die KI nicht den Sinn des Gedachten.
Der Zeitpunkt, an dem KI Ihre Gedanken lesen kann, liegt deshalb sicher noch ein ganzes Stück in der Zukunft. Gleichwohl könnte es gut sein, dass dieser Moment früher eintritt als derjenige, an dem Tech-Journalistinnen und -Journalisten solche Studien richtig lesen und interpretieren können.
Dr. Katharina Schüller (STAT-UP), Tel.: (089) 34077-447
https://www.rwi-essen.de/presse/wissenschaftskommunikation/unstatistik/detail/ka...
https://www.rwi-essen.de/presse/wissenschaftskommunikation/unstatistik
Criteria of this press release:
Business and commerce, Journalists, Scientists and scholars, Students, Teachers and pupils, all interested persons
interdisciplinary
transregional, national
Miscellaneous scientific news/publications
German
You can combine search terms with and, or and/or not, e.g. Philo not logy.
You can use brackets to separate combinations from each other, e.g. (Philo not logy) or (Psycho and logy).
Coherent groups of words will be located as complete phrases if you put them into quotation marks, e.g. “Federal Republic of Germany”.
You can also use the advanced search without entering search terms. It will then follow the criteria you have selected (e.g. country or subject area).
If you have not selected any criteria in a given category, the entire category will be searched (e.g. all subject areas or all countries).
