idw – Informationsdienst Wissenschaft
Nachrichten, Termine, Experten
Nachrichten, Termine, Experten
idw - Informationsdienst
Wissenschaft
Wer ein Foto mit einem dazu stimmigen Musikstück hinterlegen oder gar eine gesamte Bilderserie vertonen wollte, benötigte dafür bisher viel Erfahrung und noch mehr Zeit für die Suche. Einer neuartigen Software namens Picasso gelingt dies innerhalb von Sekunden, weil sie unter anderem die handwerkliche Kunst von Kino-Regisseuren ausnutzt. Forscher des Exzellenzclusters für „Multimodal Computing and Interaction“ an der Universität des Saarlandes haben sie entwickelt und präsentieren sie nun mit der dazugehörigen Smartphone-App „PicasSound“ am Stand F34 in Halle 9 der Computermesse Cebit, die vom 6. bis zum 10. März in Hannover stattfindet.
„Filmregisseure wissen und achten in der Regel sehr genau darauf, welche Melodie auf eine Szene passt“, erklärt Sebastian Michel, der am Saarbrücker Exzellenzcluster eine Forschungsgruppe leitet. Zusammen mit dem Doktoranden Aleksandar Stupar hat er die Software Picasso entwickelt. Sie nutzt das Wissen der Filmregisseure, um für ein oder mehrere Bilder den passenden Soundtrack vorzuschlagen. Anwender finden so ohne großen, zeitlichen Aufwand genau die Musikstücke, die zu ihren Aufnahmen vom vergangenen Badeurlaub oder Städtetrip passen.
Möglich macht dies ein dreistufiges Verfahren, das Michel und Stupar ersonnen haben. Für das ausgewählte Bild werden in einer Datenbank eine festgelegte Anzahl von Filmszenen bestimmt, die in mehreren Merkmalen mit dem Suchbild übereinstimmen. Die Datenbank haben die beiden Forscher selbst aufgebaut, indem sie 50 Filme in Bilder und dazugehörige Soundtracks zerlegten und diese abspeicherten. In der zweiten Stufe bestimmt die Software für jeden Soundtrack einer gefundenen Filmszene eine Liste ähnlicher Lieder. Diese Vielzahl von Listen und Liedern werden dann in der dritten Phase mittels eines ausgeklügelten Rechenverfahrens auf ein Paar der stimmigsten Lieder reduziert, die dann der Anwender als Vorschläge erhält.Eine Liste von Vorschlägen mache auch deswegen Sinn, weil einzelne Fotos bei Anwendern unterschiedliche Assoziationen hervorriefen, so Michel. „Das Bild eines einzelnen Haus in der Natur verbinden manche mit einem romantischen Wochenende, andere dagegen mit Einsamkeit“, erklärt Michel.
Neugierige können sich auf der Demo-Webseite von Picassos Trefferquote selber überzeugen. Sie können aber auch die App „PicasSound“ nutzen, die für iPhone und Android-Smartphones kostenlos erhältlich ist. Diese sucht den passenden Soundtrack unter den Musikstücken, die man selber auf seinem Smartphone abgespeichert hat. Michel und Stupar wollen nun Picasso dahingehend erweitern, dass es nicht nur automatisch Videos, sondern auf der Grundlage von Text auch Hörbücher und Hörspiele vertont. Darüber hinaus planen die Forscher, in ihr Vorschlagsystem noch mehr den Musik- und Filmgeschmack des jeweiligen Anwenders zu integrieren.
Sebastian Michel leitet am Exzellenzcluster für „Multimodal Computing and Interaction“ (MMCI) die Forschergruppe „Querying, Indexing and Discovery in Dynamic Data“. Das Exzellenzcluster wird seit 2007 im Rahmen der Exzellenzinitiative von Bund und Ländern gefördert. Neben der Universität des Saarlandes sind am Exzellenzcluster das Max-Planck-Institut für Informatik, das Max-Planck-Institut für Softwaresysteme und das Deutsche Forschungszentrum für Künstliche Intelligenz beteiligt. Sie haben ihren Sitz ebenfalls auf dem Campus der Universität des Saarlandes.
Weitere Fragen beantworten:
Dr.-Ing. Sebastian Michel, Leiter der MMCI-Forschungsgruppe
„Querying, Indexing, and Discovery in Dynamic Data“
Telefon: 0681 302-70803
E-Mail: smichel@mmci.uni-saarland.de
Gordon Bolduan
Forschungskommunikation Exzellenzcluster “Multimodal
Computing and Interaction"
Telefon: 0681 302-70741
E-Mail: bolduan@mmci.uni-saarland.de
http://picasso.mmci.uni-saarland.de/demo/ - Online-Demo der Picasso-Software mit frei nutzbaren Videos
http://qid3.mmci.uni-saarland.de/people/sebastian.html - Internetseite von www.uni-saarland.de/pressefotos
Eine neuartige Software namens Picasso vertont automatisch Bilderserien.
bellhäuser - das bilderwerk
None
Criteria of this press release:
Journalists, all interested persons
Information technology, Media and communication sciences, Music / theatre
transregional, national
Research results
German
You can combine search terms with and, or and/or not, e.g. Philo not logy.
You can use brackets to separate combinations from each other, e.g. (Philo not logy) or (Psycho and logy).
Coherent groups of words will be located as complete phrases if you put them into quotation marks, e.g. “Federal Republic of Germany”.
You can also use the advanced search without entering search terms. It will then follow the criteria you have selected (e.g. country or subject area).
If you have not selected any criteria in a given category, the entire category will be searched (e.g. all subject areas or all countries).
