Forum für Wissenschaft, Industrie und Wirtschaft

Hauptsponsoren:     3M 
Datenbankrecherche:

 

Computerprogramm findet passende Musik für Vertonung von Fotoserien und Videos

22.06.2011
Aus dem Urlaub bringt jeder gerne schöne Fotos von Städten, Sandstränden oder Menschen mit. Wer diese dann mit Musik untermalt dem Freundenskreis zeigen will, sucht oft stundenlang nach den dazu passenden Musikstücken. Diese Aufgabe kann der Computer jetzt völlig eigenständig übernehmen.

Informatiker des Saarbrücker Exzellenzclusters haben dafür eine Software entwickelt, die automatisch für Fotos und Videoausschnitte die geeignete Musik findet. Mit lizenzfreier Musik kann man das Verfahren mit Namen „Picasso“ schon testen. In einigen Wochen wird es außerdem eine Anwendung für das iPhone geben, die als Quelle die auf dem Handy gespeicherte Lieblingsmusik nutzt.

Zum romantischen Foto vom Palmenstrand könnten schmachtvolle Liebeslieder passen, eine Kanufahrt durch wilde Schluchten würde man eher mit temperamentvollen Werken inszenieren. „Filmregisseure achten in der Regel sehr genau darauf, welche Melodie auf eine Szene passt. Damit auch der Computer selbstständig die geeignete Musik für eine Bilderserie findet, haben wir einige Dutzend Filme angeschaut und ihre Soundtracks ausgewertet. Daraus entstand eine Datenbank mit mehreren tausend Bildern und der dazu passenden Musik“, sagt Sebastian Michel, Leiter einer Forschergruppe am Exzellenzcluster der Saar-Uni.

Über ein ausgeklügeltes Rechenverfahren gleicht der Computer diese Bilder mit den Urlaubsfotos ab. Anhand des gespeicherten Soundtracks begibt sich die Picasso-Software dann auf die Suche nach Musikstücken, die mit hoher Wahrscheinlichkeit die Atmosphäre der Aufnahme passend untermalen. „Die Trefferquote unseres Systems ist erstaunlich hoch. Allerdings kann es häufig vorkommen, dass nicht gleich der erste Treffer perfekt passt. Fehler entstehen meist dann, wenn der Betrachter mit dem Foto verschiedene Gefühle verbindet. Ein einsames Haus zum Beispiel kann der eine mit romantischen Abenden verbinden, der andere denkt nur an gespenstische Nächte“, erläutert der Informatiker. Picasso schlage daher immer mehrere Musikstücke vor, aus denen der Benutzer dann das passendste auswählen kann.

Der Saarbrücker Wissenschaftler will gemeinsam mit seinem Doktoranden Aleksandar Stupar die Software weiter verbessern, damit sie auch für Videosequenzen und die Untermalung von Hörspielen genutzt werden kann. „Wir haben dafür bereits Regiebücher von Filmen ausgewertet und die Szenenbeschreibungen mit der Filmmusik abgeglichen. Auf dieser Datenbasis kann man auch für gesprochene Texte eine geeignete Hintergrundmusik recherchieren“, meint Sebastian Michel. In den kommenden Wochen werden die Informatiker außerdem eine Anwendung für das iPhone programmieren, mit der jeder seine Urlaubsfotos mit Musik untermalen kann, die in der eigenen Mediathek gespeichert ist. „Auf unserer Webseite bieten wir die Picasso-Software außerdem zum Ausprobieren mit lizenzfreien Musikstücken an. Das schränkt die Bandbreite im Musikgeschmack derzeit noch ein. Wir können uns aber vorstellen, dass das Computerprogramm auch für kommerzielle Musikanbieter von Interesse ist“, sagt Michel. Die Wissenschaftler werden das Verfahren im Juli auf einer der weltweit wichtigsten Konferenzen für Informationssuche und Wissensdatenbanken (Information Retrieval), der ACM SIGIR 2011 in Beijing (China) vorstellen.

Sebastian Michel leitet eine Forschungsgruppe am Saarbrücker Exzellenzcluster „Multimodal Computing and Interaction“ und forscht auch am Max-Planck-Institut für Informatik. Der Exzellenzcluster wird seit 2007 im Rahmen der Exzellenzinitiative von Bund und Ländern gefördert. Die Wissenschaftler erforschen dort, wie man multimodale Informationen wie Texte, Audiodateien, Videos und Bilder noch effizienter organisieren, verstehen und durchsuchen kann. Neben der Universität des Saarlandes sind am Exzellenzcluster das Max-Planck-Institut für Informatik, das Max-Planck-Institut für Softwaresysteme und das Deutsche Forschungszentrum für Künstliche Intelligenz beteiligt.

Fragen beantwortet:

Dr.-Ing. Sebastian Michel
Exzellenzcluster Multimodal Computing and Interaction
Tel. 0681 / 302 70 803
E-Mail: smichel@mmci.uni-saarland.de
Hinweis für Hörfunk-Journalisten: Sie können Telefoninterviews in Studioqualität mit Wissenschaftlern der Universität des Saarlandes führen, über Rundfunk-ISDN-Codec. Interviewwünsche bitte an die Pressestelle (0681/302-3610) richten.

Weitere Informationen:

http://picasso.mmci.uni-saarland.de/demo/
- Online-Demo der Picasso-Software mit frei nutzbaren Videos
http://www.sigir2011.org/
- Konferenz-Webseite
http://qid3.mmci.uni-saarland.de/people/sebastian.html
- Webseite des Wissenschaftlers
http://qid3.mmci.uni-saarland.de/people/aleksandar.html
- Webseite des Doktoranden

Friederike Meyer zu Tittingdorf | Universität des Saarlandes
Weitere Informationen:
http://www.uni-saarland.de

Weitere Nachrichten aus der Kategorie Informationstechnologie:

nachricht Maschinelles Lernen: Neue Methode ermöglicht genaue Extrapolation
13.07.2018 | Institute of Science and Technology Austria

nachricht Gegen das Verblassen historischer Dokumente
11.07.2018 | Hochschule für Technik, Wirtschaft und Kultur Leipzig

Alle Nachrichten aus der Kategorie: Informationstechnologie >>>

Die aktuellsten Pressemeldungen zum Suchbegriff Innovation >>>

Die letzten 5 Focus-News des innovations-reports im Überblick:

Im Focus: Erste Beweise für Quelle extragalaktischer Teilchen

Zum ersten Mal ist es gelungen, die kosmische Herkunft höchstenergetischer Neutrinos zu bestimmen. Eine Forschungsgruppe um IceCube-Wissenschaftlerin Elisa Resconi, Sprecherin des Sonderforschungsbereichs SFB1258 an der Technischen Universität München (TUM), liefert ein wichtiges Indiz in der Beweiskette, dass die vom Neutrino-Teleskop IceCube am Südpol detektierten Teilchen mit hoher Wahrscheinlichkeit von einer Galaxie in vier Milliarden Lichtjahren Entfernung stammen.

Um andere Ursprünge mit Gewissheit auszuschließen, untersuchte das Team um die Neutrino-Physikerin Elisa Resconi von der TU München und den Astronom und...

Im Focus: First evidence on the source of extragalactic particles

For the first time ever, scientists have determined the cosmic origin of highest-energy neutrinos. A research group led by IceCube scientist Elisa Resconi, spokesperson of the Collaborative Research Center SFB1258 at the Technical University of Munich (TUM), provides an important piece of evidence that the particles detected by the IceCube neutrino telescope at the South Pole originate from a galaxy four billion light-years away from Earth.

To rule out other origins with certainty, the team led by neutrino physicist Elisa Resconi from the Technical University of Munich and multi-wavelength...

Im Focus: Magnetische Wirbel: Erstmals zwei magnetische Skyrmionenphasen in einem Material entdeckt

Erstmals entdeckte ein Forscherteam in einem Material zwei unabhängige Phasen mit magnetischen Wirbeln, sogenannten Skyrmionen. Die Physiker der Technischen Universitäten München und Dresden sowie von der Universität zu Köln können damit die Eigenschaften dieser für Grundlagenforschung und Anwendungen gleichermaßen interessanten Magnetstrukturen noch eingehender erforschen.

Strudel kennt jeder aus der Badewanne: Wenn das Wasser abgelassen wird, bilden sie sich kreisförmig um den Abfluss. Solche Wirbel sind im Allgemeinen sehr...

Im Focus: Neue Steuerung der Zellteilung entdeckt

Wenn eine Zelle sich teilt, werden sämtliche ihrer Bestandteile gleichmässig auf die Tochterzellen verteilt. UZH-Forschende haben nun ein Enzym identifiziert, das sicherstellt, dass auch Zellbestandteile ohne Membran korrekt aufgeteilt werden. Ihre Entdeckung eröffnet neue Möglichkeiten für die Behandlung von Krebs, neurodegenerative Krankheiten, Alterungsprozessen und Virusinfektionen.

Man kennt es aus der Küche: Werden Aceto balsamico und Olivenöl miteinander vermischt, trennen sich die beiden Flüssigkeiten. Runde Essigtropfen formen sich,...

Im Focus: Magnetic vortices: Two independent magnetic skyrmion phases discovered in a single material

For the first time a team of researchers have discovered two different phases of magnetic skyrmions in a single material. Physicists of the Technical Universities of Munich and Dresden and the University of Cologne can now better study and understand the properties of these magnetic structures, which are important for both basic research and applications.

Whirlpools are an everyday experience in a bath tub: When the water is drained a circular vortex is formed. Typically, such whirls are rather stable. Similar...

Alle Focus-News des Innovations-reports >>>

Anzeige

Anzeige

VideoLinks
Industrie & Wirtschaft
Veranstaltungen

Interdisziplinäre Konferenz: Diabetesforscher und Bioingenieure diskutieren Forschungskonzepte

13.07.2018 | Veranstaltungen

Conference on Laser Polishing – LaP: Feintuning für Oberflächen

12.07.2018 | Veranstaltungen

Materialien für eine Nachhaltige Wasserwirtschaft – MachWas-Konferenz in Frankfurt am Main

11.07.2018 | Veranstaltungen

VideoLinks
Wissenschaft & Forschung
Weitere VideoLinks im Überblick >>>
 
Aktuelle Beiträge

Interdisziplinäre Konferenz: Diabetesforscher und Bioingenieure diskutieren Forschungskonzepte

13.07.2018 | Veranstaltungsnachrichten

Maschinelles Lernen: Neue Methode ermöglicht genaue Extrapolation

13.07.2018 | Informationstechnologie

Fachhochschule Südwestfalen entwickelt innovative Zinklamellenbeschichtung

13.07.2018 | Materialwissenschaften

Weitere B2B-VideoLinks
IHR
JOB & KARRIERE
SERVICE
im innovations-report
in Kooperation mit academics