Forum für Wissenschaft, Industrie und Wirtschaft

Hauptsponsoren:     3M 
Datenbankrecherche:

 

Software vertont selbständig Bilder und Videos

17.06.2011
"PICASSO" verspricht enorme Zeitersparnis - iPhone-App geplant

Um ein selbst erstelltes Video im Internet möglichst gekonnt in Szene zu setzen, ist eine ansprechende Vertonung des gezeigten Bildmaterials unumgänglich. Für diese Aufgabe können Hobbyfilmer und Video-Enthusiasten heute zwar auf eine ganze Reihe verschiedener nützlicher Programme zurückgreifen, der benötigte Zeitaufwand ist meist aber nach wie vor beträchtlich.

Um dies zu ändern, haben findige Computerwissenschaftler der Universität Saarbrücken nun eine neuartige Software präsentiert, die selbständig zu jedem beliebigen Bild den passenden Soundtrack aufspüren kann und somit eine enorme Zeitersparnis verspricht.

"Wir haben uns genau angeschaut, welche Möglichkeiten es gibt, vorliegendes Bildmaterial automatisch mit dazupassender Musik zu unterlegen. Diese Aufgabe ist keinesfalls trivial und erfordert viel menschliche Aufmerksamkeit und Erfahrung", erklärt Aleksandar Stupar vom Cluster of Excellence "Multimodal Computing and Interaction" (MMCI) der Universität Saarbrücken im Gespräch mit pressetext. Gemeinsam mit seinem Kollegen Sebastian Michel hat der Computerwissenschafter einen Algorithmus namens Picture Categorisation for Suggestion Soundtracks - kurz PICASSO - entwickelt, der dieses Problem lösen soll.

Suchen, vergleichen, vorschlagen

Die Software funktioniert dabei folgendermaßen: Nachdem der User das System mit dem zu vertonenden Bild- bzw. Videomaterial gefüttert hat, werden die entsprechenden Inhalte zunächst in Standbilder zerlegt. Diese werden anschließend mit einer speziellen Film-Datenbank verglichen, um alljene Soundtracks herauszufiltern, die am ehesten zu den eigenen Inhalten passen. "Die Top zehn der gefundenen Songs werden dann dem User als Vorschläge zur Vertonung angezeigt", erläutert Stupar.

Zum jetzigen Zeitpunkt kann PICASSO hierfür lediglich auf ein eher bescheidenes Song-Repertoire von insgesamt einigen hundert lizenzfreien Musikstücken zurückgreifen. "Wir arbeiten aber bereits mit Hochdruck an einer iPhone-App, die für diesen Zweck auch auf die persönliche MP3-Bibliothek der User zugreifen kann. Auf diese Weise trägt das System auch dem individuellen Musikgeschmack des Einzelnen Rechnung", betont Stupar. Wann diese App offiziell erscheinen wird, stehe bislang aber noch nicht fest.

Ein langwieriger Lernprozess

Um der verwendeten Software beizubringen, welche Songs zu welchen Bildinhalten passen und welche nicht, musste der entsprechende Algorithmus einen langwierigen Lernprozess durchlaufen. So sammelten die beiden Computerwissenschaftler zunächst unzählige Stunden von bereits existierendem Filmmaterial. Dieses wurde dann in einem aufwändigen Verfahren mithilfe von PICASSO analysiert, um verschiedene Parameter ausfindig zu machen, die für eine passende Verknüpfung von Bild und Ton von zentralem Interesse sind.

Markus Steiner | pressetext.redaktion
Weitere Informationen:
http://www.mmci.uni-saarland.de

Weitere Nachrichten aus der Kategorie Informationstechnologie:

nachricht Hochautomatisiertes Fahren bei Schnee und Regen: Robuste Warnehmung dank intelligentem Sensormix
18.09.2017 | FOKUS - Fraunhofer-Institut für Offene Kommunikationssysteme

nachricht KATWARN warnt auch in Fremdsprachen
14.09.2017 | FOKUS - Fraunhofer-Institut für Offene Kommunikationssysteme

Alle Nachrichten aus der Kategorie: Informationstechnologie >>>

Die aktuellsten Pressemeldungen zum Suchbegriff Innovation >>>

Die letzten 5 Focus-News des innovations-reports im Überblick:

Im Focus: Wundermaterial Graphen: Gewölbt wie das Polster eines Chesterfield-Sofas

Graphen besitzt extreme Eigenschaften und ist vielseitig verwendbar. Mit einem Trick lassen sich sogar die Spins im Graphen kontrollieren. Dies gelang einem HZB-Team schon vor einiger Zeit: Die Physiker haben dafür eine Lage Graphen auf einem Nickelsubstrat aufgebracht und Goldatome dazwischen eingeschleust. Im Fachblatt 2D Materials zeigen sie nun, warum dies sich derartig stark auf die Spins auswirkt. Graphen kommt so auch als Material für künftige Informationstechnologien infrage, die auf der Verarbeitung von Spins als Informationseinheiten basieren.

Graphen ist wohl die exotischste Form von Kohlenstoff: Alle Atome sind untereinander nur in der Ebene verbunden und bilden ein Netz mit sechseckigen Maschen,...

Im Focus: Hochautomatisiertes Fahren bei Schnee und Regen: Robuste Warnehmung dank intelligentem Sensormix

Schlechte Sichtverhältnisse bei Regen oder Schnellfall sind für Menschen und hochautomatisierte Fahrzeuge eine große Herausforderung. Im europäischen Projekt RobustSENSE haben die Forscher von Fraunhofer FOKUS mit 14 Partnern, darunter die Daimler AG und die Robert Bosch GmbH, in den vergangenen zwei Jahren eine Softwareplattform entwickelt, auf der verschiedene Sensordaten von Kamera, Laser, Radar und weitere Informationen wie Wetterdaten kombiniert werden. Ziel ist, eine robuste und zuverlässige Wahrnehmung der Straßensituation unabhängig von der Komplexität und der Sichtverhältnisse zu gewährleisten. Nach der virtuellen Erprobung des Systems erfolgt nun der Praxistest, unter anderem auf dem Berliner Testfeld für hochautomatisiertes Fahren.

Starker Schneefall, ein Ball rollt auf die Fahrbahn: Selbst ein Mensch kann mitunter nicht schnell genug erkennen, ob dies ein gefährlicher Gegenstand oder...

Im Focus: Ultrakurze Momentaufnahmen der Dynamik von Elektronen in Festkörpern

Mit Hilfe ultrakurzer Laser- und Röntgenblitze haben Wissenschaftler am Max-Planck-Institut für Quantenoptik (Garching bei München) Schnappschüsse der bislang kürzesten Bewegung von Elektronen in Festkörpern gemacht. Die Bewegung hielt 750 Attosekunden lang an, bevor sie abklang. Damit stellten die Wissenschaftler einen neuen Rekord auf, ultrakurze Prozesse innerhalb von Festkörpern aufzuzeichnen.

Wenn Röntgenstrahlen auf Festkörpermaterialien oder große Moleküle treffen, wird ein Elektron von seinem angestammten Platz in der Nähe des Atomkerns...

Im Focus: Ultrafast snapshots of relaxing electrons in solids

Using ultrafast flashes of laser and x-ray radiation, scientists at the Max Planck Institute of Quantum Optics (Garching, Germany) took snapshots of the briefest electron motion inside a solid material to date. The electron motion lasted only 750 billionths of the billionth of a second before it fainted, setting a new record of human capability to capture ultrafast processes inside solids!

When x-rays shine onto solid materials or large molecules, an electron is pushed away from its original place near the nucleus of the atom, leaving a hole...

Im Focus: Quantensensoren entschlüsseln magnetische Ordnung in neuartigem Halbleitermaterial

Physiker konnte erstmals eine spiralförmige magnetische Ordnung in einem multiferroischen Material abbilden. Diese gelten als vielversprechende Kandidaten für zukünftige Datenspeicher. Der Nachweis gelang den Forschern mit selbst entwickelten Quantensensoren, die elektromagnetische Felder im Nanometerbereich analysieren können und an der Universität Basel entwickelt wurden. Die Ergebnisse von Wissenschaftlern des Departements Physik und des Swiss Nanoscience Institute der Universität Basel sowie der Universität Montpellier und Forschern der Universität Paris-Saclay wurden in der Zeitschrift «Nature» veröffentlicht.

Multiferroika sind Materialien, die gleichzeitig auf elektrische wie auch auf magnetische Felder reagieren. Die beiden Eigenschaften kommen für gewöhnlich...

Alle Focus-News des Innovations-reports >>>

Anzeige

Anzeige

IHR
JOB & KARRIERE
SERVICE
im innovations-report
in Kooperation mit academics
Veranstaltungen

»Laser in Composites Symposium« in Aachen – von der Wissenschaft in die Anwendung

19.09.2017 | Veranstaltungen

Biowissenschaftler tauschen neue Erkenntnisse über molekulare Gen-Schalter aus

19.09.2017 | Veranstaltungen

Zwei Grad wärmer – und dann?

19.09.2017 | Veranstaltungen

 
VideoLinks
B2B-VideoLinks
Weitere VideoLinks >>>
Aktuelle Beiträge

»Laser in Composites Symposium« in Aachen – von der Wissenschaft in die Anwendung

19.09.2017 | Veranstaltungsnachrichten

Zentraler Schalter der Immunabwehr gefunden

19.09.2017 | Biowissenschaften Chemie

Neue Materialchemie für Hochleistungsbatterien

19.09.2017 | Biowissenschaften Chemie