Automatische Umwandlung von Musikvideos in Lyric-Videos
Author
Venue
UIST 2023
Abstract
Musiker und Fans produzieren oft Lyric-Videos – eine Form von Musikvideos, die den Liedtext ihrer Lieblingssongs zeigen. Die Erstellung solcher Videos kann jedoch schwierig und zeitaufwendig sein, da der Liedtext synchron und in visueller Harmonie mit dem Video eingeblendet werden muss. Auf der Grundlage früherer Arbeiten und einer genauen Untersuchung bestehender Lyric-Videos schlagen wir eine Reihe von Gestaltungsrichtlinien vor, die den Erstellern bei der Produktion solcher Videos helfen sollen. Unsere Richtlinien gewährleisten die Lesbarkeit des Liedtextes und sorgen gleichzeitig für einen einheitlichen Fokus der Aufmerksamkeit. Wir setzen diese Richtlinien in einer vollautomatisierten Pipeline um, die ein eingegebenes Musikvideo in ein Lyric-Video umwandelt. Wir demonstrieren die Robustheit unserer Pipeline, indem wir Lyric-Videos aus einer Vielzahl unterschiedlicher Eingabequellen generieren. Eine Nutzerstudie zeigt, dass die von unserer Pipeline generierten Lyric-Videos die Lesbarkeit des Textes wirksam gewährleisten und den Fokus der Aufmerksamkeit vereinheitlichen.
