Geautomatiseerde conversie van muziekvideo's naar songtekstvideo's
Author
Venue
UIST 2023
Abstract
Muzikanten en fans maken vaak lyric video's, een vorm van muziekvideo's waarin de songtekst van hun favoriete nummers wordt getoond. Het maken van dergelijke video's kan echter een uitdaging zijn en veel tijd kosten, omdat de songtekst synchroon en in visuele harmonie met de video moet worden toegevoegd. Op basis van eerder werk en een grondige analyse van bestaande lyric video's stellen we een reeks ontwerprichtlijnen voor om makers te helpen bij het maken van dergelijke video's. Onze richtlijnen zorgen ervoor dat de songtekst goed leesbaar blijft, terwijl de aandacht op één punt gericht blijft. We passen deze richtlijnen toe in een volledig geautomatiseerde pijplijn die een ingevoerde muziekvideo omzet in een lyric video. We laten zien hoe goed onze pijplijn werkt door lyric video's te maken van allerlei verschillende bronnen. Uit een gebruikersonderzoek blijkt dat de lyric video's die onze pijplijn maakt, de tekst goed leesbaar houden en de aandacht op één punt gericht houden.
