Opus 5.5 und Openverse API: automatische Suche nach Soundeffekten für Videos

Zuvor haben wir gezeigt, wie sich mit Opus 5.5 Sound zu Videos hinzufügen lässt. Es gibt eine weitere nützliche Funktion: Das Modell kann fehlende Soundeffekte selbstständig finden.

Dafür muss man Opus 5.5 lediglich Zugang zur Openverse API geben, die die Suche in 5,2 Millionen kostenlosen Audiodateien ermöglicht. Es sind weder ein API-Schlüssel noch eine Zahlung erforderlich.

In der Bibliothek stehen 590.000 Soundeffekte und 640.000 Musiktracks zur Verfügung.

Übergangsgeräusche, Klicks, Klatschen, Hintergrundrausch eines Raums — all das lässt sich in der Bibliothek finden.

Wenn die Openverse API zusammen mit dem Prompt aus dem früheren Beitrag verwendet wird, kann Opus 5.5 Soundeffekte je nach Handlung in jedem Frame auswählen und an den passenden Stellen im Video platzieren.

Dafür genügt es, die folgende Anweisung in den Prompt aufzunehmen:

Wenn im Projekt ein geeigneter Soundeffekt fehlt, suche über Openverse — https://api.openverse.org

Verwende nur Ergebnisse mit `license=cc0,by,pdm` und `source=freesound,jamendo`. Führe für jeden Soundtyp nur eine Suche durch (für anonyme Nutzer gilt ein Limit von 200 Suchanfragen pro Tag).

Wähle den am besten passenden Effekt anhand der Handlung in jedem Frame, lade die ausgewählte Datei über ihre URL mit `curl` in den Ordner `sfx/` herunter und kopiere das Feld `attribution` jedes Ergebnisses unverändert in `credits.txt`.