Opus 5.5 і Openverse API: автоматичний пошук звукових ефектів для відео

Раніше ми розібрали, як за допомогою Opus 5.5 додавати звукове супроводження до відео. Однак є ще одна корисна можливість: модель може самостійно знаходити потрібні звукові ефекти.

Для цього достатньо надати Opus 5.5 доступ до Openverse API, який дозволяє шукати серед 5,2 млн безкоштовних аудіофайлів. При цьому не потрібні ні API-ключ, ні оплата.

У бібліотеці доступно 590 тис. звукових ефектів і 640 тис. музичних треків.

Звуки переходів, кліки, оплески, фоновий шум приміщення — усе це можна знайти в бібліотеці.

Якщо використовувати Openverse API разом із промптом із попереднього матеріалу, Opus 5.5 зможе підбирати звукові ефекти залежно від того, що відбувається в кожному кадрі, і розміщувати їх у відповідних місцях відеоролика.

Для цього достатньо додати в промпт таку інструкцію:

Якщо в проєкті немає підходящого звукового ефекту, виконай пошук через Openverse — https://api.openverse.org

Використовуй лише результати з `license=cc0,by,pdm` і `source=freesound,jamendo`. Для кожного типу звуку виконуй пошук лише один раз (для анонімних користувачів діє обмеження у 200 пошукових запитів на добу).

Підбери найвідповідніший ефект з урахуванням дії в кожному кадрі, завантаж вибраний файл за його URL за допомогою `curl` у теку `sfx/` і скопіюй поле `attribution` кожного результату в `credits.txt` без змін.