Un prompt pour synchroniser le son avec des vidéos de motion design générées par IA

Si les vidéos de motion design créées par Opus 5.5 sonnent encore comme des sifflements électroniques bon marché, essayez ce prompt.

Prompt pour l’assistant :

Ajoute du son à cette vidéo. Tu ne peux pas entendre, donc mesure tout et ne te fie pas aux impressions subjectives. Si ffmpeg et librosa ne sont pas installés, installe-les d’abord.

1. Utilise une musique avec une licence adaptée : soit le morceau que je fournis, soit une composition distribuée sous une licence gratuite Mixkit. Indique la source et la licence. Ne génère pas la musique ni les effets sonores par logiciel.
2. Détermine les temps du rythme musical avec librosa. Parfois, la bibliothèque se synchronise par erreur avec les temps faibles, donc trace la forme d’onde dans la plage inférieure à 120 Hz, superpose une grille de temps et zoome sur plusieurs mesures. Si les coups de grosse caisse ne correspondent pas à la grille, décale toute la grille.
3. Synchronise les mouvements principaux, comme les changements de scène et l’apparition des titres, avec les temps musicaux. Si tu peux modifier l’animation, modifie-la. Sinon, décale le moment de démarrage de la musique.
4. Pour chaque changement de frame et chaque mouvement significatif, utilise un fichier d’effet sonore prêt à l’emploi distinct : un whoosh pour le mouvement, un pop pour l’apparition d’éléments, un clic pour les pressions et un son de clavier pour la frappe. Utilise d’abord la bibliothèque de sons existante du projet, par exemple celle livrée avec HyperFrames. S’il n’y a pas une telle bibliothèque, demande-moi.
5. Si la vidéo contient une voix off, elle doit être plus forte que les autres sons, et le volume de la musique doit être réduit pendant la parole. Les effets sonores doivent être plus forts que la musique. Vise une sonorité globale d’environ -16 LUFS et un niveau de crête inférieur à -4 dBFS pour éviter l’écrêtage après compression AAC et la lecture via le haut-parleur du téléphone en mono. Mesure la sonorité du MP4 exporté avec le filtre ebur128 dans ffmpeg. Ne mesure pas le fichier WAV.
6. Avec ffmpeg, extrais du MP4 exporté une image avant et une image après chaque moment de déclenchement de l’effet sonore, puis trace la forme d’onde pour comparaison. Ensuite, choisis cinq timecodes que je pourrai vérifier avec un casque. N’affirme pas que le son est bon.

Exemple réel : Il y a quelques jours, lors de la sélection de musique pour une vidéo, librosa s’est synchronisée par erreur avec les temps faibles. Toute la grille rythmique était décalée de 0,22 seconde. Le problème n’a été détecté qu’après avoir superposé la grille sur un graphique de la forme d’onde en dessous de 120 Hz.