Hogyan készítsünk inspiráló AI zenei videót a Stable Diffusion segítségével?

Ebben a bemutatóban megmutatom, hogyan készíthetsz egy lenyűgöző AI zenei videót a Stable Diffusion és a Deforum segítségével. A bemutató végigvezet az összes szükséges lépésen, a zeneszám kiválasztásától a végső videó elkészítéséig. Ezekkel az eszközökkel és egy kis kreativitással létrehozhatod a saját műalkotásaidat, amelyek művészileg és technikailag egyaránt vonzóak.

A legfontosabb tanulságok

• Szükséged lesz a Stable Diffusionre és egy Audio to Keyframe String Generatorra, hogy a zenédet a vizuális tartalommal szinkronban játszhasd le.
• A zeneszám kiválasztása és a megfelelő hangsávok kivonása kulcsfontosságú a vizuális elemek vezérléséhez.
• A Colab notebookban a paraméterek beállítása lehetővé teszi az animációk művészi aspektusainak ellenőrzését és finomítását.

Lépésről lépésre útmutató

Az AI zenei videó elkészítéséhez kövesse az alábbi lépéseket:

1. lépés: Zene kiválasztása Kezdje egy megfelelő zeneszám kiválasztásával. Én a Nefex "As You Fade Away" című dalát választottam, amely elérhető a YouTube hangtárában. Töltse le a dalt, hogy elkezdhesse az alkotást.

2. lépés: Szerkeszd a hanganyagot A dal letöltése után menj a Phonic Mind oldalra. Ott lehetőséged van a hangsávok kivonására. Az én esetemben a dobokat extrahálom, mivel ezek a legalkalmasabbak a vizuális szinkronizáláshoz. Töltse fel a dalt a Phonic Mindba, és válassza ki a használni kívánt sávokat.

3. lépés: Keyframe létrehozása Miután kivonta a megfelelő dobokat, fel kell töltenie a hangfájlt egy audio to keyframe string generátorba. Ez lehetővé teszi egy kulcskocka létrehozását, amelyet később a Stable Diffusionben fogunk használni. Ügyeljen arra, hogy csak a dobhangokat töltse fel.

4. lépés: A kulcskocka paramétereinek beállítása Most a képkocka sebességét kell beállítania. Én 12 képkocka/másodperc képkockasebességet ajánlok, mivel így könnyebb animálni a képkockákat. Gondold át azt is, hogy milyen matematikai képleteket szeretnél használni. A nagyítás itt különösen fontos tényező. Én 1,04-es zoommal kezdem, ami jól működik a dobütésekhez.

5. lépés: Másolja a kulcskocka-sorozatot Másolja a teljes kulcskocka-sorozatot, mivel a Stable Diffusionben szükség van rá az animáció létrehozásához. Illessze be a stringet a Stable Diffusion Colab notebookjába.

6. lépés: A Colab notebook konfigurálása A Colab notebookban meghagyhatja az alapértelmezett beállításokat, de az animáció fordítási értékét érdemes beállítani. Győződjön meg róla, hogy a zoomarány megfelelő, és az animáció a kívánt módon néz ki.

7. lépés: Az animáció súgója A súgó kiválasztása döntő fontosságú az animáció vizuális témája szempontjából. Én egy cyberpunk stílusú témát választottam. Keressen megfelelő promptokat a Lexicában, másolja ki őket, és illessze be a Colab jegyzetfüzetébe.

8. lépés: Videókimeneti beállítások Győződjön meg róla, hogy a másodpercenkénti képkocka 12-re van beállítva, mivel ennek meg kell egyeznie az előző beállításokkal. Most már lefuttathatja az összes cellát az animáció létrehozásához.

9. lépés: Animáció létrehozása Engedje, hogy a Colab notebook futtassa le az összes cellát. Az animáció generálása körülbelül 20 percig fog tartani. Győződjön meg róla, hogy hozzáférést biztosít a Google Drive-hoz, mivel az összes képkockafájl oda lesz mentve.

10. lépés: Videó készítése Miután az összes képkocka elkészült, az animációt videóra konvertálhatja. Kapcsolja ki a "Skip video for run all" (Videó kihagyása az összes lefuttatásához) négyzetet, és kattintson a Play (Lejátszás) gombra a képkockák összevonásához.

11. lépés: A videó szerkesztése Töltse le a videót, és nyissa meg a kedvenc szerkesztőprogramjában. Itt szerkesztheti a videót az eredeti hangfájllal együtt, hogy megkapja a véglegesített zenei videót.

A videó összefoglalása

Ebben az útmutatóban lépésről lépésre elmagyaráztam, hogyan készíthetünk AI zenei videót a Stable Diffusion segítségével. Kezdve a zene kiválasztásától és a hangsávok szerkesztésétől kezdve a videó létrehozásán és szerkesztésén át. Ezekkel az eszközökkel és technikákkal lenyűgöző vizuális és hangélményeket hozhat létre, amelyek új dimenziót adnak a kreatív kifejezésmódnak.