Instrukcja tworzenia inspirującego filmu muzycznego z SI Stable Diffusion

W tym samouczku pokażę Ci, jak za pomocą Stable Diffusion i Deforumu stworzyć imponujące wideo muzyczne z użyciem sztucznej inteligencji. Ten poradnik przeprowadzi Cię przez wszystkie niezbędne kroki, począwszy od wyboru utworu muzycznego, aż do stworzenia finalnego wideo. Z tymi narzędziami i odrobiną kreatywności możesz tworzyć własne dzieła sztuki, które są zarówno artystyczne, jak i technicznie atrakcyjne.

Najważniejsze spostrzeżenia

• Potrzebujesz Stable Diffusion i generatora ciągów Audio to Keyframe, aby móc synchronizować swoją muzykę z treściami wizualnymi.
• Wybór utworu muzycznego i ekstrakcja odpowiednich ścieżek audio są kluczowe dla sterowania wizualną reprezentacją.
• Dopasowanie parametrów w notatniku Colab pozwala kontrolować i udoskonalać aspekty artystyczne swoich animacji.

Krok po kroku

Aby stworzyć swoje wideo muzyczne z użyciem SI, postępuj zgodnie z tymi krokami:

Krok 1: Wybierz muzykę Zacznij od wyboru odpowiedniego utworu muzycznego. Ja zdecydowałem się na utwór "As You Fade Away" autorstwa Nefex, który jest dostępny w bibliotece audio na YouTube. Pobierz piosenkę, aby rozpocząć tworzenie wideo.

Krok 2: Edytuj audio Po pobraniu piosenki udaj się do Phonic Mind. Tam masz możliwość wyodrębnienia ścieżek audio. W moim przypadku wyodrębniam perkusję, ponieważ najlepiej nadaje się do synchronizacji wizualnej. Wgraj utwór do Phonic Mind i wybierz ścieżki, które chcesz wykorzystać.

Krok 3: Stwórz kluczowe klatki Po wyodrębnieniu odpowiednich elementów perkusyjnych musisz wgrać plik audio do generatora ciągów Audio to Keyframe. Pozwoli to wygenerować kluczową klatkę, którą później wykorzystamy w Stable Diffusion. Upewnij się, że wgrywasz tylko dźwięki perkusyjne.

Krok 4: Ustaw parametry kluczowych klatek Teraz musisz ustawić liczbę klatek na sekundę. Polecam 12 klatek na sekundę, ponieważ ułatwia to animowanie klatek. Rozważ też, jakie formuły matematyczne chcesz użyć. Zoom jest tu szczególnie istotny. Zaczynam od zoomu 1.04, który dobrze działa dla uderzeń perkusyjnych.

Krok 5: Skopiuj ciąg kluczowych klatek Skopiuj cały ciąg kluczowych klatek, ponieważ będzie potrzebny w Stable Diffusion do stworzenia animacji. Wklej ciąg kluczy do notatnika Colab dla Stable Diffusion.

Krok 6: Konfiguracja notatnika Colab W notatniku Colab możesz pozostawić domyślne ustawienia, ale powinieneś dostosować wartość translacji dla animacji. Upewnij się, że proporcje zoomu są odpowiednie i animacja wygląda zgodnie z oczekiwaniami.

Krok 7: Prompt dla animacji Wybór promptu jest istotny dla tematu wizualnego animacji. Ja wybrałem motyw w stylu Cyberpunk. Wyszukaj odpowiednie prompty w Lexica, skopiuj je i wklej do notatnika Colab.

Krok 8: Ustawienia wyjścia wideo Upewnij się, że liczba klatek na sekundę wynosi 12, aby być zgodnym z wcześniejszymi ustawieniami. Teraz możesz uruchomić wszystkie komórki, aby wygenerować animację.

Krok 9: Generowanie animacji Uruchom wszystkie komórki w notatniku Colab. Proces tworzenia animacji potrwa około 20 minut. Upewnij się, że udzieliłeś dostępu do Google Drive, ponieważ tam zapisywane są wszystkie pliki klatek.

Krok 10: Tworzenie wideo Po stworzeniu wszystkich klatek możesz przekształcić animację w wideo. Odznacz pole "Skip video for run all" i kliknij przycisk Play, aby połączyć klatki.

Krok 11: Edycja wideo Pobierz wideo i otwórz je w wybranym programie do edycji. Tutaj możesz skrócić wideo z oryginalnym plikiem audio, aby uzyskać ostateczne wideo muzyczne.

Podsumowanie

W tym samouczku krok po kroku wyjaśniłem, jak stworzyć wideo muzyczne z AI Stable Diffusion. Rozpocząwszy od wyboru muzyki, poprzez edycję ścieżek audio, aż do generowania i edytowania wideo. Dzięki tym narzędziom i technikom możesz tworzyć imponujące wizualne i dźwiękowe doznania, które nadadzą nowy wymiar twojemu wyrazowi kreatywnemu.