Δημιουργία βίντεο AI με τεχνητή νοημοσύνη (σεμινάριο)

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Όλα τα βίντεο του μαθήματος Δημιουργία βίντεο AI με τεχνητή νοημοσύνη (σεμινάριο)

Σε αυτό το σεμινάριο, θα σας δείξω πώς να δημιουργήσετε ένα εντυπωσιακό μουσικό βίντεο AI με τη βοήθεια των Stable Diffusion και Deforum. Το σεμινάριο θα σας καθοδηγήσει σε όλα τα απαραίτητα βήματα, από την επιλογή ενός μουσικού κομματιού μέχρι τη δημιουργία του τελικού βίντεο. Με αυτά τα εργαλεία και λίγη δημιουργικότητα, μπορείτε να δημιουργήσετε τα δικά σας έργα τέχνης που είναι τόσο καλλιτεχνικά όσο και τεχνικά ελκυστικά.

Βασικές γνώσεις

  • Θα χρειαστείτε το Stable Diffusion και ένα Audio to Keyframe String Generator για να αναπαράγετε τη μουσική σας σε συγχρονισμό με το οπτικό περιεχόμενο.
  • Η επιλογή του μουσικού κομματιού και η εξαγωγή των σχετικών ηχητικών κομματιών είναι ζωτικής σημασίας για τον έλεγχο του οπτικού υλικού.
  • Η προσαρμογή των παραμέτρων στο σημειωματάριο Colab σας επιτρέπει να ελέγχετε και να βελτιώνετε τις καλλιτεχνικές πτυχές των κινούμενων σχεδίων σας.

Οδηγός βήμα προς βήμα

Για να δημιουργήσετε το δικό σας μουσικό βίντεο AI, ακολουθήστε τα παρακάτω βήματα:

Βήμα 1: Επιλογή μουσικής Ξεκινήστε επιλέγοντας ένα κατάλληλο μουσικό κομμάτι. Επέλεξα το τραγούδι "As You Fade Away" του Nefex, το οποίο είναι διαθέσιμο στη βιβλιοθήκη ήχου του YouTube. Κατεβάστε το τραγούδι για να ξεκινήσετε τη δημιουργία.

Βήμα 2: Επεξεργασία του ήχου Αφού κατεβάσετε το τραγούδι, μπορείτε να μεταβείτε στο Phonic Mind. Εκεί έχετε τη δυνατότητα να εξαγάγετε κομμάτια ήχου. Στην περίπτωσή μου, εξάγω τα ντραμς, καθώς αυτά είναι καταλληλότερα για οπτικό συγχρονισμό. Ανεβάστε το τραγούδι στο Phonic Mind και επιλέξτε τα κομμάτια που θέλετε να χρησιμοποιήσετε.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 3: Δημιουργία keyframe Αφού εξαγάγετε τα σχετικά ντραμς, πρέπει να ανεβάσετε το αρχείο ήχου σε μια γεννήτρια συμβολοσειρών audio to keyframe. Αυτό θα σας επιτρέψει να δημιουργήσετε ένα keyframe που θα χρησιμοποιήσουμε αργότερα στο Stable Diffusion. Βεβαιωθείτε ότι έχετε ανεβάσει μόνο τους ήχους των τυμπάνων.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 4: Ορισμός παραμέτρων keyframe Τώρα πρέπει να ορίσετε το ρυθμό καρέ. Συνιστώ έναν ρυθμό καρέ 12 καρέ ανά δευτερόλεπτο, καθώς αυτό διευκολύνει την εμψύχωση των καρέ. Σκεφτείτε επίσης ποιους μαθηματικούς τύπους θέλετε να χρησιμοποιήσετε. Το ζουμ είναι ένας ιδιαίτερα σημαντικός παράγοντας εδώ. Ξεκινάω με ζουμ 1,04, το οποίο λειτουργεί καλά για τους ρυθμούς των τυμπάνων.

Βήμα 5: Αντιγράψτε τη συμβολοσειρά των keyframes Αντιγράψτε ολόκληρη τη συμβολοσειρά των keyframes, καθώς χρειάζεται στο Stable Diffusion για τη δημιουργία του animation. Επικολλήστε τη συμβολοσειρά στο σημειωματάριο Colab του Stable Diffusion.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 6: Διαμόρφωση του σημειωματάριου Colab Στο σημειωματάριο Colab μπορείτε να αφήσετε τις προεπιλεγμένες ρυθμίσεις, αλλά θα πρέπει να προσαρμόσετε την τιμή μετάφρασης για το animation. Βεβαιωθείτε ότι ο λόγος μεγέθυνσης είναι σωστός και ότι το animation φαίνεται όπως επιθυμείτε.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 7: Προτροπή για το κινούμενο σχέδιο Η επιλογή της προτροπής είναι καθοριστική για το οπτικό θέμα του κινούμενου σχεδίου σας. Εγώ επέλεξα ένα θέμα σε στυλ cyberpunk. Αναζητήστε τις κατάλληλες προτροπές στη Lexica, αντιγράψτε τις και επικολλήστε τις στο σημειωματάριό σας Colab.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 8: Ρυθμίσεις εξόδου βίντεο Βεβαιωθείτε ότι τα καρέ ανά δευτερόλεπτο έχουν οριστεί σε 12, καθώς αυτό θα πρέπει να ταιριάζει με τις προηγούμενες ρυθμίσεις. Τώρα μπορείτε να εκτελέσετε όλα τα κελιά για να δημιουργήσετε το κινούμενο σχέδιο.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 9: Δημιουργία κινούμενης εικόνας Αφήστε το σημειωματάριο Colab να τρέξει όλα τα κελιά. Θα χρειαστούν περίπου 20 λεπτά για τη δημιουργία του animation. Βεβαιωθείτε ότι έχετε χορηγήσει πρόσβαση στο Google Drive, καθώς όλα τα αρχεία καρέ θα αποθηκευτούν εκεί.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 10: Δημιουργία βίντεο Μόλις δημιουργηθούν όλα τα καρέ, μπορείτε να μετατρέψετε το κινούμενο σχέδιο σε βίντεο. Απενεργοποιήστε το πλαίσιο "Skip video for run all" και κάντε κλικ στο Play για να συγχωνεύσετε τα καρέ.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Βήμα 11: Επεξεργασία του βίντεο Κατεβάστε το βίντεο και ανοίξτε το στο αγαπημένο σας πρόγραμμα επεξεργασίας. Εδώ μπορείτε να επεξεργαστείτε το βίντεο μαζί με το αρχικό αρχείο ήχου για να λάβετε το τελικό μουσικό βίντεο.

Πώς να δημιουργήσετε ένα εμπνευσμένο μουσικό βίντεο AI με το Stable Diffusion

Περίληψη του βίντεο

Σε αυτόν τον οδηγό, εξήγησα βήμα προς βήμα πώς να δημιουργήσετε ένα μουσικό βίντεο AI με το Stable Diffusion. Ξεκινώντας από την επιλογή της μουσικής και την επεξεργασία των ηχητικών κομματιών μέχρι τη δημιουργία και την επεξεργασία του βίντεο. Με αυτά τα εργαλεία και τις τεχνικές, μπορείτε να δημιουργήσετε εντυπωσιακές οπτικές και ηχητικές εμπειρίες που προσθέτουν μια νέα διάσταση στη δημιουργική σας έκφραση.

Συχνές ερωτήσεις

Τι χρειάζομαι για να δημιουργήσω ένα μουσικό βίντεο AI;Θα χρειαστείτε το Stable Diffusion, το Deforum και ένα Audio to Keyframe String Generator καθώς και ένα κομμάτι μουσικής.

Πώς μπορώ να εξαγάγω κομμάτια ήχου;Μπορείτε να χρησιμοποιήσετε το Phonic Mind για να εξαγάγετε τα σχετικά κομμάτια ήχου από το μουσικό σας κομμάτι.

Πόση ώρα χρειάζεται για τη δημιουργία ενός βίντεο;Η δημιουργία του κινούμενου σχεδίου μπορεί να διαρκέσει περίπου 20 λεπτά, ανάλογα με τον αριθμό των καρέ.

Ποιο πρόγραμμα επεξεργασίας βίντεο πρέπει να χρησιμοποιήσω;Μπορείτε να χρησιμοποιήσετε οποιοδήποτε πρόγραμμα επεξεργασίας, όπως το Blender ή ένα απλό πρόγραμμα επεξεργασίας της επιλογής σας.

Μπορώ να χρησιμοποιήσω και άλλα μουσικά κομμάτια;Ναι, μπορείτε να χρησιμοποιήσετε οποιοδήποτε μουσικό κομμάτι που σας αρέσει και του οποίου η χρήση επιτρέπεται νόμιμα.