Το Kunlun Wanwei λανσάρει την πρώτη στον κόσμο πλατφόρμα σύντομης δραματικής τεχνητής νοημοσύνης SkyReels
2024-08-19
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
Στις 19 Αυγούστου, ο Kunlun Wanwei κυκλοφόρησε το SkyReels, την πρώτη στον κόσμο πλατφόρμα σύντομης δραματικής τεχνητής νοημοσύνης που ενσωματώνει μεγάλα μοντέλα βίντεο και τρισδιάστατα μεγάλα μοντέλα. Η πλατφόρμα SkyReels ενσωματώνει τη δημιουργία σεναρίων, την προσαρμογή χαρακτήρων, τα storyboards, την πλοκή, τους διαλόγους/BGM και τη σύνθεση βίντεο, επιτρέποντας στους δημιουργούς να «φτιάξουν ένα δράμα με ένα κλικ» και να παράγουν εύκολα βίντεο υψηλής ποιότητας AI.
Επιτυχίες φαντασίας, συγκλονιστικός σαδομαζοχισμός, ξεκαρδιστικές κωμωδίες... Απλώς εισάγετε μια απλή ιδέα και το SkyReels μπορεί να ολοκληρώσει ολόκληρη τη διαδικασία παραγωγής, από το σενάριο μέχρι το τελικό σύντομο έργο.
Η πλατφόρμα SkyReels ενσωματώνει το αυτο-αναπτυγμένο σενάριο του Kunlun Wanwei μεγάλου μοντέλου SkyScript, το αυτο-αναπτυγμένο σενάριο μεγάλου μοντέλου StoryboardGen, το αυτο-αναπτυγμένο μεγάλο μοντέλο 3D Sky3DGen και την πρώτη καινοτόμο πλατφόρμα του κλάδου WorldEngine που ενσωματώνει σε βάθος κινητήρες μοντέλων AI 3D και βίντεο.
Η SkyReels είναι μπροστά από μεγάλα μοντέλα όπως το GPT-4o στην ποιοτική αξιολόγηση της ποιότητας του σεναρίου, της ποιότητας του σεναρίου, της απόδοσης χαρακτήρων και άλλων διαστάσεων.
Το SkyReels μπορεί να δημιουργήσει πλήρη σενάρια, σενάρια, διαλόγους χαρακτήρων και BGM με ένα κλικ μέσω AI. Υποστηρίζει προσαρμοσμένες προσαρμογές σε εικόνες χαρακτήρων, ήχους και σενάρια και μπορεί να μετατρέψει αυτόματα περιεχόμενο σε βίντεο υψηλής ευκρίνειας 1080P 60 καρέ. βίντεο με μία κίνηση Η διάρκεια φτάνει τα 180 δευτερόλεπτα, κάτι που είναι μια σημαντική ανακάλυψη σε σύγκριση με το Sora που μπορεί να δημιουργήσει ένα βίντεο 60 δευτερολέπτων τη φορά και το Keling που μπορεί να δημιουργήσει ένα βίντεο 10 δευτερολέπτων τη φορά. Ενσωματώστε όλα τα δημιουργικά αποτελέσματα με ένα κλικ, βελτιώνοντας σημαντικά την αποτελεσματικότητα της δημιουργίας βίντεο, μειώνοντας το κόστος δημιουργίας και επιταχύνοντας την εποχή του "ένα άτομο, ένα δράμα".
Ταυτόχρονα, το WorldEngine συνδυάζει την ακριβή δυνατότητα ελέγχου του κινητήρα (όπως προσομοίωση φωτισμού, φυσική προσομοίωση, τρισδιάστατος χώρος, αλληλεπίδραση σε πραγματικό χρόνο κ.λπ.) με την ικανότητα δημιουργίας φαντασίας μεγάλων μοντέλων βίντεο AI, παρέχοντας ένα νέο διαδικτυακό υβριδικό βίντεο λειτουργία δημιουργίας, επιτρέποντας τη δημιουργία βίντεο σε Μετάβαση από ασαφή γενιά σε πιο ακριβή και ελεγχόμενη.
Τα κυριότερα σημεία του SkyReels είναι τα εξής:
Πλήρως αυτοματοποιημένη δημιουργία σεναρίων: Οι χρήστες εισάγουν έννοιες ή ιδέες και η τεχνητή νοημοσύνη θα δημιουργήσει ένα σενάριο με πλήρη δομή και πλούσια πλοκή με ένα κλικ και υποστηρίζει την αυτόματη διάταξη και στίλβωση υπαρχόντων σεναρίων για τη βελτίωση της δημιουργικής απόδοσης.
Σχεδιασμός πλοκής υψηλής ποιότητας: Το σύστημα δημιουργεί ιστορίες υψηλής ποιότητας, δραματικές συγκρούσεις, συναρπαστικά σημεία και συναισθηματικές εκφράσεις αναλύοντας μεγάλο αριθμό πλοκών σεναρίου για να εξασφαλίσει τον πλούτο και την ελκυστικότητα του σεναρίου.
Έξυπνη δημιουργία σεναρίου: Με βάση το περιεχόμενο του σεναρίου, οι εικόνες του σεναρίου και τα αντίστοιχα σενάρια κειμένου δημιουργούνται με ένα κλικ.
Συναισθηματικός διάλογος/BGM: Μέσω της τεχνολογίας σύνθεσης συναισθηματικού λόγου, δίνονται στους χαρακτήρες φυσικές παύσεις μεταξύ των προτάσεων, συναισθηματικές εκφράσεις και ρυθμοί και το AI BGM δημιουργείται αυτόματα με βάση το περιεχόμενο βίντεο για να ενσωματώσει τέλεια την εικόνα και τη μουσική.
Εξατομικευμένη προσαρμογή: υποστηρίζει την έξυπνη δημιουργία και προσαρμοσμένη προσαρμογή εικόνων χαρακτήρων, χροιών και σεναρίων για να ανταποκρίνονται στις ατομικές ανάγκες των δημιουργών και παρέχει μια ποικιλία επιλογών οπτικού στυλ, όπως κινούμενα σχέδια, κινούμενα σχέδια και ζωντανή δράση 3D για προσαρμογή στις προτιμήσεις και προτιμήσεις διαφορετικών δημιουργών Το περιεχόμενο εκφράζει τις ανάγκες.
Συνέπεια και ακρίβεια περιεχομένου: Εξασφαλίστε τη συνέπεια χαρακτήρων και σκηνών σε διαφορετικούς πίνακες ιστορίας και συνάγετε αυτόματα τις ερμηνείες χαρακτήρων με βάση τις περιγραφές ιστορίας για να επιτύχετε τον συντονισμό των εκφράσεων των χαρακτήρων, των ενεργειών και των γραμμών για τη βελτίωση της έκφρασης της ιστορίας.
Αποτελεσματική παραγωγή βίντεο: Μετατρέψτε αυτόματα τα storyboard σε συνεχή βίντεο υψηλής ευκρίνειας, παρέχοντας έξοδο 1080P 60 καρέ για να εξασφαλίσετε μια ομαλή εμπειρία προβολής.
Βολική σύνθεση μετά την παραγωγή: Ενσωματώστε όλα τα δημιουργικά αποτελέσματα με ένα κλικ και μπορεί να εξάγει και να μοιραστεί γρήγορα. Υποστηρίζει τη λήψη σε πολλαπλές μορφές για να διευκολύνει την επεξεργασία.
Η λειτουργία δημιουργίας σεναρίων τεχνητής νοημοσύνης της SkyReels βασίζεται στο μεγάλο μοντέλο SkyScript της Kunlun Wanwei που αναπτύχθηκε από μόνη της. Προκειμένου τα σενάρια που δημιουργούνται από την τεχνητή νοημοσύνη να έχουν την υψηλή πυκνότητα και τη συναρπαστική πλοκή των σύντομων δραμάτων, ο Kunlun Wanwei κατασκεύασε για πρώτη φορά ένα σύνολο δισεκατομμυρίων δομημένων δεδομένων σύντομης δραματουργίας SkyScript-100M Αυτό το σύνολο δεδομένων στοχεύει τον ρυθμό και τον ενθουσιασμό των τεράστιων σύντομων δραμάτων σχολιάζονται με υψηλή ποιότητα.
Δεύτερον, η ομάδα αλγορίθμου σχεδίασε ένα πλαίσιο δημιουργίας σεναρίων προοδευτικά, επιτρέποντας στο μοντέλο να παράγει εξαιρετικά δομημένα και συναρπαστικά σενάρια, τόσο οι αρχάριοι συγγραφείς όσο και οι έμπειροι θεατρικοί συγγραφείς μπορούν να το χρησιμοποιήσουν για να τονώσουν τη δημιουργικότητα και να δημιουργήσουν εύκολα συναρπαστικά σενάρια.
Ένα άλλο σημαντικό βήμα στη δημιουργία σύντομων δραμάτων - η παραγωγή σεναρίων, το μεγάλο μοντέλο StoryboardGen της γενιάς storyboard της Kunlun Wanwei που αναπτύχθηκε μόνος του, παρέχει την υποκείμενη τεχνολογία. Το StoryboardGen είναι το πρώτο μοντέλο παραγωγής storyboard της Kunlun Wanwei που βασίζεται στην αρχιτεκτονική DiT-MoE (Mixed-of-Experts υβριδική αρχιτεκτονική που βασίζεται στην τεχνολογία Diffusion Transformer. Μπορεί να επιτύχει τη δημιουργία πληροφοριών storyboard υψηλής πυκνότητας και να βελτιώσει σημαντικά τις δυνατότητες οπτικής αφήγησης).
Μετά την εισαγωγή του σεναρίου, το μοντέλο StoryboardGen θα αποσυνθέσει το σενάριο σε δύο μέρη: το καθολικό μέρος και το κύριο μέρος Το καθολικό μέρος περιλαμβάνει τη συνολική περιγραφή του σεναρίου, όπως σκηνές, σκηνές, συνθέσεις κ.λπ. Το κύριο μέρος περιλαμβάνει την προσαρμογή. από εικόνες χαρακτήρων και φιγούρες δράσης, οι οποίες τελικά συλλέγονται στους πράκτορες του Storyboard δημιουργούν πλήρεις σεναρίους. Η εξειδικευμένη αρχιτεκτονική πολλών παραγόντων του StoryboardGen μπορεί να εξασφαλίσει αποτελεσματικά τη δυνατότητα ελέγχου και τη συνέπεια των χαρακτήρων και των σκηνών και να δημιουργήσει υψηλής ποιότητας ιστορίες βιομηχανικής ποιότητας.
Kunlun Wanwei StoryboardGen τεχνικό σχηματικό διάγραμμα μεγάλου μοντέλου σεναρίου
Στην τελική διαδικασία δημιουργίας εικόνας, το WorldEngine είναι η πρώτη καινοτόμος πλατφόρμα της βιομηχανίας που ενσωματώνει σε βάθος τον κινητήρα AI 3D και τα μεγάλα μοντέλα βίντεο. Αυτή είναι μια πρωτοφανής τεχνολογική καινοτομία, η WorldEngine χρησιμοποιεί την τεχνολογία fusion ως γέφυρα για να δημιουργήσει μια άνευ προηγουμένου υβριδική λειτουργία δημιουργίας 3D και βίντεο.
Όταν οι χρήστες χρησιμοποιούν το SkyReels για να δημιουργήσουν βίντεο τεχνητής νοημοσύνης, μπορούν ελεύθερα να επιλέξουν να χρησιμοποιήσουν τη δημιουργία μηχανών 3D AI ή τη δημιουργία μεγάλων μοντέλων βίντεο για οποιοδήποτε στοιχείο. τρέχοντα μεγάλα μοντέλα βίντεο AI Το φαινόμενο αντιφυσικού νόμου επιτυγχάνει την τέλεια συγχώνευση της ακρίβειας της φυσικής προσομοίωσης και της φανταστικής δημιουργικότητας των μεγάλων μοντέλων βίντεο. Έκτοτε, τα μεγάλα μοντέλα παραγωγής βίντεο με τεχνητή νοημοσύνη θα περάσουν από την εποχή του «ασαφούς ελέγχου» στην εποχή του «ακριβούς ελέγχου».
Όσον αφορά τον κινητήρα 3D AI, το μεγάλο μοντέλο Sky3DGen της Kunlun Wanwei που αναπτύχθηκε μόνος του μπορεί να δημιουργήσει διάφορα τρισδιάστατα στοιχεία και σκηνές, από φυσικά τοπία έως μελλοντικές πόλεις, από στατικά αντικείμενα έως δυναμικούς χαρακτήρες και παρέχει δυνατότητες αλληλεπίδρασης 3D σκηνής σε πραγματικό χρόνο, κάνοντας τους χρήστες να μπορούν να δείτε αμέσως τα αποτελέσματα των προσαρμογών και των επεξεργασιών, επιταχύνοντας τη δημιουργική διαδικασία. Με την υποστήριξη του WorldEngine, οι χρήστες μπορούν επίσης να δημιουργήσουν εύκολα ένα τρισδιάστατο εικονικό στούντιο για να επιτύχουν μια ονειρική εμπειρία εικονικής λήψης.
Η απόδοση χαρακτήρων είναι ένας από τους βασικούς κρίκους στην παρουσίαση μικρού μήκους. Ως εκ τούτου, όσον αφορά την απόδοση χαρακτήρων AI, η ομάδα Kunlun SkyReels ανέπτυξε ειδικά το μοντέλο δημιουργίας χαρακτήρων ActorShow, έτσι ώστε οι χαρακτήρες AI που δημιουργούνται από τη SkyReels να έχουν ισχυρότερες ελεγχόμενες δυνατότητες παραγωγής στοματικών εκφράσεων και κινήσεων του σώματος και η παρουσίαση των χαρακτήρων να είναι πιο φυσική.
Ως απάντηση στις διαφορές φωτισμού, τις διαφορές στυλ και άλλες ανάγκες που συναντώνται στη μετα-σύνθεση των βίντεο, η ομάδα του Kunlun SkyReels εκπαίδευσε ξεχωριστά ένα ειδικό μοντέλο παραγωγής σύντηξης, έτσι ώστε η σύντηξη βίντεο μετά από στρώμα να παρουσιάζει καλή συνέπεια.
Το λανσάρισμα της πλατφόρμας σύντομης δραματικής τεχνητής νοημοσύνης SkyReels της Kunlun σηματοδοτεί ένα τεχνολογικό άλμα στην παγκόσμια δημιουργία μικρού μήκους Τεχνητής Νοημοσύνης. όνειρο «ένα άτομο, ένα δράμα» πραγματικότητα.
Η πλατφόρμα σύντομης δραματουργίας SkyReels AI όχι μόνο παρέχει ισχυρά δημιουργικά εργαλεία για επαγγελματίες δημιουργούς περιεχομένου, αλλά μειώνει επίσης σημαντικά το όριο για τη δημιουργία σύντομων δράματος με τεχνητή νοημοσύνη, διευκολύνοντας τους μη επαγγελματίες χρήστες να ξεκινήσουν. Αυτό το επαναστατικό εργαλείο αναμένεται να επιφέρει την εκρηκτική ανάπτυξη του περιεχομένου σύντομης δραματικής τεχνητής νοημοσύνης που δημιουργείται από χρήστες (UGC) και του επαγγελματικού περιεχομένου που δημιουργείται από χρήστες (PUGC), θα δώσει πρωτόγνωρη ζωντάνια στο οικοσύστημα περιεχομένου σύντομης δραματουργίας και θα προωθήσει την ανάπτυξη του μικρού δράματος περαιτέρω ταχεία ανάπτυξη. Έρχεται μια εποχή σύντομης δημιουργίας και κατανάλωσης δράματος που καθοδηγείται από την τεχνολογία AI.
Η Kunlun Technology έχει πάντα δεσμευτεί να παρέχει πιο έξυπνα, αποτελεσματικά και εξατομικευμένα εργαλεία σε παγκόσμιους δημιουργούς περιεχομένου μέσω της προηγμένης τεχνολογίας AIGC. Καθοδηγούμενη από τη στρατηγική «Όλα σε AGI και AIGC», η Kunlun Technology ήταν πάντα δεσμευμένη να «πραγματοποιήσει τη γενική τεχνητή νοημοσύνη και να επιτρέπει σε όλους να διαμορφώσουν και να εκφραστούν καλύτερα» ως αποστολή της. Στο μέλλον, η Kunlun Wanwei θα συνεχίσει να καινοτομεί και να παρέχει στους χρήστες προϊόντα και υπηρεσίες AIGC υψηλής ποιότητας μέσω της σε βάθος εξερεύνησης της παγκόσμιας αγοράς.
μεταφράζω
έρευνα
αντίγραφο
