Η Google Research παρουσίασε το νευρωνικό δίκτυο Lumiere που δημιουργεί περιεχόμενο βίντεο
25/01/2024
Η Google Research παρουσίασε την τελευταία της εξέλιξη - το νευρωνικό δίκτυο Lumiere. Αυτό το εκπληκτικό έργο έχει τη δυνατότητα να αλλάξει το πρόσωπο της βιομηχανίας παραγωγής βίντεο υιοθετώντας μια εντελώς νέα προσέγγιση στη δημιουργία περιεχομένου βίντεο.
Το νευρωνικό δίκτυο Lumiere έχει τη μοναδική ικανότητα να δημιουργεί βίντεο χρησιμοποιώντας περιγραφές κειμένου και εικόνες. Ωστόσο, αυτό που το κάνει πραγματικά εκπληκτικό είναι η δυνατότητα να διαμορφώσετε το στυλ του περιεχομένου που δημιουργήθηκε με βάση μια δεδομένη αναφορά. Αυτό σας επιτρέπει να δημιουργείτε πλάνα βίντεο χωρίς την ανάγκη φυσικής κινηματογράφησης.
Ένα από τα βασικά χαρακτηριστικά του Lumiere είναι η ικανότητά του να απλοποιεί σημαντικά τη διαδικασία παραγωγής βίντεο. Με τη δυνατότητα δημιουργίας βίντεο με βάση περιγραφές κειμένου, οι εταιρείες και οι δημιουργικές ομάδες μπορούν να εξοικονομήσουν χρόνο και πόρους που είχαν δαπανηθεί προηγουμένως για τα γυρίσματα.
Η αποκάλυψη του Lumiere έχει ενθουσιάσει ορισμένους δημιουργούς περιεχομένου βίντεο, αλλά πολλοί βλέπουν μεγάλες δυνατότητες στην τεχνολογία.
25/01/2024
Η Google Research παρουσίασε την τελευταία της εξέλιξη - το νευρωνικό δίκτυο Lumiere. Αυτό το εκπληκτικό έργο έχει τη δυνατότητα να αλλάξει το πρόσωπο της βιομηχανίας παραγωγής βίντεο υιοθετώντας μια εντελώς νέα προσέγγιση στη δημιουργία περιεχομένου βίντεο.
Το νευρωνικό δίκτυο Lumiere έχει τη μοναδική ικανότητα να δημιουργεί βίντεο χρησιμοποιώντας περιγραφές κειμένου και εικόνες. Ωστόσο, αυτό που το κάνει πραγματικά εκπληκτικό είναι η δυνατότητα να διαμορφώσετε το στυλ του περιεχομένου που δημιουργήθηκε με βάση μια δεδομένη αναφορά. Αυτό σας επιτρέπει να δημιουργείτε πλάνα βίντεο χωρίς την ανάγκη φυσικής κινηματογράφησης.
Ένα από τα βασικά χαρακτηριστικά του Lumiere είναι η ικανότητά του να απλοποιεί σημαντικά τη διαδικασία παραγωγής βίντεο. Με τη δυνατότητα δημιουργίας βίντεο με βάση περιγραφές κειμένου, οι εταιρείες και οι δημιουργικές ομάδες μπορούν να εξοικονομήσουν χρόνο και πόρους που είχαν δαπανηθεί προηγουμένως για τα γυρίσματα.
Η αποκάλυψη του Lumiere έχει ενθουσιάσει ορισμένους δημιουργούς περιεχομένου βίντεο, αλλά πολλοί βλέπουν μεγάλες δυνατότητες στην τεχνολογία.
========================
Η Google αποκαλύπτει το Lumière, εκπληκτικό νέο AI για τη δημιουργία βίντεο
Το βίντεο που παράγεται από AI εξελίσσεται με ιλιγγιώδη ταχύτητα και το ασυνήθιστο νέο μοντέλο Lumiere της Google επαναπροσδιορίζει για άλλη μια φορά τα νευρωνικά δίκτυα.
Το Lumiere μπορεί να δημιουργήσει εκπληκτικά ρεαλιστικά ή υψηλής ποιότητας σουρεαλιστικά βίντεο κλιπ διάρκειας έως πέντε δευτερολέπτων. Μπορεί να ζωντανέψει στατικές εικόνες ή θραύσματά τους ως απάντηση σε ενδείξεις κειμένου φυσικής γλώσσας σχετικά με αυτό που θέλετε να δείτε.
Μπορεί να τραβήξει μια εικόνα, να κλωνοποιήσει το στυλ της και, στη συνέχεια, να τη χρησιμοποιήσει για να δημιουργήσει μια ποικιλία βίντεο για άλλα θέματα που μοιάζουν και αισθάνονται τόσο παρόμοια που θα μπορούσαν να γίνουν από ένα πρακτορείο επωνυμίας.
Ο Lumiere μπορεί να τραβήξει το δικό σας βίντεο πηγής και να μετατρέψει τα πάντα σε Lego, origami ή λουλούδια - το μόνο που έχετε να κάνετε είναι να το ζητήσετε.
Αν πιστέψουμε τα demos, η Lumiere έχει τις πιο προηγμένες δυνατότητες δημιουργίας βίντεο που έχουμε δει ποτέ. Μπορείτε απλά να ζωγραφίσετε πάνω από το τμήμα της εικόνας που δεν σας αρέσει και το Lumiere θα γεμίσει αυτόματα αυτήν την περιοχή τόσο καλά που πιθανότατα δεν θα το παρατηρήσετε καν. Φυσικά, αν δεν κοιτάξετε προσεκτικά. Είναι ο πρώην φίλος σας στο αγαπημένο σας βίντεο? Όχι για πολύ.
Η ομάδα ισχυρίζεται ότι η αρχιτεκτονική του Lumière δημιουργεί ολόκληρη τη διάρκεια του βίντεο ταυτόχρονα, σε ένα μόνο πέρασμα - σε αντίθεση με τα προηγούμενα μοντέλα, τα οποία συχνά δημιουργούσαν τα καρέ έναρξης και λήξης και στη συνέχεια προσπαθούσαν να μαντέψουν τι θα συνέβαινε ενδιάμεσα.
Όπως και να γίνει, τα αποτελέσματα μιλούν από μόνα τους - αυτό είναι ένα νέο επίπεδο τέχνης στο παραγωγικό βίντεο AI και είναι ειλικρινά εντυπωσιακό.
Προς το παρόν, είναι απλώς ένα ερευνητικό έργο που εξαλείφει την ανάγκη της Google να στειρώσει επιθετικά το σύστημα υπέρ των πνευματικών δικαιωμάτων, των απομιμήσεων, της ασφάλειας, της ρητορικής μίσους, του γυμνού, του απορρήτου και άλλων πολιτικών - μια διαδικασία που οδηγεί πάντα σε φτωχά αποτελέσματα σε τέτοια παραγωγικά μοντέλα.
Αλλά εξακολουθεί να είναι ένα τεράστιο άλμα προς τα εμπρός και θα είναι ενδιαφέρον να δούμε πόσο καλά αποδίδει ο Lumiere εάν και όταν πάρουμε στα χέρια μας το νευρωνικό δίκτυο.
https://dzen.ru/a/ZbJ89GoqZwOA5iVG?experiment=948515
Η Google αποκαλύπτει το Lumière, εκπληκτικό νέο AI για τη δημιουργία βίντεο
Το βίντεο που παράγεται από AI εξελίσσεται με ιλιγγιώδη ταχύτητα και το ασυνήθιστο νέο μοντέλο Lumiere της Google επαναπροσδιορίζει για άλλη μια φορά τα νευρωνικά δίκτυα.
Το Lumiere μπορεί να δημιουργήσει εκπληκτικά ρεαλιστικά ή υψηλής ποιότητας σουρεαλιστικά βίντεο κλιπ διάρκειας έως πέντε δευτερολέπτων. Μπορεί να ζωντανέψει στατικές εικόνες ή θραύσματά τους ως απάντηση σε ενδείξεις κειμένου φυσικής γλώσσας σχετικά με αυτό που θέλετε να δείτε.
Μπορεί να τραβήξει μια εικόνα, να κλωνοποιήσει το στυλ της και, στη συνέχεια, να τη χρησιμοποιήσει για να δημιουργήσει μια ποικιλία βίντεο για άλλα θέματα που μοιάζουν και αισθάνονται τόσο παρόμοια που θα μπορούσαν να γίνουν από ένα πρακτορείο επωνυμίας.
Ο Lumiere μπορεί να τραβήξει το δικό σας βίντεο πηγής και να μετατρέψει τα πάντα σε Lego, origami ή λουλούδια - το μόνο που έχετε να κάνετε είναι να το ζητήσετε.
Αν πιστέψουμε τα demos, η Lumiere έχει τις πιο προηγμένες δυνατότητες δημιουργίας βίντεο που έχουμε δει ποτέ. Μπορείτε απλά να ζωγραφίσετε πάνω από το τμήμα της εικόνας που δεν σας αρέσει και το Lumiere θα γεμίσει αυτόματα αυτήν την περιοχή τόσο καλά που πιθανότατα δεν θα το παρατηρήσετε καν. Φυσικά, αν δεν κοιτάξετε προσεκτικά. Είναι ο πρώην φίλος σας στο αγαπημένο σας βίντεο? Όχι για πολύ.
Η ομάδα ισχυρίζεται ότι η αρχιτεκτονική του Lumière δημιουργεί ολόκληρη τη διάρκεια του βίντεο ταυτόχρονα, σε ένα μόνο πέρασμα - σε αντίθεση με τα προηγούμενα μοντέλα, τα οποία συχνά δημιουργούσαν τα καρέ έναρξης και λήξης και στη συνέχεια προσπαθούσαν να μαντέψουν τι θα συνέβαινε ενδιάμεσα.
Όπως και να γίνει, τα αποτελέσματα μιλούν από μόνα τους - αυτό είναι ένα νέο επίπεδο τέχνης στο παραγωγικό βίντεο AI και είναι ειλικρινά εντυπωσιακό.
Προς το παρόν, είναι απλώς ένα ερευνητικό έργο που εξαλείφει την ανάγκη της Google να στειρώσει επιθετικά το σύστημα υπέρ των πνευματικών δικαιωμάτων, των απομιμήσεων, της ασφάλειας, της ρητορικής μίσους, του γυμνού, του απορρήτου και άλλων πολιτικών - μια διαδικασία που οδηγεί πάντα σε φτωχά αποτελέσματα σε τέτοια παραγωγικά μοντέλα.
Αλλά εξακολουθεί να είναι ένα τεράστιο άλμα προς τα εμπρός και θα είναι ενδιαφέρον να δούμε πόσο καλά αποδίδει ο Lumiere εάν και όταν πάρουμε στα χέρια μας το νευρωνικό δίκτυο.
https://dzen.ru/a/ZbJ89GoqZwOA5iVG?experiment=948515
Δεν υπάρχουν σχόλια:
Δημοσίευση σχολίου