Παρουσιάζουμε το Gemini Omni
Πέρυσι, το Nano Banana έφερε τη νοημοσύνη του Gemini στη δημιουργία και επεξεργασία εικόνων. Από τότε, έχει βοηθήσει εκατομμύρια ανθρώπους να αποκαταστήσουν παλιές φωτογραφίες, να σχεδιάσουν σκίτσα και να οπτικοποιήσουν ιδέες με τρόπους που ήταν αδύνατοι πριν. Από την αρχή, κατασκευάσαμε το Gemini με τέτοιο τρόπο ώστε να είναι ένα εγγενώς πολυτροπικό μοντέλο από τη βάση του, και τώρα προχωράμε στο επόμενο βήμα.
Παρουσιάζουμε το Gemini Omni, όπου η ικανότητα του Gemini στον συλλογισμό συναντά την ικανότητά του στη δημιουργία. Το Omni είναι το νέο μοντέλο μας που μπορεί να δημιουργήσει ό,τι θέλετε από οποιοδήποτε είδος δεδομένων εισόδου, ξεκινώντας από το βίντεο. Με το Omni, μπορείτε να συνδυάσετε ως δεδομένα εισόδου εικόνες, ήχο, βίντεο και κείμενο και να παράγετε υψηλής ποιότητας βίντεο βασισμένα στη γνώση του Gemini για τον πραγματικό κόσμο. Μπορείτε, επίσης, να επεξεργαστείτε εύκολα τα βίντεό σας μέσω συνομιλίας.
Σήμερα, κυκλοφορεί το πρώτο μοντέλο της οικογένειας Omni: το Gemini Omni Flash, στην εφαρμογή Gemini, στο Google Flow και στο YouTube Shorts. Στο μέλλον θα υποστηρίξουμε μορφές εξόδου όπως εικόνα και ήχο. Δείτε μερικά από τα στοιχεία που κάνουν το Omni να ξεχωρίζει:
Επεξεργασία βίντεο μέσω συνομιλίας
Το Gemini Omni προσφέρει έναν πιο εύκολο τρόπο να επεξεργαστείτε βίντεο χρησιμοποιώντας φυσική γλώσσα. Κάθε οδηγία βασίζεται στην προηγούμενη. Οι χαρακτήρες σας παραμένουν συνεπείς, οι νόμοι της φυσικής εφαρμόζονται ρεαλιστικά και η σκηνή διατηρεί τη συνέχεια όσων έχουν προηγηθεί.
Μεταμορφώστε τον κόσμο γύρω σας. Αλλάξτε συγκεκριμένα στοιχεία ή αλλάξτε τα πάντα. Το βίντεό σας γίνεται η αφετηρία για κάτι που δεν θα μπορούσατε ποτέ να έχετε κινηματογραφήσει μόνοι σας.
Prompt: Make the sculpture out of bubbles.
Αναδιαμορφώστε τη δράση. Ζητήστε απλώς από το Omni να αλλάξει αυτό που συμβαίνει σε ένα βίντεο που έχετε τραβήξει. Αλλάξτε την εξέλιξη της δράσης, προσθέστε νέους χαρακτήρες ή αντικείμενα, ή μετατρέψτε μια στιγμή σε κάτι απρόβλεπτο.
Prompt: When the person touches the mirror, make the mirror ripple beautifully like liquid, and the person's arm turns into reflective mirror material.
Prompt: Dim the lights in the room. Put a black and white checkerboard room inside a glass sphere that floats tracking above the hand, inside it contains a recursive representation of the same hand holding the sphere, creating an infinite recursive of rooms. Camera slowly gets closer into the sphere, creating a video loop.
Prompt: The lights of the apartments start turning on in sync with the music.
Βελτιώστε τα βίντεό σας σε πολλαπλά στάδια. Αλλάξτε το περιβάλλον, τη γωνία λήψης, το στιλ ή ακόμα και συγκεκριμένες λεπτομέρειες, διατηρώντας τη συνοχή της αρχικής σκηνής.
A video of a violinist playing a song.
Prompt: Transport the violinist to the image environment
Prompt: Change the camera angle to be over the violinist’s shoulder.
Ζωντανέψτε τις ιδέες σας, αξιοποιώντας τη γνώση του Gemini για τον κόσμο
Το Gemini Omni δεν δημιουργεί απλώς σκηνές που φαίνονται ρεαλιστικές, αλλά αντιλαμβάνεται τι πρέπει να συμβεί στη συνέχεια. Συνδυάζει μια διαισθητική κατανόηση της φυσικής με τη γνώση του Gemini για την ιστορία, την επιστήμη και το πολιτισμικό πλαίσιο, γεφυρώνοντας το χάσμα ανάμεσα στον φωτορεαλισμό και την αφήγηση με νόημα.
Δημιουργήστε οπτικό περιεχόμενο με μεγαλύτερη ακρίβεια στους νόμους της φυσικής. Το Omni διαθέτει μια βελτιωμένη διαισθητική κατανόηση φυσικών δυνάμεων όπως η βαρύτητα, η κινητική ενέργεια και η ρευστοδυναμική, επιτρέποντάς σας να δημιουργήσετε πιο ρεαλιστικές σκηνές.
Prompt: A marble rolling fast on a chain reaction style track, continuous smooth shot.
Συνδυάστε γνώση και δημιουργικότητα. Το Omni χρησιμοποιεί τη γνώση του Gemini για να συνδέει γλώσσα, εικόνες και νόημα με τρόπους που ξεπερνούν κατά πολύ την απλή αντιστοίχιση προτύπων.
Prompt: The video shows items of the alphabet. An unusual item starting with each letter is shown sitting on a table (like a Capybara for C, disco globe for D and Lava Lamp for L). All 26 letters must be represented by 26 items with matching lower thirds displaying the letter. Only one item and lower third at a time. Each lower third must look like a black marker written on a slip of paper in the bottom left. Rapid fire, roughly 9 frames per item at 24FPS. Last frame is a slip of paper "THE END". The whole video is accompanied by calm smooth music.
Σύνθετες ιδέες οπτικοποιούνται. Το Omni μπορεί να δημιουργήσει εντυπωσιακές επεξηγήσεις από σύντομες προτροπές, παράγοντας οπτικά στοιχεία που αποδομούν πιο σύνθετες έννοιες.
Prompt: claymation explainer of protein folding, everything is made out of clay, no hands, stop motion, accurate
Δημιουργήστε βίντεο από οποιονδήποτε συνδυασμό δεδομένων εισόδου
Αναφερθείτε σε οτιδήποτε. Το Omni μετατρέπει κάθε αναφορά εικόνας, κειμένου, βίντεο ή ήχου, σε ένα ενιαίο, συνεκτικό αποτέλεσμα. Αν και προς το παρόν για τον ήχο θα υποστηρίζονται μόνο φωνητικές αναφορές, σύντομα θα προστεθούν και άλλοι τύποι ηχητικών δεδομένων εισόδου.
Prompt: Dynamic sci-fi film style video based on image_0.png. Elements light up similar to video_0.mp4 synchronized to the beat of the music from audio_0.wav
Prompt: Referring to the extreme camera movement, perspective, and distortion in video-0, create a front-facing full-body walk cycle of the character from image-0, quickly style-shifting into multiple visual styles during the walk cycle, starting from realistic cinema. Keep the environment, only change styles. Hard cut backgrounds always centering the sky. Continuous walking, continuous audio, and style shifts in perfect sync to the beat of the audio. Cinematic, 16:9.
Prompt: Add harp sounds synchronized to when I touch each fern leaf. Change the leaf structure to all resemble semi translucent 3d bioluminescent plant life, with bioluminescent fireflies flying around it that react as I play, in sync with the sounds, subtle bokeh depth of field dynamic lighting, reflecting off the walls in the room, keeping the room structure the same
Ξεκινήστε από αυτό που έχετε. Με αναφορές δεδομένων εισόδου μπορείτε να χρησιμοποιήσετε εικόνες χαρακτήρων, σκηνές ή σχέδια για να δημιουργήσετε με τρόπο που ταιριάζει στο όραμά σας.
Prompt: Imagine the world gradually changing into retro futuristic style (grainy and moody as image-1) as I walk. Use the audio for a retro-futuristic background music. 10s.
Prompt: turn this into realistic footage, using the drawing only as a guide for movement, do not show the drawing in the final video
Prompt: Apply the pose and motion from input video to provided character from this image. Apply style from image reference to the new video
Εφαρμόστε στιλ, κίνηση ή εφέ. Καθορίστε την οπτική γλώσσα χρησιμοποιώντας αναφορές δεδομένων εισόδου ή απλά περιγράψτε το με φυσική γλώσσα. Το Omni συνδυάζει τις αναφορές εισόδου για να δημιουργήσει ένα συνεκτικό βίντεο κλιπ.
Prompt: edit this keeping everything the same. add animated motion effects coming out of the skateboard
Prompt: Apply the motion of the whale swimming from the provided video to the provided image of fluid reflective material. Do not show the whale or water; instead, have this reflective moving material form a shape that resembles the whale as it swims. Replace water with white smooth material shapes that move
Δημιουργήστε βίντεο με το δικό σας ψηφιακό avatar
Δεσμευόμαστε να αναπτύξουμε το AI με υπευθυνότητα, θέτοντας σαφείς πολιτικές για την προστασία των χρηστών, και να διασφαλίσουμε τη σωστή χρήση των AI εργαλείων μας. Ως πρώτο βήμα, μπορείτε να δημιουργείτε βίντεο με τη δική σας φωνή χρησιμοποιώντας Avatar για τη διαμόρφωση μιας ψηφιακής εκδοχής του εαυτού σας, ώστε να μπορείτε να παράγετε βίντεο που μοιάζουν και ακούγονται σαν εσάς. Όσον αφορά την επεξεργασία βίντεο για την αλλαγή ήχου και ομιλίας, πέρα από τη λειτουργία Avatar, βρισκόμαστε ακόμα σε στάδιο δοκιμών, ώστε να κατανοήσουμε πώς μπορούμε να διαθέσουμε αυτή τη δυνατότητα στους χρήστες με υπευθυνότητα.
Όλα τα βίντεο που δημιουργούνται με το Omni περιλαμβάνουν το αόρατο ψηφιακό υδατογράφημα SynthID. Μπορείτε εύκολα να επαληθεύσετε ότι τα βίντεο έχουν δημιουργηθεί με το Gemini Omni μέσω της εφαρμογής Gemini, του Gemini στο Chrome και της Αναζήτησης Google. Μπορείτε να μάθετε περισσότερα σχετικά με το πώς επεκτείνουμε τα εργαλεία διαφάνειας και επαλήθευσης περιεχομένου, ώστε να σας βοηθήσουν να κατανοήσετε πώς δημιουργήθηκε και επεξεργάστηκε το περιεχόμενο στο διαδίκτυο, στην ανάρτηση ιστολογίου μας.
Δοκιμάστε το Gemini Omni τώρα
Σήμερα, παρουσιάζουμε το πρώτο μοντέλο της οικογένειας Omni — το Gemini Omni Flash. Το Gemini Omni Flash είναι διαθέσιμο σήμερα σε όλους τους συνδρομητές Google AI Plus, Pro and Ultra παγκοσμίως μέσω της εφαρμογής Gemini και του Google Flow. Κυκλοφορεί επίσης από αυτή την εβδομάδα, χωρίς κόστος προς τους χρήστες, στο YouTube Shorts and YouTube Create App.
Τις επόμενες εβδομάδες, θα διατεθεί επίσης σε προγραμματιστές και εταιρικούς πελάτες μέσω API.