Ecco Gemini Omni
L'anno scorso, Nano Banana ha portato l'intelligenza di Gemini nella generazione e nell'editing di immagini. Da allora, ha aiutato milioni di persone a restaurare vecchie foto, realizzare design partendo da schizzi e visualizzare idee in modi prima impensabili. Fin dall'inizio abbiamo progettato Gemini per essere un modello nativamente multimodale e ora stiamo facendo un ulteriore passo avanti.
Vi presentiamo Gemini Omni, il punto d'incontro tra le capacità di ragionamento di Gemini e il potere della creazione. Con Omni, puoi combinare immagini, audio, video e testo come input per generare video di alta qualità basati sulla profonda conoscenza del mondo reale di Gemini. Inoltre, puoi modificare facilmente i tuoi video con una semplice conversazione.
Oggi lanciamo il primo modello della famiglia Omni: Gemini Omni Flash, disponibile nell'app Gemini, in Google Flow e negli YouTube Shorts. Nei prossimi mesi, introdurremo il supporto per altri formati di output, come immagini e audio. Ecco cosa rende Omni così speciale:
Modifica i tuoi video con una semplice conversazione
Omni offre un modo più semplice per editare i video usando il linguaggio naturale. Ogni istruzione si aggiunge alla precedente. I personaggi mantengono la loro coerenza, le leggi della fisica vengono rispettate e la scena memorizza ciò che è avvenuto prima.
Trasforma il mondo intorno a te. Cambia dettagli specifici o rivoluziona l'intera scena. Il tuo video diventa il punto di partenza per qualcosa che non avresti mai potuto filmare dal vivo.
Prompt: Make the sculpture out of bubbles.
Re-immagina l'azione. Prendi un video che hai girato e chiedi a Omni di cambiare ciò che accade. Modifica l'azione, aggiungi nuovi personaggi o oggetti, oppure trasforma un momento in qualcosa di inaspettato.
Perfeziona i tuoi video in più passaggi. Cambia l'ambiente, l'inquadratura, lo stile o persino singoli dettagli, senza mai perdere il filo della scena originale.
Prompt: When the person touches the mirror, make the mirror ripple beautifully like liquid, and the person's arm turns into reflective mirror material.
Prompt: Dim the lights in the room. Put a black and white checkerboard room inside a glass sphere that floats tracking above the hand, inside it contains a recursive representation of the same hand holding the sphere, creating an infinite recursive of rooms. Camera slowly gets closer into the sphere, creating a video loop.
Prompt: The lights of the apartments start turning on in sync with the music.
Refine your videos across multiple turns. Change the environment, angle, style or even specific details, without ever losing the thread of your original scene. Scroll through the carousel to see how edits build on each other.
A video of a violinist playing a song.
Prompt: Transport the violinist to the image environment
Prompt: Change the camera angle to be over the violinist’s shoulder.
Dai vita alle tue idee, con tutta la conoscenza di Gemini
Omni non si limita a costruire scene dall'aspetto realistico: è in grado di ragionare su ciò che dovrebbe accadere. Combina una comprensione intuitiva della fisica con la conoscenza di Gemini in ambiti come storia, scienza e contesto culturale, colmando il divario tra fotorealismo e narrazione significativa.
Crea contenuti visivi con una fisica più accurata. Omni possiede una migliore comprensione intuitiva di forze come gravità, energia cinetica e dinamica dei fluidi, permettendoti di creare scene più realistiche.
Prompt: A marble rolling fast on a chain reaction style track, continuous smooth shot.
Unisci conoscenza e creatività. Omni attinge al sapere di Gemini per connettere linguaggio, immagini e significato in modi che vanno ben oltre la semplice associazione di pattern.
Prompt: The video shows items of the alphabet. An unusual item starting with each letter is shown sitting on a table (like a Capybara for C, disco globe for D and Lava Lamp for L). All 26 letters must be represented by 26 items with matching lower thirds displaying the letter. Only one item and lower third at a time. Each lower third must look like a black marker written on a slip of paper in the bottom left. Rapid fire, roughly 9 frames per item at 24FPS. Last frame is a slip of paper "THE END". The whole video is accompanied by calm smooth music.
Idee complesse diventano visive. Omni può creare video esplicativi coinvolgenti partendo da brevi prompt, generando immagini che semplificano i concetti più complicati.
Prompt: claymation explainer of protein folding, everything is made out of clay, no hands, stop motion, accurate
Crea video da qualsiasi combinazione di input
Usa ogni tipo di riferimento. Omni trasforma qualsiasi riferimento — immagine, testo, video o audio — in un unico output coerente. Sebbene inizialmente per l'audio saranno supportati solo i riferimenti vocali, presto introdurremo altri tipi di input audio.
Prompt: Dynamic sci-fi film style video based on image_0.png. Elements light up similar to video_0.mp4 synchronized to the beat of the music from audio_0.wav
Prompt: Referring to the extreme camera movement, perspective, and distortion in video-0, create a front-facing full-body walk cycle of the character from image-0, quickly style-shifting into multiple visual styles during the walk cycle, starting from realistic cinema. Keep the environment, only change styles. Hard cut backgrounds always centering the sky. Continuous walking, continuous audio, and style shifts in perfect sync to the beat of the audio. Cinematic, 16:9.
Prompt: Add harp sounds synchronized to when I touch each fern leaf. Change the leaf structure to all resemble semi translucent 3d bioluminescent plant life, with bioluminescent fireflies flying around it that react as I play, in sync with the sounds, subtle bokeh depth of field dynamic lighting, reflecting off the walls in the room, keeping the room structure the same
Parti da ciò che hai già. Grazie ai riferimenti di input, puoi utilizzare immagini di personaggi, scenografie o disegni per creare contenuti che rispecchino esattamente la tua visione.
Prompt: Imagine the world gradually changing into retro futuristic style (grainy and moody as image-1) as I walk. Use the audio for a retro-futuristic background music. 10s.
Prompt: turn this into realistic footage, using the drawing only as a guide for movement, do not show the drawing in the final video
Prompt: Apply the pose and motion from input video to provided character from this image. Apply style from image reference to the new video
Applica stili, movimenti, o effetti. Definisci il linguaggio visivo utilizzando riferimenti di input o semplicemente descrivendolo in linguaggio naturale. Omni fonde i riferimenti per creare una clip coerente.
Prompt: edit this keeping everything the same. add animated motion effects coming out of the skateboard
Prompt: Apply the motion of the whale swimming from the provided video to the provided image of fluid reflective material. Do not show the whale or water; instead, have this reflective moving material form a shape that resembles the whale as it swims. Replace water with white smooth material shapes that move
Crea video con il tuo avatar digitale
Prevediamo che tra le richieste di editing video più comuni ci saranno le modifiche ad audio e speech. Stiamo lavorando per testare al meglio questa funzionalità e capire come renderla disponibile agli utenti in modo responsabile. Per iniziare, puoi creare video con la tua voce utilizzando il tuo avatar AI. Gli avatar creano una versione digitale di te stesso, permettendoti di generare video che hanno il tuo aspetto e la tua voce.
Tutti i video creati con Omni includono la nostra filigrana digitale impercettibile SynthID e le credenziali sui contenuti C2PA. Puoi verificare facilmente se i video sono stati generati con Gemini Omni tramite l'app Gemini, Gemini in Chrome e la Ricerca Google. Puoi scoprire di più su come stiamo ampliando i nostri strumenti di trasparenza e verifica dei contenuti leggendo questo post sul nostro blog.
Prova subito Gemini Omni
Gemini Omni Flash è in fase di rilascio da oggi per tutti gli abbonati a Google AI Pro e Ultra a livello globale attraverso l'app Gemini e Google Flow. A partire da questa settimana, sarà disponibile gratuitamente anche per gli utenti di YouTube Shorts e dell'app YouTube Create.
Nelle prossime settimane, lo renderemo disponibile anche per sviluppatori e clienti aziendali tramite API.
