Google lancia nuove funzionalità per Gemini, ora in grado di interpretare video in tempo reale e leggere lo schermo del dispositivo. Ecco le novità!

Nuove funzionalità per l’intelligenza artificiale targata Google. Mountain View ha infatti iniziato a rilasciare nuove funzionalità per Gemini, il suo assistente AI, che ora può analizzare e rispondere in tempo reale ai contenuti visualizzati sullo schermo o attraverso la fotocamera del dispositivo.

L’innovazione, derivata dal “Project Astra”, è stata segnalata per la prima volta da un utente su Reddit, che ha condiviso un video dimostrativo della nuova funzione su uno smartphone Xiaomi.

A short demo of Project Astra (Share screen with Live)
byu/Kien_PS inBard

L’implementazione è destinata agli utenti abbonati al piano Google One AI Premium, che include l’accesso a Gemini Advanced. Grazie a questa novità, l’assistente può fornire suggerimenti, leggere testi visualizzati sullo schermo e rispondere in modo più contestualizzato rispetto alle versioni precedenti.

Gemini e il video in tempo reale: un passo avanti per l’AI di Google

Oltre alla lettura dello schermo, Google ha introdotto la funzione di analisi video in tempo reale, permettendo a Gemini di elaborare immagini catturate dalla fotocamera dello smartphone e fornire risposte basate su ciò che “vede”.

Un esempio pratico mostrato in una dimostrazione targata Google riguarda la scelta del colore per un oggetto smaltato, con l’utente che ha ricevuto consigli direttamente dall’assistente AI.

Questa mossa posiziona Google in vantaggio rispetto ai principali concorrenti nel settore degli assistenti virtuali. Amazon, con il futuro rilascio di Alexa Plus, e Apple, che ha posticipato il miglioramento di Siri, potrebbero restare indietro rispetto all’integrazione sempre più avanzata di AI nei dispositivi mobili. Intanto, Samsung continua a collaborare con Google per utilizzare Gemini come assistente predefinito sui suoi smartphone, consolidando ulteriormente la leadership dell’azienda di Mountain View.