Gemini Live amplia le proprie capacità con una funzione pensata per interpretare ciò che viene inquadrato dalla fotocamera. La novità, chiamata Guided Vision, consente di ricevere descrizioni dell’ambiente circostante e indicazioni vocali per individuare oggetti, leggere testi ridotti o orientarsi tra le informazioni presenti davanti all’obiettivo.
gemini live introduce guided vision
La nuova funzione arriva dopo l’integrazione della condivisione video e dello schermo, che aveva permesso a Gemini Live di analizzare il flusso della fotocamera dello smartphone e i contenuti visualizzati sul display. Con Guided Vision, l’assistente può ora fornire indicazioni più precise su ciò che si trova davanti all’utente, rendendo l’interazione con l’intelligenza artificiale più concreta.
Durante una dimostrazione, la fotocamera viene puntata verso uno scaffale con diverse spezie. Dopo aver chiesto dove si trova l’origano, Gemini Live descrive la scena e guida verso la posizione corretta del prodotto. Il sistema è quindi in grado di supportare la ricerca di oggetti presenti in casa attraverso istruzioni vocali basate sulle immagini acquisite.
guided vision per leggere testi e riconoscere oggetti
Le possibilità di utilizzo non riguardano soltanto la ricerca di articoli domestici. Guided Vision può risultare utile anche in situazioni in cui sia necessario esaminare contenuti difficili da leggere o individuare informazioni all’interno di uno spazio. Tra gli esempi indicati rientrano i menu consultati in un ambiente poco illuminato e le scritte di dimensioni ridotte sulle etichette alimentari.
- Individuazione di oggetti domestici attraverso la fotocamera.
- Lettura delle informazioni in caratteri piccoli presenti sulle confezioni.
- Supporto nella consultazione dei menu in condizioni di scarsa illuminazione.
gemini live guida l’inquadratura con istruzioni vocali
Google ha previsto alcuni accorgimenti per favorire un utilizzo corretto della funzione. Se l’inquadratura non consente di analizzare adeguatamente la scena, Gemini Live fornisce un feedback vocale con indicazioni utili per modificare la posizione della fotocamera.
Il sistema può chiedere di ricomporre l’inquadratura, spostare la visuale lungo lo spazio oppure portare un oggetto al centro dell’immagine. Dopo il corretto posizionamento, è possibile formulare le domande e ottenere le risposte relative a ciò che viene ripreso.
disponibilità di guided vision su android
Guided Vision sarà distribuita prossimamente sugli smartphone con Android 9 o versioni successive, nei Paesi in cui Gemini è disponibile. Una volta attivata, la funzione potrà essere aggiunta alle scorciatoie per l’accessibilità del dispositivo.
L’avvio sarà inoltre possibile direttamente dal menu TalkBack. L’integrazione nei comandi dedicati all’accessibilità permette di raggiungere più rapidamente la funzione e di utilizzarla per ricevere descrizioni e indicazioni vocali durante l’analisi dell’ambiente.
aggiornamento con il september android drop
La distribuzione di Guided Vision è inclusa nel September Android Drop, insieme ad altri aggiornamenti destinati all’ecosistema Android. Il rilascio porta quindi una nuova funzione di Gemini Live orientata alla comprensione delle immagini e all’assistenza durante attività pratiche.
Lascia un commento