Η κάμερα του κινητού χρησιμοποιείται συνήθως για φωτογραφίες και βίντεο. Με τις νέες δυνατότητες τεχνητής νοημοσύνης, όμως, μπορεί να χρησιμοποιηθεί και ως μέσο περιγραφής του περιβάλλοντος.
Η Google παρουσιάζει τη λειτουργία Guided Vision, η οποία συνδέεται με το Gemini Live και μπορεί να χρησιμοποιήσει την κάμερα του κινητού για να περιγράψει αυτό που βρίσκεται μπροστά από τον φακό. Η δυνατότητα έχει σχεδιαστεί ιδιαίτερα με γνώμονα ανθρώπους που είναι τυφλοί ή έχουν χαμηλή όραση.
Ένα πιθανό παράδειγμα είναι η ανάγνωση μικρών γραμμάτων σε μια ετικέτα προϊόντος. Ο χρήστης μπορεί να δείξει την ετικέτα στην κάμερα και να ζητήσει βοήθεια για το τι αναγράφεται. Παρόμοια χρήση μπορεί να γίνει σε ένα μενού εστιατορίου ή για την αναγνώριση ενός αντικειμένου μέσα σε έναν χώρο.
Η λειτουργία μπορεί επίσης να δίνει φωνητικές οδηγίες για το πώς να τοποθετηθεί καλύτερα η κάμερα. Αν το αντικείμενο δεν βρίσκεται σωστά στο κάδρο, το σύστημα μπορεί να ζητήσει από τον χρήστη να μετακινήσει ή να περιστρέψει το κινητό.
Η ενεργοποίηση μπορεί να γίνει, όπου είναι διαθέσιμη, από τις σχετικές ρυθμίσεις του Gemini ή από τις επιλογές προσβασιμότητας. Η Google αναφέρει ότι η Guided Vision έρχεται σε συσκευές με Android 9 ή νεότερο σε χώρες όπου είναι διαθέσιμο το Gemini.
Υπάρχει όμως ένας σημαντικός περιορισμός: η ίδια η Google επισημαίνει ότι η λειτουργία μπορεί να κάνει λάθη. Δεν πρέπει να χρησιμοποιείται ως εργαλείο πλοήγησης ή για την αναγνώριση εμποδίων στον δρόμο.
Η χρησιμότητά της βρίσκεται κυρίως στην παροχή πληροφοριών σχετικά με όσα βλέπει η κάμερα. Πρόκειται για ένα ακόμη παράδειγμα του τρόπου με τον οποίο η τεχνητή νοημοσύνη μετατρέπει την κάμερα από απλό αισθητήρα εικόνας σε εργαλείο αλληλεπίδρασης με το περιβάλλον.
