Google, kör ve az gören Android kullanıcılarına telefon kamerasının baktığı her şeyin gerçek zamanlı sesli betimlemesini sunan Gemini Live özelliği Guided Vision'ı başlattı.

1 Ekim'de uyumlu Android cihazlar için duyurulan ve kör ile az gören topluluğuyla birlikte geliştirilen Guided Vision, Gemini Live içinde kamerayı paylaşarak çalışıyor. Asistan çevreyi betimliyor, küçük yazıları okuyor, nesneleri tanımlıyor ve ek soruları yanıtlıyor — örneğin az önce bulmasına yardım ettiği bir ürünün son kullanma tarihini okumasını isteyebiliyorsunuz. Kullanıcı kadrajda olmayan bir şeyi sorduğunda Google, Gemini'ın kamerayı hizalamak için sesli ipuçları verdiğini söylüyor.

Özelliğe Gemini uygulamasından, Google'ın TalkBack ekran okuyucusundan ya da Android 9 ve üzeri cihazlarda Ayarlar'daki erişilebilirlik kısayolundan ulaşılabiliyor; bu, daha önceki bir Pixel özellik güncellemesinin ardından geldi. Özellik, iPhone ve Vision Pro'daki VoiceOver Live Recognition'ın Android karşılığı.

Google sınırlar konusunda temkinli. Kullanıcılara Guided Vision'a navigasyon, güvenli seyahat rehberliği veya engel algılama için güvenmemelerini, baston ya da başka bir hareket yardımcısının yerine koymamalarını söylüyor. Bu uyarı, dünyada hareket eden biri için kendinden emin biçimde yanlış bir betimlemenin ne kadar ağır sonuçları olabileceğini kabul ediyor. Lansman ayrıca kamera tabanlı asistanlar için bilinen bir soruyu da keskinleştiriyor: yararlılığı sürekli kamera erişimine bağlı bir özellik, işlediği çevre açısından ne anlama geliyor?