Google เปิดตัว Guided Vision ใน Gemini Live สำหรับอุปกรณ์ Android รุ่นที่รองรับ โดยออกแบบมาเพื่อเพิ่มประสิทธิภาพการเข้าถึงเทคโนโลยี (Accessibility) สำหรับผู้พิการทางสายตาหรือผู้มีสายตาเลือนราง ฟีเจอร์นี้ช่วยให้ผู้ใช้สามารถแชร์ภาพจากกล้องแบบเรียลไทม์เพื่อให้ Gemini ช่วยอธิบายสิ่งที่อยู่ตรงหน้าผ่านระบบเสียง พร้อมให้คำแนะนำในการขยับกล้องเพื่อให้ได้มุมภาพที่ชัดเจนขึ้น
การพัฒนานี้เป็นการทำงานร่วมกับชุมชนผู้พิการทางสายตาและ Aira โดยใช้ข้อมูลการตีความภาพรวมหลายหมื่นชั่วโมงเพื่อฝึกฝนโมเดลให้เข้าใจบริบทในโลกจริง ระบบสามารถช่วยในกิจกรรมประจำวัน เช่น การอ่านป้ายฉลากขนาดเล็ก การค้นหาวัตถุที่ทำตก หรือการเลือกชุดเสื้อผ้าที่เหมาะสมกับสีและลวดลาย อย่างไรก็ตาม Google ระบุชัดเจนว่านี่เป็นเพียงเครื่องมือช่วยเหลือเบื้องต้น ไม่ใช่เครื่องมือทางการแพทย์หรืออุปกรณ์ช่วยนำทางทดแทนไม้เท้าขาว
