Guided Vision in Gemini Live: Google beschreibt Kamerabilder in Echtzeit
Veröffentlicht am: 02.10.2026 um 01:11 Uhr | Redaktion boerse-global.de
Google hat die Einführung von Guided Vision in Gemini Live für kompatible Android-Geräte bekannt gegeben. Wie aus Berichten vom 1. Oktober 2026 hervorgeht, liefert die neue Funktion Echtzeit-Sprachbeschreibungen des Kamerabilds, um blinde, sehbehinderte oder anderweitig unterstützungsbedürftige Personen im Alltag zu begleiten.
Kernfunktionen und interaktive Hilfestellungen
Das System ist darauf ausgelegt, vier zentrale Aufgabenbereiche abzudecken. Dazu gehören das Lesen von kleinen Textpassagen, die allgemeine Beschreibung der Umgebung sowie das Finden und Identifizieren von Objekten.
Darüber hinaus kann die Anwendung detaillierte Informationen zu einzelnen Gegenständen liefern. Nutzer haben die Möglichkeit, gezielte Rückfragen zu stellen, um beispielsweise das Ablaufdatum auf einer Produktverpackung vorgelesen zu bekommen.
Ein wesentliches Merkmal der Anwendung ist die aktive Kameraführung. Sollte sich ein gesuchtes Objekt außerhalb des aktuellen Sichtfelds befinden, gibt Gemini gesprochene Hinweise zur korrekten Ausrichtung der Kamera. Das System weist Nutzer beispielsweise an, das Smartphone nach rechts zu schwenken, nach unten zu neigen oder einen Schritt zurückzutreten, um den gewünschten Bereich optimal zu erfassen.
Technische Umsetzung und Kooperation mit Aira
Die Textverarbeitung der Funktion umfasst laut Google-Support kleine Etiketten, komplexe Beschilderungen, Beschreibungen in Menüs sowie Anzeigen auf Gerätedisplays. Technisch kommen hierfür On-Device-OCR (optische Zeichenerkennung) und Live-Video-Modelle zum Einsatz. Der Hersteller merkt jedoch an, dass die Genauigkeit der Erkennung bei sehr kleinen Schriften, Blendeffekten, gewölbten Oberflächen oder geringem Kontrast sinken kann.
Guided Vision entstand in enger Zusammenarbeit mit Aira. Die Entwicklung stützt sich auf die Auswertung von zehntausenden Stunden visueller Interpretation und die Einbindung von mehr als 1.000 Testern. Zudem waren spezialisierte Fachkräfte beteiligt, um Sicherheitsvorkehrungen, sogenannte Safety Guardrails, zu implementieren.
Viele Menschen merken erst spät, wenn ihre Sehkraft im Alltag nachlässt. Dieser kostenlose 3-Minuten-Test ermöglicht Ihnen eine schnelle Einschätzung Ihrer Augenfitness bequem von zu Hause aus. Sehtest ohne Arzttermin jetzt online machen
Die Funktion wurde bereits in verschiedenen Regionen und Sprachen getestet, unter anderem in Brasilien, Indien, Japan, Indonesien und Singapur, wobei die Zusammenarbeit mit lokalen Gemeinschaften von Menschen mit Sehbehinderungen im Fokus stand.
Systemvoraussetzungen und Sicherheitsrelevanz
Der Zugriff auf Guided Vision kann auf verschiedenen Wegen erfolgen. Neben dem Start über die Gemini-App oder per Sprachbefehl lässt sich die Funktion über den Android Accessibility Shortcut aktivieren. Dieser kann in den Einstellungen ab der Betriebssystemversion Android 9 konfiguriert werden.
Zudem ist die Steuerung über TalkBack mittels einer Drei-Finger-Geste möglich. Eine erste Vorschau auf das Feature wurde bereits im Rahmen des Android-Updates im September 2026 präsentiert.
Wer moderne Hilfsfunktionen auf seinem Smartphone nutzt, sollte auch die grundlegende Sicherheit seines Geräts im Blick behalten. Ein kostenloser Ratgeber zeigt Ihnen in fünf einfachen Schritten, wie Sie Ihr Android-System effektiv vor unbefugten Zugriffen schützen. 5 Schutzmaßnahmen für Ihr Smartphone entdecken
Trotz der technologischen Fortschritte warnt Google ausdrücklich vor einer missbräuchlichen Verwendung. Guided Vision sei kein Medizinprodukt und kein Ersatz für anerkannte Mobilitätshilfen wie einen Blindenstock. Die Anwendung dürfe nicht für die Navigation, eine sichere Reiseführung oder die Erkennung von Hindernissen im öffentlichen Raum genutzt werden, da das System Fehler machen könne.
In Branchenkreisen wird die Neuerung oft mit Apples VoiceOver Live Recognition verglichen, das auf dem iPhone und der Vision Pro zum Einsatz kommt. Verfügbar ist Guided Vision auf Geräten mit Android 9 oder neuer in allen Regionen, in denen Gemini Live offiziell unterstützt wird.
