Googles visuelle KI scannt Kamera und Display

Der neue Super-Assistent erkennt in Echtzeit, was du auf dem Bildschirm oder vor der Linse hast. Eine hilfreiche Gefahr?

Flux Schnell | All-AI.de

Google macht seine Künstliche Intelligenz Gemini noch mächtiger: Der digitale Assistent kann nun in Echtzeit den Smartphone-Bildschirm analysieren und sogar durch die Kamera „sehen“. Was bedeutet diese neue Fähigkeit aber wirklich für die Nutzer?

Der Sprung von Sprachverständnis zur visuellen Intelligenz

Bisher konnten digitale Assistenten vor allem zuhören und sprechen. Jetzt erweitert Google die Grenzen: Gemini versteht nicht nur Wörter, sondern erfasst und interpretiert auch visuelle Informationen. Nutzer können beispielsweise eine komplizierte App oder ein Dokument auf dem Bildschirm öffnen und direkt fragen, was zu tun ist – Gemini gibt dann sofort kontextbezogene Antworten.

Noch beeindruckender ist die Integration der Smartphone-Kamera. Ein von Google veröffentlichtes Beispiel zeigt, wie jemand ein frisch glasiertes Keramikstück filmt und Gemini fragt, welche Farbtöne dazu passen. Die KI erkennt dabei sogar Lichtverhältnisse und Oberflächenbeschaffenheit, bevor sie Designvorschläge macht. Was heute nach spielerischem Experiment klingt, könnte morgen schon unser tägliches Leben verändern.

Wer darf Gemini sehen lassen?

Derzeit können nur Abonnenten des kostenpflichtigen „Google One AI Premium“-Dienstes die neuen Funktionen testen. Erste Berichte stammen von einem Reddit-Nutzer mit einem Xiaomi-Gerät, der die Funktion in Aktion zeigte. Google rollt die Technologie offenbar langsam und kontrolliert aus, auch wenn die technische Grundlage seit dem Projekt Astra im Mai 2024 längst bereitstand.

Ein wichtiger Schritt, nicht bloß ein nettes Feature

Was zunächst wie eine nette Zusatzfunktion wirkt, könnte unseren Alltag radikal vereinfachen. Gemini könnte beispielsweise helfen, beim Einkaufen Produkte schneller zu finden, Menschen mit Einschränkungen unterstützen oder in der Medizin visuelle Diagnosen vereinfachen. Google verschafft sich damit aktuell einen Vorsprung gegenüber Amazon und Apple, deren vergleichbare KI-Plattformen bisher noch zurückliegen.

Datenschutz bleibt die zentrale Herausforderung

Doch neue Fähigkeiten bringen auch neue Herausforderungen mit sich. Ein KI-Assistent, der ständig mitliest und mitschaut, könnte für Unbehagen sorgen – besonders wenn nicht klar ist, wie und wo diese Daten verarbeitet werden. Google verspricht eine lokale Verarbeitung oder explizite Zustimmung zur Nutzung, konkrete Details dazu bleiben allerdings vorerst offen.

Damit Gemini wirklich angenommen wird, muss Google transparent zeigen, wie die Privatsphäre geschützt bleibt und Nutzer jederzeit Kontrolle behalten.