Gemini macht Smart Homes jetzt noch intelligenter

Wir arbeiten daran, Smart-Home-Funktionen sowohl für Entwickler*innen als auch Nutzer*innen zu verbessern. Im Rahmen dessen haben wir auch auf der Google I/O unsere Plattform für Entwickler*innen geöffnet, damit sie neue nutzerfreundliche Funktionen entwickeln können. Denn die multimodalen Gemini-Modelle von Google eröffnen Nutzer*innen im Alltag völlig neue Möglichkeiten.

Heute stellen wir den Nachfolger eines unserer beliebtesten Produkte vor: den Google TV Streamer. Und wir möchten euch zeigen, wie Gemini unsere Geräte noch smarter und nützlicher macht – angefangen bei Kameras und Heimautomatisierung. Darüber hinaus nutzen wir Gemini-Modelle dazu, dass sich Google Assistant auf Nest-Lautsprechern und -Displays auf natürlichere Weise verwenden lässt und noch nützlichere Funktionen bietet.

Nest-Geräte und Smart-Home-Funktionen sind jetzt noch smarter – mit Hilfe von Gemini

Immer mehr Menschen nutzen smarte Überwachungskameras und im Laufe der Zeit sind die Kameras immer intelligenter geworden – von der einfachen Bewegungserkennung über die Erkennung von Personen und Paketen bis hin zu fortschrittlicheren KI-Funktionen wie der Erkennung von bekannten Gesichtern (eine Funktion, die es für Smart-Home-Kameras exklusiv bei den Nest-Kameras gibt). Aber selbst mit KI-Unterstützung kann es manchmal schwierig sein, wirklich zu verstehen, was in und um euer Zuhause herum passiert.

Mit den multimodalen Modellen von Gemini, die Videos, Bilder und Text verarbeiten können, sind wir nun in der Lage, die Kameraintelligenz für die Branche neu zu definieren. Mit der Zeit werden eure Nest-Kameras nicht mehr nur eine begrenzte Anzahl spezifischer Dinge verstehen (z. B. Bewegungen, Personen, Pakete usw.), sondern in der Lage sein, ein umfassenderes Verständnis für das zu entwickeln, was sie sehen und hören, um dann das Wichtigste für euch herauszufiltern.

Das bedeutet, dass eure Kamera zum Beispiel nicht nur versteht, dass im Video ein „Tier entdeckt“ wurde, sondern auch, dass „der Hund im Garten gräbt“. Mit diesen neuen KI-Beschreibungen machen die Gemini-Modelle eure Kamera-Clips in der Google Home-App viel nützlicher.

Ihr könnt auch die neue Suchfunktion für die Kameraaktivität in der Google Home-App verwenden, um genau das zu finden, wonach ihr im Haus sucht. Google Home kann euren Kameraverlauf durchsuchen und euch eine Liste mit den relevanten Ereignissen sowie eine hilfreiche Zusammenfassung anzeigen – was bisher einfach nicht möglich war. Dies ist ein enormer Fortschritt für Nest Kameras und wird die Art und Weise, wie ihr Hilfe in eurem Zuhause erhaltet, verändern. Und das alles, während wir sicherstellen, dass eure Daten sicher und privat sind – gemäß unseren Grundsätzen.

Darüber hinaus arbeiten wir daran, Google Home zu einer der leistungsstärksten Plattformen für Heimautomatisierung zu machen. Unser Skript-Editor und die Google Home-App unterstützten schon jetzt über 100 Wege, um euer Smart Home zu verbinden und zu steuern. Bei so viel Auswahl ist es nicht immer einfach, nützliche Automatisierungsoptionen zu finden, die am besten zum eigenen Zuhause passen.

Gemini macht die Automatisierung einfacher, und zwar mit der neuen Funktion „Erstelle für mich“ in der Google Home-App. Damit könnt ihr in einfacher Sprache beschreiben, welche Art der Automatisierung ihr möchtet, und Google Home richtet sie für euch ein.

Tippt oder sagt zum Beispiel: „Schließe die Türen und schalte alle Lichter zur Schlafenszeit aus“, und schon wird eine Automatisierung erstellt. Auch wenn ihr keine genaue Automatisierung im Sinn habt, kann die Home-App euch Vorschläge machen, die auf den Möglichkeiten eurer Geräte basieren.

Google Assistant auf smarten Lautsprechern und Displays wird noch nützlicher

Google Assistant unterstützt bereits Millionen von Nutzer*innen im Alltag. Und anders als bei persönlichen Geräten wie Smartphones müssen Smart-Home-Geräte wie Lautsprecher und Displays für jedes Mitglied eines Haushalts funktionieren. Wie bereits erwähnt, stehen Qualitätsverbesserungen dieses Jahr im Fokus. Wir nutzen Large Language Models, um nützliche Funktionen wie die Musikwiedergabe und das Einstellen von Timern zu optimieren. Später in diesem Jahr gibt es außerdem eine Auswahl an neuen Stimmen für Google Assistant, damit sich die Nutzung noch individueller und natürlicher anfühlt.

In Sachen Sprachbefehle eröffnet Gemini völlig neue Möglichkeiten. Wir nutzen Gemini-Modelle, um Google Assistant auf Nest-Lautsprechern und -Displays zukünftig weiter zu verbessern, noch nützlichere Funktionen zu bieten und die Bedienung natürlicher zu gestalten. Google Assistant wird Nutzer*innen noch besser verstehen können, damit sie auf natürliche Weise kommunizieren und ganz einfach Folgefragen stellen können.

Ihr werdet euch ganz normal mit Google Assistant unterhalten können, ohne auf eine bestimmte Formulierung zu achten. Wenn ihr zum Beispiel fragt: „Ist Pluto ein Planet?“, könnt ihr mit „Kann sich die Klassifizierung auch wieder ändern?“ nach weiteren Informationen fragen. Auch in Diskussionen oder Brainstormings kann Google Assistant dank der generativen KI-Funktionen von Gemini Argumente oder Ideen beisteuern.

Diese Verbesserungen werden Ende des Jahres in einer öffentlichen Preview für Nest Aware-Abonnent*innen eingeführt. Wir sind überzeugt, dass wir mit der Gemini-Technologie innovative Smart-Home-Funktionen entwickeln können – dabei legen wir großen Wert darauf, eure Privatsphäre zu respektieren.