Gemini będzie mógł "podglądać" twoje życie. Google wraca do projektu Gemini Live

Gemini Live to najnowsze dziecko Google, które łączy w sobie moc sztucznej inteligencji z możliwościami kamery w smartfonie. To funkcja, która pozwala modelowi językowemu Gemini na analizę obrazu z kamery urządzenia w czasie rzeczywistym. Użytkownik może zadawać pytania dotyczące obiektów widocznych w kadrze, a Gemini udzieli odpowiedzi, bazując na swojej wiedzy i zrozumieniu kontekstu.

Nowe funkcje Gemini Live mają przede wszystkim praktyczny wymiar. Zwiedzając nowe miasto, będziemy mogli skierować telefon na zabytek i dowiedzieć się o nim wszystkiego, od daty powstania po ciekawostki historyczne. Rozpoznawać gatunki roślin na spacerze w parku, czy pomóc naprawić odtwarzacz wideo, wyświetlając instrukcję krok po kroku. Gemini Live będzie mógł opisywać otoczenie osobom z wadami wzroku, ułatwiając im poruszanie się i interakcję ze światem.

Projekt Astra

Gemini Live jest integralną częścią Projektu Astra, demonstrując jego potencjał w zakresie interakcji wideo w czasie rzeczywistym. Projekt Astra to z kolei szersza inicjatywa, której celem jest stworzenie uniwersalnego agenta AI. Agent ten ma być zdolny do rozumienia otoczenia, interakcji z użytkownikiem i wykonywania różnorodnych zadań, wykorzystując do tego możliwości wyszukiwarki Google, Map Google i Google Lens.

Gemini Live był kilkukrotnie zapowiadany na konferencjach Google'a, ale dopiero teraz projekt będzie dostępny dla szerokiego grona użytkowników. Google ogłosiło wprowadzenie nowych funkcji Gemini Live dla subskrybentów Gemini Advanced w ramach planu Google One AI Premium na urządzeniach z Androidem jeszcze w marcu.