Gemini Live teraz doradzi, gdzie skierować kamerę. Guided Vision pomoże także z drobnym drukiem

Skierowanie telefonu na przedmiot może nie wystarczyć. Kamera może kadrować zbyt wysoko, być za blisko lub celować obok. Właśnie w tym ma pomóc Guided Vision, nowość, którą Google uruchamia w Gemini Live na kompatybilnych urządzeniach z Androidem. Oprócz opisu tego, co widzi kamera, zaoferuje także instrukcje głosowe dotyczące dostosowania kadru. Powstała przede wszystkim dla użytkowników niewidomych i niedowidzących.

Telefon powie, kiedy opuścić lub przesunąć kamerę

Po włączeniu Guided Vision wystarczy udostępnić kamerę w rozmowie z Gemini Live. Asystent może poprosić o powolne obrócenie w prawo, opuszczenie telefonu lub krok w tył, aby uzyskać lepszy widok na to, o co pytasz. Opis otoczenia można uzupełnić dodatkowymi pytaniami; nie chodzi tylko o jednorazowe odczytanie zawartości obrazu.

To jest najciekawsze w nowości: pomoc dotyczy nie tylko rozpoznawania przedmiotu, ale także samego znajdowania właściwego kadru. Dla osoby, która nie widzi dobrze obrazu na wyświetlaczu, ta część może być kluczowa.

Od panelu pralki po słuchawkę na podłodze

Google podaje konkretne przykłady z gospodarstwa domowego: odczytywanie drobnych informacji żywieniowych na opakowaniach produktów spożywczych, rozróżnianie pozycji pokrętła urządzenia lub programów prania. Poza domem funkcja może pomóc z drukowanym menu w restauracji. Wykorzystanie nie musi więc ograniczać się do osób z wadami wzroku; drobny druk przy słabym oświetleniu może sprawić trudności także innym.

Inne scenariusze obejmują szukanie upuszczonej słuchawki na podłodze lub pieprzu wśród przypraw. Gemini ma także opisywać kolory, wzory i kształty ubrań lub przybliżać układ nieznanego pomieszczenia. Podczas ubierania się można więc zapytać go na przykład o kolor konkretnej kurtki lub o połączenie koszuli w paski ze spodniami.

Google współpracował przy rozwoju z usługą Aira i jej społecznością testerów. Specjaliści pomagali także w ustaleniu granic bezpieczeństwa. Mają one jasną granicę: Guided Vision może się mylić i nie jest przeznaczona do nawigacji, wykrywania przeszkód ani jako zamiennik białej laski.

Jak włączyć i szybko uruchamiać Guided Vision

W aplikacji mobilnej Gemini otwórz ustawienia poprzez swój profil i włącz przełącznik „Use Guided Vision in Live”. Następnie uruchom Gemini Live i udostępnij kamerę. Google podaje wsparcie dla Androida 9 i nowszych w regionach i językach, gdzie działa Gemini Live (czyli także u nas w Czechach); zaleca aktualizację aplikacji Gemini oraz systemu.

Do wielokrotnego użytku w ustawieniach Androida w sekcji Dostępność i pomoc dla wzroku można ustawić skrót Guided Vision. Uruchamianie może wtedy zapewnić pływający przycisk dostępności, gest przeciągnięcia dwoma palcami lub naciśnięcie obu przycisków głośności. Użytkownicy TalkBacka mogą stuknąć trzema palcami, aby otworzyć jego menu i wybrać Guided Vision bezpośrednio z niego.

W czym głosowa pomoc przez kamerę najbardziej ułatwiłaby Ci dzień?

Źródła: blog.google, androidauthority.com