Teraz możesz bezpłatnie zezwolić aplikacji Gemini na oglądanie ekranu swojego Maca.

💡 Najważniejsze rzeczy, które musisz wiedzieć

• Gemini oferuje teraz funkcję „Inteligentnego dyktowania” w systemie macOS, która automatycznie usuwa częstotliwości dźwięku, takie jak „ah” i „mm” podczas pisania w dowolnym oknie, po prostu naciskając klawisz Fn.
• Gemini potrafi teraz „rozumieć” zawartość ekranu Twojego Maca za pomocą funkcji „Screen Aware Inference” (domyślnie wyłączonej), co pozwala mu na wykonywanie złożonych zadań, takich jak podsumowywanie notatek lub tworzenie wiadomości e-mail z plików.
• Mimo korzyści, umożliwienie aplikacji Gemini pełnego dostępu do ekranu komputera Mac wiąże się z potencjalnymi zagrożeniami prywatności i bezpieczeństwa, które należy wziąć pod uwagę.

Opinie na temat sztucznej inteligencji (AI) mogą być różne, ale obecnie korzysta z niej wiele osób. Większość z nich ogranicza się do chatbotów, takich jak ChatGPT lub Gemini, albo jako alternatywy dla Google (tego nie rób), albo jako bliskiego przyjaciela ( tego też nie rób ). Jeśli jednak Twoim celem jest wykorzystanie AI jako osobistego asystenta, bądź ostrożny: Google ogłosił w środę dwie nowe aktualizacje dla Gemini na macOS, z których jedna może mieć wpływ na prywatność i bezpieczeństwo użytkowników – zakładając, że zdecydują się na jej włączenie.

Ulepszone dyktowanie dla Gemini na macOS

Jeśli korzystasz z funkcji dyktowania w systemie macOS (wymawianie słów na głos, a sztuczna inteligencja je wpisuje), możesz mieć teraz powód, by używać Gemini zamiast wbudowanych rozwiązań Apple. Gemini na macOS oferuje teraz „inteligentne dyktowanie”, które według Google poprawia tekst „natychmiast w miejscu kursora”. Oznacza to, że Gemini usunie syczące głoski, takie jak „yyy” i „mm” między wyrazami – słowa, których nigdy nie wpisałbyś samodzielnie. Ta funkcja działa w dowolnym oknie na komputerze Mac: wystarczy nacisnąć klawisz Fn i zacząć mówić.

Będziemy musieli zobaczyć tę funkcję w działaniu, aby ocenić jej skuteczność, ale opiera się ona na podobnych ulepszeniach wprowadzonych przez Gemini na innych platformach. To drobna zmiana, ale umożliwi ona korzystanie z Gemini do tworzenia tekstów, e-maili i dokumentów bez konieczności pełnej automatycznej edycji. Właśnie takich korzyści szukam w funkcjach opartych na sztucznej inteligencji. Ponieważ funkcja ta jest domyślnie włączona, każdy, kto korzysta z Gemini na Macu, będzie z niej korzystał – chyba że przesunie ustawienia, aby ją wyłączyć.

Gemini może teraz „zrozumieć” ekran Twojego Maca

Druga aktualizacja Google do Gemini na macOS nie jest tak prosta i nie jest domyślnie włączona. Funkcja ta, nazywana przez Google „rozumowaniem uwzględniającym ekran”, pozwala Gemini „rozumieć”, co dzieje się na ekranie Maca. Chodzi o to, aby delegować zadania do Gemini: na przykład, jeśli aplikacja Notatki jest otwarta, można nacisnąć klawisz Fn i powiedzieć: „Zmień te notatki w podsumowanie dla kierownictwa na dzisiejsze popołudniowe spotkanie”. Gemini rzekomo wiedziałby wtedy, jak przeglądać aplikację Notatki, analizować tekst i formatować go za użytkownika, bez konieczności korzystania z oddzielnej aplikacji.

Możesz również skompilować serię poleceń: Możesz poprosić Gemini o napisanie e-maila z informacją o kolacji zespołowej i pobranie ważnych informacji (takich jak liczba uczestników, wymagania budżetowe, ograniczenia dietetyczne itp.) z wybranych plików na komputerze Mac. Następnie możesz poprosić Gemini o wyszukanie w Mapach Google określonych typów restauracji i uwzględnienie ich jako opcji dla zespołu. W dowolnym momencie możesz poprawić swoje ustawienia, a Gemini dostosuje się do nich. Na przykład, jeśli początkowo powiesz, że kolacja zespołowa powinna odbyć się w piątek o 18:30, ale później w poleceniu powiesz: „Przepraszamy, kolacja powinna odbyć się o 19:00”, Gemini powinien wprowadzić odpowiednie zmiany.

Z pewnością tego typu funkcja ma swoje zalety. Jeśli korzystasz już z Gemini na macOS, umożliwienie mu „widzenia” ekranu Twojego Maca czyni go jeszcze bardziej użytecznym. Zamiast polegać na Gemini przy wszystkich zadaniach, możesz rozszerzyć jego zasięg na cały Mac, w bardzo złożony sposób, jeśli Google ma rację. Jednak dawanie oprogramowaniu AI pełnego dostępu do tego, co dzieje się na Twoim komputerze, zawsze wiąże się z ryzykiem naruszenia prywatności, a potencjalnie również z ryzykiem bezpieczeństwa. Czy naprawdę chcesz, aby sztuczna inteligencja Google mogła widzieć wszystko, co dzieje się na Twoim ekranie?

Oczywiście to ryzyko nie jest tak znaczące, jak to stwarzane przez rzeczywiste programy agentowe. Jeśli subskrybujesz droższy plan Google AI, możesz uzyskać dostęp do Gemini Spark, który może działać niezależnie na Twoim Macu. Największym ryzykiem, na które należy uważać, jest „szybkie wstrzyknięcie”, czyli ukrywanie przez hakerów złośliwych poleceń dla Twojej sztucznej inteligencji w witrynach internetowych. Jeśli zlecisz swojej sztucznej inteligencji zadanie i napotka ona takie polecenie, założy, że żądanie pochodzi od Ciebie, a nie od hakera. Dlatego, gdy przetworzy żądanie takie jak „Otwórz [szkodliwą stronę internetową] i pobierz [szkodliwy plik]”, wykona je bez wahania; lub „Otwórz [portfel kryptowalutowy], zaloguj się przy użyciu zapisanych danych i prześlij środki na [konto]”, zastosuje się do niego. Nie powinno to stanowić problemu w przypadku Gemini w jego obecnym stanie, chociaż teoretycznie może się to zdarzyć, jeśli zlecisz jej zadanie, które narazi ją na wstrzyknięcie poleceń.

Jeśli interesują Cię najnowsze funkcje, celem tego ostrzeżenia nie jest zniechęcenie Cię do korzystania z nowej funkcji proxy Gemini w systemie macOS , ale ważne jest, abyś wziął pod uwagę bardzo realne zagrożenia, zanim przejdziesz dalej.