Aplikacja Zdjęcia firmy Apple zawiera wiele funkcji, które pomagają znaleźć obrazy w bibliotece i dowiedzieć się więcej o tym, co jest na nich widoczne. Jedna z tych funkcji nosi nazwę Ulepszone wyszukiwanie wizualne. Oto, jak to działa i jak Apple chroni Twoją prywatność, gdy z niego korzystasz.
Wyszukiwanie wizualne a ulepszone wyszukiwanie wizualne
Jednym z kluczowych rozróżnień, jakie należy wprowadzić, jest różnica między ulepszonym wyszukiwaniem wizualnym a funkcją wizualnego wyszukiwania firmy Apple. Funkcja Visual Look Up została wprowadzona w systemie iOS 15 i pozwala użytkownikom identyfikować obiekty, punkty orientacyjne, rośliny i nie tylko w aplikacji Zdjęcia.
Możesz na przykład przesunąć palcem w górę po obrazie w aplikacji Zdjęcia, aby dowiedzieć się, jaka rasa psa jest przedstawiona na obrazku. Potrafi choćby rozpoznać takie rzeczy, jak instrukcje dotyczące prania na ubraniach i tym podobne oznaczają losowe symbole na desce rozdzielczej samochodu.
Ulepszone wyszukiwanie wizualne istnieje niezależnie od wyszukiwania wizualnego. Podczas gdy funkcja wizualnego wyszukiwania pomaga znaleźć szczegóły na pojedynczym zdjęciu, na które już patrzysz, ulepszone wyszukiwanie wizualne pomaga znaleźć Wszystko zdjęcia w bibliotece podczas wyszukiwania punktu orientacyjnego lub miejsca. Ta funkcja działa choćby wtedy, gdy zdjęcia nie zawierają danych geolokalizacyjnych.
Możesz na przykład przeszukać swoją bibliotekę pod kątem „Most Golden Gate” i wyświetlić odpowiednie obrazy z biblioteki. Ta funkcja działa choćby wtedy, gdy punkt orientacyjny w tle obrazu jest rozmazany i nieostry.
W jaki sposób ulepszone wyszukiwanie wizualne chroni Twoją prywatność?
Na początku tego miesiąca nagłówki krążyły po gazetach o tym, jak ulepszone wyszukiwanie wizualne wysyła informacje o Twojej lokalizacji do firmy Apple, aby pomóc Ci znaleźć te punkty orientacyjne i interesujące. W aplikacji Ustawienia Apple mówi: „Pozwól temu urządzeniu na prywatne dopasowywanie miejsc na Twoich zdjęciach dzięki globalnego indeksu prowadzonego przez firmę Apple, dzięki czemu możesz wyszukiwać według niemal każdego punktu orientacyjnego”.
To naturalnie rodziło pytania o konsekwencje dla prywatności – szczególnie w przypadku funkcji polegającej na rezygnacji, a nie wyrażeniu zgody.
Firma Apple ma jednak dobrze przemyślany system ochrony prywatności, który według niego chroni Twoje dane, gdy zacznie działać ulepszone wyszukiwanie wizualne.
Proces ten rozpoczyna się od tak zwanego szyfrowania homomorficznego, które działa w następujący sposób:
- Twój iPhone szyfruje zapytanie przed wysłaniem go na serwer.
- Serwer działa na zaszyfrowanym zapytaniu i generuje odpowiedź.
- Odpowiedź jest wysyłana z powrotem do Twojego iPhone’a, gdzie zostaje odszyfrowana.
Co ważne, w implementacji Apple klucz deszyfrujący mają tylko Twoje urządzenia, a nie serwer. Serwer nie jest zatem w stanie odszyfrować pierwotnego żądania. Apple używa szyfrowania homomorficznego do różnych funkcji, w tym do ulepszonego wyszukiwania wizualnego.
Firma Apple wykorzystuje również usługę zwaną prywatnym wyszukiwaniem najbliższych sąsiadów (PNNS) w celu ulepszenia wyszukiwania wizualnego. Ta funkcja umożliwia urządzeniu użytkownika prywatne wysyłanie zapytań do „globalnego indeksu popularnych punktów orientacyjnych i ciekawych miejsc prowadzonych przez firmę Apple w celu znalezienia przybliżonych dopasowań do miejsc przedstawionych w jego bibliotece zdjęć”.
Oto pełny proces żądania ulepszonego wyszukiwania wizualnego, zgodnie z opisem firmy Apple na swojej stronie internetowej poświęconej uczeniu maszynowemu:
- Model uczenia maszynowego wbudowany w urządzenie analizuje zdjęcie, aby określić, czy istnieje „obszar zainteresowania”, czyli ROI, który może zawierać punkt orientacyjny.
- Jeśli model wykryje ROI, oblicza „osadzanie wektora” dla tej części obrazu.
- To osadzanie wektorów jest następnie szyfrowane i wysyłane do bazy danych serwera. Zdjęcie i piksele nie są wysyłane do Apple, ale raczej matematyczna reprezentacja tego „obszaru zainteresowania”.
- Apple korzysta z prywatności różnicowej w połączeniu z przekaźnikiem OHTTPobsługiwanego przez stronę trzecią, w celu ukrycia adresu IP urządzenia, zanim żądanie dotrze do serwerów Apple.
- Klient wysyła także „fałszywe zapytania obok prawdziwych, więc serwer nie jest w stanie stwierdzić, które są prawdziwe”. Ponadto zapytania są kierowane przez sieć anonimizacji, aby mieć pewność, iż serwer nie będzie mógł połączyć wielu żądań z tym samym klientem.
- Serwer identyfikuje odpowiednią część osadzania i zwraca do urządzenia odpowiednie metadane, takie jak nazwy punktów orientacyjnych. Serwer nie przechowuje danych po zwróceniu wyników do Twojego iPhone’a.
To dużo słów i akronimów, ale potwierdza twierdzenia Apple, iż firma nie może dowiedzieć się niczego na temat informacji zawartych na Twoich zdjęciach.
Możesz wyłączyć ulepszone wyszukiwanie wizualne, przechodząc do aplikacji Ustawienia, klikając „Aplikacje”, a następnie „Zdjęcia”. Przewiń w dół, gdzie znajduje się przełącznik Ulepszone wyszukiwanie wizualne. Apple twierdzi, iż tego przełącznika należy używać przede wszystkim w strefach o małej przepustowości.
Dalsza lektura na temat ulepszonego wyszukiwania wizualnego:
Podążaj za Chancem: Wątki, Błękitny,
I Mastodont.
FTC: Korzystamy z automatycznych linków partnerskich generujących dochód. Więcej.
