Rzeczywiście, kiedy dziś rano sprawdzałem iPhone’a 15 Pro, przełącznik był włączony. Możesz to znaleźć, wybierając Ustawienia > Zdjęcia (lub Ustawienia systemowe > Zdjęcia na komputerze Mac). Ulepszone wyszukiwanie wizualne umożliwia wyszukiwanie punktów orientacyjnych, którym zrobiłeś zdjęcia, lub wyszukiwanie tych obrazów przy użyciu nazw tych punktów orientacyjnych.
Aby zobaczyć, co umożliwia aplikacja Zdjęcia, przesuń palcem w górę po zrobionym zdjęciu budynku i wybierz „Wyszukaj punkt orientacyjny”, a pojawi się karta, która idealnie go zidentyfikuje. Oto kilka przykładów z mojego telefonu:
To z pewnością Katedra Najświętszej Marii Panny w Austin, ale zdjęcie po prawej stronie nie przedstawia klasztoru trapistów, ale budynek ratusza w Dubuque w stanie Iowa.Zrzuty ekranu: Zdjęcia Apple
Na pierwszy rzut oka jest to wygodne rozszerzenie funkcji Visual Look Up aplikacji Photos dostępnej w Apple wprowadzone w iOS 15 która pozwala zidentyfikować rośliny lub, powiedzmy, dowiedzieć się, jakie to są oznaczają symbole na metce do prania. Ale Visual Look Up nie potrzebuje specjalnego pozwolenia na udostępnianie danych Apple i tak jest.
Opis pod przełącznikiem informuje, iż dajesz Apple pozwolenie na „prywatne dopasowywanie miejsc na Twoich zdjęciach do globalnego indeksu prowadzonego przez Apple”. jeżeli chodzi o sposób, szczegóły znajdują się w pliku Blog badawczy Apple dotyczący uczenia maszynowego o ulepszonym wyszukiwaniu wizualnym, do którego Johnson prowadzi link:
Proces rozpoczyna się od modelu ML na urządzeniu, który analizuje dane zdjęcie w celu ustalenia, czy istnieje „obszar zainteresowania” (ROI), który może zawierać punkt orientacyjny. jeżeli model wykryje ROI w domenie „punktu orientacyjnego”, obliczane jest osadzanie wektora dla tego obszaru obrazu.
Według bloga to osadzanie wektorów jest następnie szyfrowane i wysyłane do Apple w celu porównania z bazą danych. Firma oferuje bardzo techniczne wyjaśnienie osadzania wektorów w artykuł badawczyAle IBM ujął to prościejpisząc, iż osadzanie przekształca „punkt danych, taki jak słowo, zdanie lub obraz, w plik N-wymiarowa tablica liczb reprezentujących charakterystykę tego punktu danych.”
Podobnie jak Johnson nie do końca rozumiem blogi badawcze Apple, a Apple nie odpowiedział od razu na naszą prośbę o komentarz w sprawie obaw Johnsona. Wygląda na to, iż firma dołożyła wszelkich starań, aby zachować prywatność danych, częściowo poprzez kondensację danych obrazu do formatu czytelnego dla modelu ML.
Mimo to włączenie opcji przełączania, na przykład umożliwiającej udostępnianie danych analitycznych, nagrań lub interakcji z Siri, zamiast czegoś, co użytkownicy muszą odkryć, wydaje się lepszym rozwiązaniem.
