Приложение Apple Photos использует множество функций, которые помогут вам найти изображения в вашей библиотеке и узнать больше о том, что показано на этих изображениях. Одна из этих функций называется расширенным визуальным поиском. Вот как это работает и как Apple защищает вашу конфиденциальность при его использовании.
Визуальный поиск против расширенного визуального поиска
Одно из ключевых отличий заключается в том, чем расширенный визуальный поиск отличается от функции визуального поиска Apple. Visual Look Up был представлен в iOS 15 и позволяет пользователям идентифицировать объекты, ориентиры, растения и многое другое в приложении «Фотографии».
Например, вы можете провести вверх по изображению в приложении «Фото», чтобы узнать, какая порода собак изображена на изображении. Он даже может распознавать такие вещи, как инструкции по уходу за стиркой на вашей одежде и что означают эти случайные символы на приборной панели вашего автомобиля.
Расширенный визуальный поиск существует отдельно от визуального поиска. В то время как визуальный поиск помогает найти подробную информацию об одной фотографии, которую вы уже просматриваете, расширенный визуальный поиск помогает найти все фотографии в вашей библиотеке при поиске ориентира или места. Эта функция работает, даже если на этих фотографиях нет данных геолокации.
Например, вы можете выполнить поиск в своей библиотеке по запросу «Мост Золотые Ворота» и просмотреть соответствующие изображения из вашей библиотеки. Эта функция работает даже в том случае, если ориентир на заднем плане изображения размыт и не в фокусе.
Как расширенный визуальный поиск защищает вашу конфиденциальность?
Ранее в этом месяце в заголовках говорилось о том, как Enhanced Visual Search отправляет информацию о вашем местоположении в Apple, чтобы помочь найти эти ориентиры и интересные места. В приложении «Настройки» Apple говорит: «Разрешите этому устройству конфиденциально сопоставлять места на ваших фотографиях с глобальным индексом, поддерживаемым Apple, чтобы вы могли осуществлять поиск практически по любой достопримечательности».
Это, естественно, вызвало вопросы о последствиях для конфиденциальности – особенно в связи с тем, что эта функция предполагает отказ, а не согласие.
Однако у Apple есть хорошо продуманный механизм конфиденциальности, который, по ее словам, защищает ваши данные, когда расширенный визуальный поиск срабатывает.
Этот процесс начинается с так называемого гомоморфного шифрования, которое работает следующим образом:
- Ваш iPhone шифрует запрос перед отправкой его на сервер.
- Сервер обрабатывает зашифрованный запрос и генерирует ответ.
- Этот ответ отправляется обратно на ваш iPhone, где он расшифровывается.
Важно отметить, что в реализации Apple ключ дешифрования есть только у ваших устройств, а не у сервера. Поэтому сервер не может расшифровать исходный запрос. Apple использует гомоморфное шифрование для различных функций, включая расширенный визуальный поиск.
Apple также использует так называемый частный поиск ближайшего соседа (PNNS) для расширенного визуального поиска. Эта функция позволяет устройству пользователя в частном порядке запрашивать «глобальный индекс популярных достопримечательностей и достопримечательностей, поддерживаемый Apple, чтобы найти приблизительные совпадения с местами, изображенными в их библиотеке фотографий».
Вот полный конвейер запроса расширенного визуального поиска, как Apple описывает на своем веб-сайте машинного обучения:
- Модель машинного обучения на устройстве анализирует фотографию, чтобы определить, есть ли «область интереса» или ROI, которая может содержать ориентир.
- Если модель обнаруживает рентабельность инвестиций, она рассчитывает «векторный звук» для этой части изображения.
- Затем этот векторный сигнал шифруется и отправляется в базу данных сервера. В Apple отправляются не фотография и пиксели, а скорее математическое представление этой «области интереса».
- Apple использует дифференциальную конфиденциальность в сочетании с ретрансляцией OHTTP, управляемой третьей стороной, чтобы скрыть IP-адрес устройства до того, как этот запрос достигнет серверов Apple.
- Клиент также выдает «фальшивые запросы наряду с реальными, поэтому сервер не может определить, какие из них настоящие». Кроме того, запросы перенаправляются через сеть анонимизации, чтобы сервер не мог связать несколько запросов с одним и тем же клиентом.
- Сервер идентифицирует соответствующую часть сигналов и возвращает на устройство соответствующие метаданные, например названия ориентиров. Сервер не сохраняет данные после того, как результаты будут возвращены на ваш iPhone.
Это много слов и сокращений, но это подтверждает заявления Apple о том, что компания не может ничего узнать об информации на ваших фотографиях.
Вы можете отключить расширенный визуальный поиск, зайдя в приложение «Настройки», нажав «Приложения», затем «Фотографии». Прокрутите вниз и увидите переключатель «Расширенный визуальный поиск». Apple заявляет, что этот переключатель следует использовать в первую очередь в зонах с низким уровнем передачи данных.
Дополнительная информация об улучшенном визуальном поиске:
: Threads, Bluesky, Instagram и .
