Max Home IndustryИсследователи разработали и протестировали систему, которая может эффективно выполнять поиск в мобильных телефонах в реальном времени, чтобы находить цели на изображениях из краудсорсинга.
Мобильный телефон произвел революцию во многих вещах, в частности в фотографии. Теперь каждый носит с собой цифровой фотоаппарат с высоким разрешением, и мир еще никогда не снимался так хорошо. Конечно, чтобы получить доступ к этим данным и использовать их, нам нужна возможность их поиска. Фотографии, загруженные в Интернет, доступны для поиска, но они не обеспечивают просмотр в реальном времени — они в прошлом.
Теперь предположим, что можно было производить поиск в мобильных телефонах напрямую и получать представление о том, что происходит в реальном времени. Как только вы задумаетесь о такой возможности, вы сразу сможете придумать для нее приложения. Предположим, маленький ребенок ушел или был похищен — поиск изображений в реальном времени может использовать их случайное включение в фотографии других людей, чтобы получить местоположение и, возможно, даже трек в реальном времени. Вам нужно узнать в реальном времени местонахождение преступника, политического диссидента или сбежавшего заключенного … нет проблем, просто запустите всемирный поиск фотографий и ждите.
Если вы думаете, что это все безумные предположения, вы можете быть удивлены, узнав, что это было опробовано и работает. Ардалан Амири Сани и его коллеги из Университета Райса в Техасе описывают в недавней статье новую систему под названием Theia, которая может эффективно выполнять поиск целевых изображений на мобильных телефонах.
Все, что вам нужно сделать, это загрузить приложение, которое подключается к серверу. Пользователь сервиса отправляет запрос, и приложение телефона выполняет поиск по метаданным фотографии и самой фотографии. Например, вы можете указать конкретное лицо и определенный фон. Во избежание перегрузки телефона поиск проводится в два этапа. Сначала из запроса выводится набор локальных предикатов. Это более простые критерии соответствия, которые можно использовать для быстрого выбора вероятных кандидатов для второго этапа поиска. Если фотография не отклоняется локальными предикатами, она загружается на сервер Theia и полностью анализируется.
Ключ к тому, чтобы не перегружать мобильный телефон работой, — это расположить предикаты в таком порядке, при котором фотографии будут отбрасываться как можно быстрее. Кроме того, последующий запрос обрабатывается быстрее из-за локальности релевантности. Если телефон дал положительный результат, вполне вероятно, что географически близкие телефоны будут предоставлять совпадения по аналогичным запросам. Например, если телефон обнаружил совпадение с пропавшим ребенком, то географически близкие телефоны с большей вероятностью дадут дополнительные результаты.
Пробная система была реализована в виде приложения для Android. Пользователь должен указать, сколько вычислительной мощности он готов потратить для достижения результата. То есть пользователь может указать бюджет на поиск. Тестирование системы, похоже, предполагает, что вы можете без особых трудностей выполнять поиск фотографий в реальном времени на смартфоне, и из-за параллельного характера результаты поиска возвращаются очень быстро.
Так что насчет конфиденциальности и безопасности?
Дизайнеры предлагают людям разрешить хранить свои фотографии в доступной папке Theia — личные фотографии можно хранить в другом месте. Конечно, возникает вопрос, почему вы можете быть счастливы передать свои фотографии и часть вычислительной мощности вашего телефона?
Разработчики Theia не обсуждают этот аспект проблемы, но у поиска фотографий в реальном времени есть коммерческие приложения — например, поиск нужной фотографии спортивного мероприятия или новостного инцидента — и это может быть использовано для финансирования приложения. Вы можете начать видеть рекламу, говорящую
«Установите Theia и заработайте большие деньги с помощью телефона с камерой».
Также вероятно, что люди могут быть поощрены к установке такого приложения, скажем, в ответ на просьбу помочь найти пропавшего ребенка.
При внимательном рассмотрении вполне может оказаться, что поиск фотографий в реальном времени не только возможен, но и весьма привлекателен для пользователя.