- Как мы разработали технологию обнаружения устройств поблизости
- Взаимодействие между устройствами поблизости
- Окружающий шум
- Еще один способ….
- Геолокация
- Bluetooth, BLE и Wi-Fi
- Обмен информацией через звук
- Вместо заключения
- 13 вещей, которые вы можете сделать с приложением Настройки Google на любом Android устройстве
Как мы разработали технологию обнаружения устройств поблизости
Эта история началась с функции “Рядом” в одном из наших мобильных приложений. Мы хотели, чтобы пользователи могли быстро создать групповой чат или добавить находящихся рядом пользователей в друзья. Мы попробовали решить эту задачу при помощи геолокации, Bluetooth, Wi-Fi и ультразвука, но у каждого из способов мы обнаружили критичные в нашем случае недостатки.
В итоге мы придумали новый способ. Он основан на поиске совпадения окружающего шума: если устройства слышат одно и то же, то, скорее всего, они находятся рядом.
В статье мы расскажем о принципе его работы, а также рассмотрим достоинства и недостатки других распространенных способов обнаружения устройств.
Взаимодействие между устройствами поблизости
Люди, находясь рядом друг с другом, часто хотят обменяться файлами, добавить нового знакомого в друзья, сыграть вместе в игру, перевести деньги, поделить счет или выполнить другие совместные действия. Такие приложения станут удобнее, если позволят пользователю легко взаимодействовать с окружающими людьми или устройствами.
Например, Петров только что познакомился с Ивановым и они пытаются “подружиться” на Facebook. Спустя несколько безуспешных попыток найти друг-друга, они, скорее всего, закроют Facebook, обменяются номерами телефонов и будут общаться через WhatsApp.
Кстати, Вконтакте предусмотрели это: в их мобильном приложении для iOS и Android есть функция “Люди Рядом”, которая позволяет найти других пользователей при помощи геолокации. О минусах этого способа я расскажу чуть позже.
| Поиск нового знакомого в FB | Поиск нового знакомого в Vk |
Чтобы функция действительно была удобна пользователю, она должна работать:
- На любом смартфоне
- Всегда и везде. На улице, в транспорте, в офисе и т.д.
- Кроссплатформенно. Как минимум на iOS и Android, а лучше, и в браузере
- Точно. Определять устройства, которые действительно рядом
- Быстро. Устройство должно быть найдено менее, чем за 10 секунд
- Просто. Без дополнительных действий со стороны пользователя
Окружающий шум
Где бы вы не находились (в офисе, транспорте, кафе, на улице, встрече или концерте) — везде есть окружающий шум: голоса людей, музыка, работа двигателя, шум колес, стук клавиш и так далее.
Короткий сэмпл естественного окружающего шума вместе с точным временем его записи, в большинстве случаев, уникален для любого места на Земле. Совпадение окружающего шума и времени означает, что записывающие устройства находятся рядом. Именно на этом основан принцип работы технологии.
Схема работы
Каждое устройство в реальном времени захватывает звук с микрофона и преобразовывает его в специальный отпечаток при помощи перцептивной хэш-функции. Особенность перцептивных хэш-функций в том, что небольшие отличия в исходных данных выражены небольшими отличиями в результирующем хэше.
Отпечаток звука с точной меткой времени отправляется на сервер. Сравнивая его с отпечатками других устройств, сделанных в тот же момент времени, сервер может определить, насколько похожи исходные звуки. Если показатель схожести выше определенного порога — устройства получают идентификаторы друг-друга для последующего взаимодействия.
Пример и сравнение отпечатков с двух разных устройств
Нужно было убедиться, что данный принцип работает и способен находить совпадения в звуке, записанном разными устройствами на расстоянии нескольких метров, а также, что заведомо разный звук не совпадает. Мы вручную собрали сотни часов звука, записанного одновременно на несколько устройств во множестве различных мест.
Используя эти данные, мы перебрали множество алгоритмов генерации и параметров сравнения отпечатков для достижения наилучшего результата. В итоге добились того, что 6-секундный отпечаток позволяет обнаружить устройство на расстоянии до 5 метров в 96% случаев, а ложноположительный результат возможен в 0.0039% случаев.
Мы разработали библиотеки для iOS и Android, которые скрывают от приложения всю реализацию через простой API и встроили их в свои приложения.
Недостаток данного подхода в том, что он не работает в абсолютной тишине. Тишина очень похожа на любую другую тишину и алгоритм намеренно игнорирует ее, чтобы исключить ложные срабатывания. Стоит отметить, что абсолютная тишина встречается в реальных условиях крайне редко. Достаточно стука клавиш клавиатуры или звука шагов, чтобы устройства обнаружили друг-друга.
Иногда это выглядит забавно: пользователи молча ждут обнаружения секунд 10, после чего один из них говорит что-то вроде “Это не работает!”. Эта фраза работает как заклинание и через секунду устройства обнаруживают друг-друга.
Одно преимуществ данного подхода — кроссплатформенность. JS-версия библиотеки, работает в Chrome, Safari, Firefox, Edge, в том числе, в их мобильных версиях.
Еще один способ….
В нашем приложении функция “Рядом” является одной из ключевых. Мы попробовали применить различные существующие способы для ее реализации, но столкнулись с критичными для нас ограничениями и проблемами.
Давайте подробно рассмотрим альтернативные способы.
Геолокация
Это наиболее очевидный способ решить задачу. В момент, когда пользователь открывает раздел “Рядом”, мы получаем его текущее местоположение и выполняем поиск ближайших пользователей на сервере.
Если представить местоположение как центр окружности, а погрешность координат в виде радиуса, то 2 пользователя могут быть изображены следующим образом:
Если расстояние между устройствами (d) меньше суммы погрешностей (r1 + r2), значит есть вероятность (P), что пользователи находятся рядом.
Радиус поиска должен быть не меньше погрешности координат. Как оказалось, реальные координаты смартфона могут находиться и за пределами погрешности, например, в Android это происходит в 32% случаев. Значит, даже находясь рядом, пользователи все равно могут не “увидеть” друг-друга.
Координаты, полученные при помощи GPS и ГЛОНАСС точны, но этот способ зачастую не работает внутри помещений, кроме того, может потребоваться до минуты на поиск спутников. При этом, модуль GPS/ГЛОНАСС присутствует не во всех устройствах (Привет, iPad Wi-Fi!) или может быть отключён на уровне ОС (Привет, Android!).
На самом деле, даже вне здания, на улице с плотной застройкой GPS/ГЛОНАСС часто ошибается из-за отражения сигнала от зданий и может выдавать точность ниже 100 метров:
Поэтому в большинстве случаев приходится использовать координаты, полученные при помощи триангуляции по сигналу окружающих Wi-Fi сетей и сотовых вышек, этот способ работает быстро и энергоэффективно, но точность на порядок ниже: 100 — 1500 метров. На практике, устройство нередко определяет неверное местоположение в городе, а иногда может “телепортироваться” в другой город.
Мы реализовали этот способ и протестировали его в Москве, примерно в 15% случаев устройства не находят друг-друга из-за неверных координат. Особенно часто ошибки происходят внутри высоток Москва-Сити, в метро и наземном транспорте. Также из-за низкой точности часто будут попадаться “лишние” пользователи (не находящиеся рядом).
+ простой в реализации способ
− низкая точность
− плохо работает в транспорте (в движении)
Команда Bump придумала оригинальный способ увеличить точность поиска по геолокации. Пользователям нужно стукнуться своими смартфонами, при этом, акселерометр фиксирует точное время соприкосновения и отправляет его вместе с координатами на сервер, алгоритм ищет пару только среди устройств с одинаковым временем соприкосновения. Эта простая идея на порядки уменьшает вероятность ложноположительного результата, что дает возможность значительно увеличить радиус поиска.
Но в 2013 их поглотил Google, а уже в 2014 проект закрыли, несмотря на то, что Bump SDK был встроен во множество сторонних приложений, а приложение Bump для обмена файлами получило сотни миллионов скачиваний. Дальнейшая судьба технологии неизвестна.
Главный недостаток технологии заключается в том, что за один ”Бамп” связывается только пара устройств. Чтобы объединить группу пользователей, потребуется сделать множество “Бампов”.
+ высокая точность
− необходимо сталкивать друг о друга устройства
− попарное обнаружение устройств
− проект закрыт
Bluetooth, BLE и Wi-Fi
iOS и Android категорически не дружат по Bluetooth. Передача данных между этими платформами — нетривиальная задача: Apple позволяет приложению подключиться только к сертифицированным (Made For iPhone) Bluetooth-устройствам.
Чтобы устройства могли обнаружить друг-друга, используется следующий способ: iOS имитирует какую-либо Bluetooth Low Energy-периферию, устанавливая свой токен в качестве имени BLE-устройства. Android временно меняет Bluetooth-имя смартфона на свой токен и включает режим обнаружения. Теперь, чтобы обнаружить устройства вокруг, Android сканирует Bluetooth для обнаружения Android и BLE для обнаружения iOS-устройств. iOS сканирует только BLE для обнаружения iOS, т.к. сканирование Bluetooth-устройств невозможно с помощью публичного API. Для того, чтобы обнаружить Android, iOS через облако получает идентификаторы окружающих Android-устройств, которые обнаружили его BLE-токен.
Окружающие Wi-Fi-сети в некоторых случаях помогают обнаружить, что устройства рядом: iOS-приложение может получить BSSID Wi-Fi точки доступа, к которой в данный момент подключен пользователь, а Android BSSID всех видимых точек. Если найдено совпадение, значит, пользователи рядом.
Грамотно реализовать этот способ самостоятельно не так уж просто, в том числе из-за множества особенностей BLE-стека разных версий Android и iOS. Существуют библиотеки, которые скрывают сложную реализацию “под капот”.
Мы попробовали Google Nearby. Обнаружение пары iOS — Android происходит медленно, в среднем поиск занимает 20 секунд, а в некоторых случаях длится до 40 секунд, это оказалось главным останавливающим фактором.
Другой нюанс заключается в том, что Bluetooth выключен на большинстве смартфонов, поэтому пользователям iOS каждый раз при использовании функции нужно будет правильно ответить на вопрос “Разрешить приложению использовать Bluetooth?”.
Также, стоит помнить, что использование Bluetooth (на Android) сильно влияет на потребление заряда. Google предупреждает, что Google Nearby увеличивает потребление энергии в 2.5 — 3.5 раза.
+ proof of proximity (гарантия того, что устройства находятся рядом)
− медленное обнаружение
− высокое потребление энергии
Обмен информацией через звук
У всех смартфонов есть динамик и микрофон. Можно закодировать какой-либо идентификатор в звук на одном устройстве, воспроизвести его при помощи динамика, декодировать на устройствах в радиусе слышимости и таким образом объединить устройства в группу.
Пример спектрограммы сигнала Chirp.io
В слышимом диапазоне сигнал смешивается с голосом, музыкой и окружающим шумом, чтобы увеличить вероятность корректного декодирования приходится воспроизводить звук с максимальной громкостью. Чаще всего используется FSK и PSK-модуляция, генерирующая похожий на свист или шум (в зависимости от плотности данных) звук, что раздражает многих людей (пример звука). Этот способ реализован в проекте Chirp.io.
− плохо работает в шумных местах
− раздражает окружающих
Можно использовать диапазон 18-20 кГЦ, он обычно не зашумлен, а большинство взрослых людей не услышат раздражающий звук. К сожалению, некоторые смартфоны тоже воспринимают его плохо, становится актуальна проблема отражения и интерференции, дальность устойчивой связи уменьшается до 0.5 — 3 метров. Этот способ реализован в Google Nearby и Chirp.io, но включается отдельно.
− работает на слишком малых расстояниях
Вместо заключения
Мы тестируем технологию в собственном приложении уже более 2-х лет. За это время мы убедились в ее работоспособности и удобстве в “боевых” условиях. В очень скором времени мы хотим дать возможность любому разработчику быстро встроить и использовать ее в своем приложении.
Надеюсь, статья оказалась познавательной и полезной. Если тема окажется интересной, в следующих статьях я планирую более подробно рассказать об алгоритмах создания и сравнения “отпечатков” окружающего звука, а также о трудностях, с которыми нам пришлось столкнуться.
С удовольствием отвечу на ваши вопросы в комментариях!
Источник
13 вещей, которые вы можете сделать с приложением Настройки Google на любом Android устройстве
С 2013 года Google добавил во все устройства Android приложение Настройки Google, данное обновление было установлено через Google Play. В данных настройках можно найти много интересного и убрать лишнее, или добавить новое которое облегчит вам жизнь 🙂
Настройки Google находятся отдельно от основных настроек, обычно в подменю Google (если у вас все его приложения в одном подменю)
Управление аккаунтом Google
“Безопасность и вход” и “Конфиденциальность” в данных категориях быстрые ссылки на важные настройки для управления вашей учетной записью Google.
Во вкладке “Безопасность и вход” вы сможете: изменить пароль к аккаунту, выбрать двухэтапную аутентификацию (чтобы во время ввода пароля в аккаунт вам на телефон звонили или присылали смс), изменить секретный вопрос для восстановления пароля аккаунта, создать пароль для приложений, изменить резервный адрес электронной почты и посмотреть историю недавних подключенных устройств (чтобы знать, что не было несанкционированного входа в аккаунт). Можно еще посмотреть связанные приложения и сайты, которые используют данные вашего аккаунта и удалить ненужные.
Во вкладке Конфиденциальность вы можете посмотреть:
1. Личную информацию: электронную почту, телефон, дату рождения, профиль Google +, настройки Google +, настройки поиска;
2. Отслеживание действий: здесь вы сможете посмотреть историю поиска и просмотренных страниц, или выключить историю слежки и оно перестанет запоминать ваши запросы; сможете посмотреть места которые посещали, или отключить слежку за вашим местонахождением; посмотреть историю голосовых запросов, или отключить данную функцию; посмотреть историю ваших запросов в YouYube, или отключить слежку за вашими запросами;
3. Настройка рекламных предпочтений: здесь вы можете отказаться от персональной рекламы, или настроить ваши предпочтения, чтобы реклама была построена под вас 🙂
4. Настройки аккаунта: здесь вы сможете посмотреть последние свои действия в аккаунте, или изменять настройки сервисов;
5. Управление контентом: здесь вы сможете скопировать или перенести данные на другой сервис, сделать архив или на всякий случай назначить доверенное лицо для вашего ящика (а вдруг вы где-то пропадете, а кому-то нужно будет зайти)
Подключенные приложения:
В пункте подключенные приложения вы увидите список подключенных приложений к вашей учетной записи Google, и сможете запретить доступ из них.
Реклама:
З пункте реклама вы сможете запретить приложениям подбор для вас персональной рекламы – нужно поставить галочку. Еще если вы видите постоянно рекламу подстроенную под вас, и если вам это не интересно – можно сбросить рекламный идентификатор
Управление данными:
Вы можете контролировать управление данными, выбрать когда система будет загружать данные в Google Drive. По умолчанию стоит “Только Wi Fi”, а можно еще разрешить через мобильную связь.
Google Fit
Вы сможете увидеть какие приложения подключены к Google Fit. Google где-то год назад запустил сервис Fit для отслеживания физической активности, то есть программа различает ходьбу, бег, езду на велосипеде, считает преодоленную дистанцию и многое другое
Местоположение:
В пункте местоположение вы сможете настроить слежку за вами 🙂 Вернее сможете отключить ведение истории мест вашего нахождения (где вы были), отключить или включить возможность определение вашего места нахождения во время фотографирования или видеосъемки, настроить запросы о вашем местонахождении из Google Play. Убрав слежку за вашим местопожением – вы чуть уменьшите расход батареи.
Мое окружение:
Вы можете выбрать какие приложения могут находить через Wi Fi или Bluetooth такие же приложения на других устройствах рядом с вами.
Настройки Play Игры
С помощью Play Игры можно настроить кому виден ваш игровой профиль, можете настроить какие уведомления хотите получать из игр.
Поиск и подсказки
В подменю Поиск и подсказки можно настроить поиск Google (история поиска, специальные возможности, безопасный поиск), настроить язык поиска, настроить голосовой поиск, поиск на телефоне, подсказки Google Now
Безопасность
В панели Безопасность вы можете получить защитный код, или можете настроить возможность поиска устройства в случаи его потери, сможете настроить возможность заблокировать его и сбросить данные в случаи его потери, также можно разрешить поиск приложений на вашем устройстве которые могут нанести вред телефону, борьба с вредоносным ПО
Настройки устройства, расположенного поблизости
В данному пункте вы сможете через Bluetooth или Wi-Fi найди ближайшее устройство Android, и быстро установить с ним связь
Smart Lock для паролей
Smart Lock для паролей позволяет включить или отключить автоматический вход на сайты и в приложения связанные с аккаунтом Google. Также вы можете разрешить или запретить сохранение паролей сайтов и приложений на аккаунте Google
Всё, что есть на данный момент времени мы рассмотрели, в дальнейшем с обновлениями сюда планируют добавлять новые функции. Если что-то непонятно или хотите что-то добавить – пишите комментарии! Удачи Вам 🙂
Источник