Видеть через звук: новый гаджет для слепых людей от студентов Британки
Существует не так много устройств, способных сделать жизнь незрячего человека удобной и безопасной. Хотя слепые могут пользоваться смартфонами, приложениями или навигатором, ничто в полной мере не заменит собаку-поводыря и белую трость. Студенты программы «Промышленный дизайн» Британской высшей школы дизайна решили заглянуть в ближайшее будущее и создать звуковую вселенную, где незрячий человек сможет ориентироваться, гулять и интересно проводить время.
У каждого цвета есть своя частота вибрации — это физический показатель длины волны. Авторы проекта NowYouSee, Микаэль Доникян и Александр Бобров, решили разработать своеобразную «азбуку» того, как должны звучать разные фактуры, цвета и формы. Алгоритм будет обрабатывать эти данные и дозированно выдавать их пользователю с помощью объемного звука. Так, человек оказывается в центре аудиовселенной, которая идентична настоящей, но более понятна и предсказуема для незрячего. По задумке студентов Британки устройство будет подключаться к любым наушникам, полностью отрезая пользователя от посторонних шумов. Вместо этого незрячий будет ориентироваться в пространстве с помощью звуков, которые генерирует система.
Рендеры устройства
Путешествия по аудиовселенной и беспилотные автомобили
Руководствуясь результатами исследований, студенты расписали путь будущих пользователей (CJM). Они постарались учесть все проблемы, с которыми чаще всего сталкиваются слепые и слабовидящие. После этого Александр и Микаэль приступили к разработке прототипа.
Микаэль Доникянавтор проектаЧтобы закрыть боли незрячих людей с помощью нашего продукта, мы основывались на результатах уже существующих исследований, которые делали наши друзья. Интересно, что в них участвовали и те слепые, кому трудно даже покинуть дом, и те, кто добирается на работу на другой конец города.
Студенты взяли лидар (активный дальномер оптического диапазона), который измеряет дистанцию до нужного предмета. Затем они передавали информацию на электронный конструктор и платформу быстрой разработки электронных устройств Arduino, а после — в специальную программу, которая генерирует объемный звук, исходя из точек в пространстве. Так авторы выяснили, что их идея может воплотиться в жизнь, и углубились в работу над проектом.
Технология объемного звука используется при создании фильмов и компьютерных игр, а также на открытых и закрытых концертных площадках. Вот как это ощущает пользователь
С помощью камер, лидаров и микрофонов NowYouSee будет анализировать все, что происходит вокруг пользователя в формате 360 градусов. Человек же сможет ориентироваться в пространстве благодаря аудиокомпозиции, которую будет слышать в наушниках. Вокруг каждого объекта на пути устройство создает виртуальный баундинг-бокс, который обычно используется при разработке систем для беспилотных автомобилей. После этого оно анализирует, что это за объект, и присваивает виртуальному кубу теги. За каждым тегом стоят определенные звуки, и куб начинает «звучать», позволяя пользователю понять, какой именно перед ним объект.
Внутри такого баундинг-бокса окажется человек, автомобиль, автобусная остановка, здание — словом все, что окружает пользователя в данный момент. Он будет слышать, далеко или близко расположены от него предметы, понимать их приблизительное количество и назначение. Например, свои звуки будут иметь такие важные объекты, как двери, лестницы, автобусные остановки, пешеходные переходы.
Используя NowYouSee, человек не сможет случайно выйти на проезжую часть. Система распознает опасную зону и построит звуковую стену вдоль дороги. Приблизившись к ней, незрячий сразу поймет, что покидает тротуар. Не стоит думать, что во время использования NowYouSee человек будет оторван от звуков реального мира. При желании незрячий сможет включить «режим прозрачности», который позволит ему слышать окружающий мир еще лучше благодаря микрофонам, встроенным в прибор.
Устройство также позволяет переключать слои и менять свой фокус. Например, если пользователь захочет изучить объект перед собой, то обзор NowYouSee «схлопнется» на нем. Если это дверь, то система укажет с помощью специального звука ее точное расположение, и как она открывается.
Колл-центр для незрячих и виртуальные метки
Дополнительным преимуществом для пользователей устройства станет колл-центр HelpMeApp. С помощью камер, вмонтированных в девайс, оператор сможет увидеть все, что происходит вокруг незрячего, и помочь обладателю NowYouSee добраться до нужного места. В режиме реального времени сотрудник проложит маршрут из точки А в точку Б и расставит на пути виртуальные метки, которые будет считывать устройство. При желании пользователь сможет сохранить эти метки в памяти прибора и пользоваться ими в дальнейшем.
Правая кнопка будет моментально связывать пользователя с сотрудником колл-центра, а левая нужна для смены фокуса
Так незрячему не придется спрашивать дорогу у прохожих или просить перевести его через проезжую часть. Сотрудник HelpMeApp всегда сможет помочь ему найти нужную дверь и осилить даже непростой путь.
Всевидящие рожки и регулируемый размер
Александр Бобровавтор проектаМы долго думали, как бы мог выглядеть подобный прибор: как очки, наушники или бандаж на голову… В результате пришли к этому образцу. Такая форма оптимальна для тех, кто носит челку и разные прически. Так прибор будет эстетично сидеть на голове, не спадая, а волосы не будут закрывать выступающие лидары.
Референс того, как могло бы выглядеть устройство
Рендер NowYouSee
При разработке студенты учли тот факт, что устройство должно регулироваться для разных размеров головы и быть комфортным в носке. Впереди выступают маленькие «рожки», в которых спрятаны лидары. Электронная начинка – в основном, камеры и микрофоны – будут находиться внутри ободка. При этом боковые части остаются мягкими, чтобы удобно обхватывать голову пользователя. Также для Александра и Микаэля было важно, чтобы в ободке человек не выглядел слишком странно.
vOICe — российское устройство для «звукового зрения»
eSight — носимое медицинское устройство для улучшения зрения слабовидящих. Устройство разработала канадская компания eSight Corp
Argus II — электронный имплантат сетчатки, выпускаемый американской компанией Second Sight
Аудиальный опыт и звуки картин
Создатели проекта уверены, что потенциал NowYouSee безграничен для бизнеса. Передвигаясь по привычному маршруту, незрячий пользователь не обратит внимания на яркую вывеску или рекламный баннер, но стоит кафе или магазину разместить на своей двери специальную метку, система NowYouSee начнет ее считывать. На метке можно разместить любую полезную информацию — название, меню или часы работы.
Музеи и галереи привлекут незрячих посетителей с помощью «аудиоэкспириенсов». Например, они могут создать для каждой картины виртуальный звуковой слой, который будет считываться системой. Так зрячие и слепые люди, посетив выставку вместе, получат совершенно разный уникальный опыт. Когда NowYouSee станет более массовым продуктом, общественные пространства смогут стать нативными для незрячих пользователей.
Перспективы развития
Многие предметы, изначально созданные для людей с инвалидностью, — например, пандусы или электрические зубные щетки, обрели массовую популярность. В дальнейшем Александр и Микаэль хотели бы расширить целевую аудиторию продукта — сделать его полезным и для зрячих пользователей тоже. С помощью прибора можно открыть совершенно новый канал восприятия и услышать, как звучат привычные нам предметы. Также NowYouSee позволит геймифицировать реальность, так что путешествовать по звуковой вселенной сможет каждый.
Кроме того, Александр и Микаэль хотели бы сделать продукт дешевле в производстве, чтобы NowYouSee смогли позволить себе как можно больше людей. Пока проект находится на стадии прототипирования, но создатели активно ищут ресурсы для его воплощения в жизнь. По их оценкам разработка может занять несколько лет, несмотря на то что все алгоритмы и технологии уже доступны на рынке.
Владимир Шипиловдизайнер и креативный директор студии Sons & Partners, преподаватель в БВШД,
куратор проектаДля технологического проекта пять лет — это нормальный срок, чтобы ожить. Я уверен, что рано или поздно мы увидим этот продукт на полках и на реальных людях. За подобными инициативами — будущее, потому что менять среду всегда дольше и дороже. Полная инклюзивность — это горизонт, которого невозможно достичь. Мы будем к нему приближаться, но личные устройства помогут незрячим меньше зависеть от среды и иметь что-то свое, особенное.
Студенты активно ищут инженера, специализирующегося на работе с объемным и иммерсивным аудио, который сможет помочь им с подготовкой демо. Если вы хотели бы узнать подробнее и поучаствовать в разработке, свяжитесь с Александром и Микаэлем по почте mr.a.bobrov@gmail.com.
Фотографии предоставлены авторами проекта.
