Подобные системы уже действуют в Японии и Швеции. Теперь же команда исследователей из университета Вашингтона (University of Washington — UW) получила грант от Национального научного фонда (National Science Foundation — NSF) на реализацию в следующем году проекта, который в прямом и переносном смысле соединит 20 человек.


Ранее люди с ограниченными возможностями могли обмениваться только текстовыми сообщениями, но, как отметила профессор Ив Рискин (Eve Riskin), ведущая проект, "все люди хотят общаться на родном для них языке, для граждан США это американский язык жестов (American Sign Language — ASL)".

Долгое время учёные разрабатывали программное обеспечение, которое позволило бы преодолеть существующие ограничения. Прежде всего это низкая пропускная способность сотовых сетей и слабая производительность самих мобильных телефонов (в основном качество и количество снимаемых в секунду кадров).


Этой весной удалось впервые наладить связь между несколькими аппаратами разработчиков. И этот эксперимент стал по сути первой в США двусторонней видеосвязью в реальном времени, организованной с помощью обычных мобильников.


После того как видео, рассказывающее о новых возможностях для глухонемых, выложили на YouTube (обратите внимание на субтитры), отклики и вопросы от граждан страны стали приходить чуть ли не каждый день, пишут в пресс-релизе университета учёные.


Несомненно, передавать информацию с помощью видео получается куда быстрее, а эмоции лучше, считает Джессика Девитт (Jessica DeWitt), студентка UW. Сама она не слышит звуки окружающей реальности и потому активно участвует в развитии проекта MobileASL.

Учёные сравнили возможности пользователей сотовых сетей Европы, Азии и США (видимо, имеются в виду отнюдь не все страны) и выяснили, что американцы "медленнее" почти в десять раз.


Но разработчикам пришлось решать не только эту проблему. Даже имея в запасе высокоскоростные сети, не все люди могут позволить себе дорогие (более "сообразительные") мобильники, которые могли бы установить надёжную видеосвязь.



С помощью векторов движения определяются макроблоки, а затем и значимые области видеоизображения (иллюстрации University of Washington).




"Широкополосная сеть доступна пока ещё далеко не везде, — говорит аспирантка Анна Кавендер (Anna Cavender), — но и там, где такая сеть имеется, она стоит больших денег. А мы считаем, что это несправедливо, когда люди, имеющие проблемы со слухом, должны платить за сотовую связь больше".


Что скрывается за этими громкими словами? То, что программистам пришлось изрядно попотеть, чтобы создать программное обеспечение, способное снизить количество обрабатываемой информации и сжать поток передаваемых данных.


Команда разработчиков попыталась воссоздать видеоизображение "говорящего" человека, которое, с одной стороны, было бы хорошо различимым, с другой, – имело не слишком высокое разрешение.
К компромиссу пришли, когда поняли, что главное – передать чёткое изображение лица и рук "говорящего". Учёные вспомнили, что проведённые ранее исследования показали: во время общения с помощью языка жестов люди большую часть времени смотрят друг другу в лицо.


Нынешний вариант MobileASL использует стандартные технологии сжатия видеосигнала, чтобы не выходить за допустимые пределы передачи данных. Но будущие версии программного обеспечения будут работать на своих собственных алгоритмах, которые позволят ещё больше улучшить качество картинки. Так, компьютерщики создали программы, показывающие лицо и руки "говорящего" в высоком разрешении, а всю остальную картинку — в низком.