1 проект
Сегодня в нашей стране насчитывается 280 тысяч абсолютно слепых человек. Из них две трети – дети и подростки. Ежеминутно они испытывают трудности при осуществлении повседневных действий. Когда не понятно, что написано на этикетке, какую программу выбрать в микроволновке, как рассортировать белье и запустить стиральную машину. Даже обыденная уборка в квартире сопряжена с трудностями, бытовым травматизмом, ожогами и порезами. Им действительно трудно в нашем мире. Люди, которые осуществляют ежедневный уход за незрячими также испытывают много трудностей.
Мы хотим помочь незрячим людям самостоятельно передвигаться и заботиться о себе, используя систему vOICe. Она позволяет слепому человеку получить суррогатное зрение, благодаря непрерывному сканированию пространства и преобразованию визуальных изображений в кодированный звуковой сигнал (который мозг преобразует в аналог черно-белого изображения). vOICe позволяет распознавать движущиеся объекты и крупный шрифт, дает возможность слепому человеку хорошо ориентироваться в помещении.
Технология vOICe - это уникальный подход к обеспечению зрения посредством звуков. Она не использует ультразвук и эхолокацию, а основана на восприятии закодированной визуальной информации видеокамеры. В сочетании со специализированными программами это позволяет слепым людям при помощи смартфона, оснащенных камерой, «слышать» живое изображение окружающей среды.
vOICe разработана голландцем Питером Мейером, сотрудником научно-исследовательского отдела компании Philips. "Все предметы обладают своим уникальным звуком, и как только вы поймете принцип действия системы, вы сможете «видеть», что вас окружает", - рассказывает Томас. Сейчас более ярко окрашенные предметы производят более высокочастотный звук, а встроенный определитель называет цвет предмета. Система пока не позволяет "увидеть" быстро движущиеся машины или распознавать написанное мелким шрифтом, но она дает возможность узнавать здания, читать вывески и даже смотреть телевизор. Использование системы vOICe можно сравнить с изучением иностранного языка: через какое-то время пользователи освоятся с преобразованием звуковой картины в визуальную, и смогут распознавать окружение "на автомате", не задумываясь. Программное обеспечение постоянно преобразует изображения от камеры в комплекс звуков. Например, яркое пятно света дает короткий звуковой сигнал. Если это яркое пятно - слева от Вас, то слева Вы услышите и звуковой сигнал, и наоборот. Если пятно движется, вы услышите, как соответственно перемещается звуковой сигнал. От двух пятен Вы получаете два сигнала, от трех - три и так далее. Горизонтальная линия выдает длинный тон, так как составляющие ее точки, звучащие вместе, производят чистый тон. Вертикальная линия звучит как резкий шумовой сигнал – это совместное звучание составляющих ее точек, находящихся на разной высоте.
Описанный способ позволяет озвучить любое изображение, но чем оно насыщеннее, тем больше звуков потребуется для его отображения. Вся картинка озвучивается за секунду, и при этом ее содержание ежесекундно обновляется. Эти так называемые "звуковые скейпы" на слух представляют визуальную информацию, получаемую сканированием пространства слева на право, и повышением тона обозначают препятствия, а изменением громкости - яркость.
Главная цель технологии vOICe – обеспечить альтернативу “сырой” визуальной информации, предоставляя комплекс звуков, несущих зрительную информацию и оставляя задачу распознавания человеческому мозгу.
Мы хотим сделать пять рабочих прототипов системы vOICe и передать их слепым людям с целью длительной эксплуатации и апробации системы в России. Мы проведем необходимое обучение, окажем помощь психологического мотивирования и привыкания к vOICe. Этот тест-драйв даст обратную связь, поможет сделать ее еще более удобной и практичной для будущих пользователей. Мы вместе сможем подтвердить полезность и функциональность системы. В будущем мы хотим сделать vOICe социальным проектом, который повысит интеграцию инвалидов по зрению в наше общество.
Комплект системы "vOICe" будет состоять из видеоочков с wifi передатчиком и мини-компьютером спряженные по радиоканалу. Мини-ПК крепиться к поясу вместе с компактным источником питания. Для передачи звука будут использованы накладные наушники, позволяющие одновременно слышать окружающие звуки.
Участие в мастер-классе использования прототипа vOICe (получите возможность попробовать увидеть мир через звук)
Стильная футболка
Программа vOICe для мобильного телефона
Карты для самостоятельного обучения
Памятный сувенир-статуэтка "Всевидящая звуком"
Команда проекта:
Игорь Трапезников – нейрофизиолог, аспирант МГГУ им. Шолохова, проект-менеджер в ИТ, активист РоссийскогоТрансгуманистического Движения;
Валерия Удалова – инженер, социолог, член Ассоциации футурологов, член Центрального экспертного комитета Общероссийского общественного движения«Россия – активное долголетие»;
Яна Артищева – программист-инженер: лауреат выставки-салона «Архимед - 2009», автор устройства «AR-Go: навигатор дополненной реальности», дипломант инновационного конкурса «Lenovo - 2011»;
Анатолий Деев – психолог, кандидат биологических наук: председатель Московского отделения Российского геронтологического общества, преподаватель кафедры медицинской биофизики Московского городского психолого-педагогического университета;
Партнер проекта:
Всероссийское общество слепых
Слепой пользователь - женщина старше сорока лет. Она ослепла в результате химического взрыва примерно двадцать лет назад. Она пользуется звуковым дисплеем уже несколько месяцев, носит видеокамеру на голове и наушники всё время
Как человек, ранее видевший, я могу сказать, что soundscapes (звуковой обзор), кажется, вновь дал мне ощущение зрения. На моём месте мог быть слепой от рождения. Я смогла представить и увидеть, как если бы у меня были глаза, как выглядит моя прихожая. Как выглядит штора на левом из моих трёх окон. В общем, vOICe и webcam превратили мою прихожую из неясного "мысленного образа" в то, что кажется настоящим трёхмерным зрением. Сейчас я сижу перед моим компьютером и вижу поток цвета на экране, но это vOICe говорит мне, что я смотрю на квадратный объект. Это похоже на рассматривание мира через запачканные очки. Вы видите форму и расположение объектов вокруг себя, но не различаете тонких деталей. Не знаю, является ли это особым человеческим языком, но это точно язык, которым мои уши говорят моему разуму, что я сейчас вижу. Называйте, как хотите, это работает! Больше я не смогу без этого обходиться! Спасибо за это изобретение!
Через три месяца: Я хочу поделиться с вами двумя наблюдениями. Во-первых, как я говорила, я ношу это устройство ежедневно. И вот вчера я мыла посуду. Я была ошеломлена тем, что увидела раковину "в глубину", как образ. Я отступила на шаг и опять медленно подошла, чтобы посмотреть, не похоже ли это на чисто мысленную иллюзию. Нет, чувство видения глубины раковины не пропадало.
Через пять месяцев: Когда я начинала осваивать vOICe в режиме сканера, то получала упрощённый звуковой обзор, который было трудно интерпретировать и понять. Потом я удачно стала использовать мобильный vOICe с ноутбуком. Я помню, что сначала ходила по дому и идентифицировала объекты по их звучанию в звуковом обзоре. Спустя несколько месяцев я уже не концентрировалась на изменяющихся звуках, а воспринимала их как фон, и переводила поступающую информацию в образ. Постепенно я заметила, что звуковой обзор говорит мне не только о приближении к какой-то мебели, но даёт информацию и об окружающем пространстве, о его глубине.
Я могу стоять в дверном проёме, смотреть на комнаты и чувствовать глубину. Так как раньше я была видящей, то помню о восприятии пространства. Разница между видением комнаты при помощи vOICe и при помощи глаз в том, что вы не видите цвета и не видите мелкие детали обстановки. В настоящее время я уже не думаю о том, что я слышу. Я просто чувствую, как будто программа - это часть меня.
Дорогой друг, стань участником проекта vOICe, поддержи создание системы звукового зрения, подари слепым людям, возможность при встрече сказать - "Привет! Я вижу тебя!"
Нейрофизиолог, аспирант МГГУ им. Шолохова, проект-менеджер в ИТ, активист Российского Трансгуманистического Движения. Интересуюсь нейро-биологией, системами развития и усиления интеллекта, когнитивных способностей человека. Имею в пользовании персональный ЭЭГ Emotive EPOC, устройство электростимуляции мозга tDCS Foc.us.
Люблю приключения и чувствую себя счастливым в пути. Исследую окружающий мир, обожаю покорять горные вершины и склоны.