О проекте vOICe vision
Технология звукового зрения vOICe vision помогает незрячим жить в собственном ритме
и воспринимать окружающее пространство
Как работает устройство vOICe vision?
Само устройство — это камера в очках с наушниками, сопряженная с микрокомпьютером. Программное обеспечение постоянно преобразует изображения от камеры в комплекс звуков. Это позволяет слепым людям «слышать» живое изображение окружающей среды, воспринимать пространство и предметы в нем. Слепой человек начинает «видеть» визуальные образы через кодированный звуковой сигнал, который преобразуется мозгом обратно в аналог черно-белого изображения.

Система не предполагает хирургического вмешательства, и создает более точное изображение, чем специальные импланты (до нескольких тысяч пикселей), и не зависит от органов зрения человека. vOICe vision не позволяет распознавать быстро движущиеся объекты и мелкий шрифт, однако дает возможность слепому человеку хорошо ориентироваться в помещении, самостоятельно передвигаться.
История проекта
Компьютерная программа vOICe была разработана голландцем Питером Мейером, сотрудником научно-исследовательского отдела компании Philips. Первый патент Питер получил в середине 1990 года, а первая публичная версия программы vOICe вышла в январе 1998 года. В 2007 году Игорь Трапезников, руководитель проекта, узнал от своих коллег про компьютерную программу vOICe. Мы решили попробовать сделать прототип на базе нетбука и видеоочков.

Первый вариант носимого устройства vOICe в 2011 году выглядел громоздко и весил более полутора килограмм, но это не мешало ему преобразовывать в звук, получаемое изображение с камеры. Следующий шаг предпринятый в 2015 году — мы собрали средства на краудфандинге Boomstarter и вложили их в решение на базе видеоочков с микрокомпьютером Raspberry Pi. Это существенно снизило размеры и вес, повысило время автономной работы до 4 часов! Однако он все еще оставался неудобным в ежедневном использовании, как с точки зрения компоновки так и управления — разбалтывались разъемы, мешались провода от главного блока к видеоочкам, а микропереключатель все время хотел перепрыгнуть на другую позицию. Помимо этого мы через полтора года мы перешли на конструктив процессорного блока и камеры размещенный непосредственно в корпусе очков. Для передачи звука использовали беспроводные наушники костной передачи, которые не блокируют звук окружающего пространства. Время работы с выносным аккумуляторным блоком составляет более 7 часов! Несмотря на компактные размеры и более функциональную систему передачи звука, устройство третьего поколения требует модернизации в удобстве управления, тюнинге баланса веса.

Возможность сделать слепого зрячим оказалась настолько захватывающей, что и по сей день с командой единомышленников развиваем проект vOICe, создаем устройства звукового зрения, совершенствуем методику обучения.
Я считаю, что регулярное использование vOICe в повседневной жизни существенно изменит мое ориентирование в пространстве. Хотелось бы дойти до такого уровня владения системой vOICe, когда я смог
бы свободно перемещаться в незнакомой местности, кататься на велосипеде и сыграть в страйкбол.
Вадим Арцев
испытатель vOICe vision
Научиться видеть с помощью звука
В данный момент разработана специальная программа обучения для пользователей vOICe vision. В нашем обучающем центре проводят занятия специалисты, которые помогут незрячим адаптироваться и привыкнуть
к пользованию vOICe vision.
Устройство vOICe vision на базе VISION800
Комплект влючает в себя, очки камеру, беспроводные наушники костной передачи звука, внешний батарейный блок. Время автономной работы 10 часов (наушники 6 ч).
Групповое обучение
Базовый курс "vOICe звуковое зрение" состоит из двух этапов: тактильный навык, позволяющий воспринимать объекты и взаимодействовать с ними и навык ориентации в пространстве, для самостоятельного передвижения.
Длительность курса 3 месяца.
Индивидуальное обучение
Позволяет пройти базовый курс "vOICe звуковое зрение" в режиме индивидуальных встреч с тренером.
FAQ
Есть ли у вас какие-то лицензии на использование продукта vOICe?
Есть патент Питера Мейера Patents P. B. L. Meijer, ``Image-audio transformation system,'' U.S. Patent No. 5,097,326, filing date July 27, 1990, granted March 17, 1992. P. B. L. Meijer, ``Dynamic neural net,'' U.S. Patent No. 5,553,195, filing date September 29, 1994, granted September 3, 1996. P. B. L. Meijer, ``Signal generator for modelling dynamical system behaviour,'' U.S. Patent No. 5,790,757, filing date June 29, 1995, granted August 4, 1998. R. P. Kleihorst, P. B. L. Meijer and M. J. R. Op De Beeck, ``Handheld device with a display screen,'' WIPO Application WO/2004/063914, USPTO Application 20060055678, filing date December 10, 2003, published March 16, 2006. P. B. L. Meijer, ``Method for manufacturing a crossbar circuit device,'' WIPO Application WO/2006/131838, USPTO Application 20100052177, filing date May 24, 2006, published March 4, 2010. P. B. L. Meijer and A. Y. Kolesnychenko, ``Imprint lithography,'' USPTO Application 20060230959, filing date April 19, 2005, published October 19, 2006. A. Y. Kolesnychenko, H. van Santen, Y. Kruijt-Stegeman and P. B. L. Meijer, ``Imprint lithography,'' USPTO Application 20060144814, filing date December 30, 2004, published July 6, 2006. 4 P. B. L. Meijer, ``Visual Prosthesis Implant,'' WIPO Application WO/2010/035173, filing date September 16, 2009, published April 1, 2010. Также есть лицензия, данная Питером Мейером (публикуем текст лицензии) License restrictions: You may freely and without cost apply The vOICe Learning Edition for personal or academic use. You will not charge a fee or request donations for The vOICe Learning Edition, nor distribute or include The vOICe Learning Edition in or with commercial products, nor modify or reverse engineer The vOICe Learning Edition. You will not use The vOICe Learning Edition for commercial purposes.
Обычные камеры практически не видят в темноте или при слабом освещении - думали ли вы о использовании инфракрасных камер?
Да, конечно мы понимаем, обладая способностью воспринимать изображения с помощью звука, возможно использовать в качестве сенсора любую камеру или их комбинации, например, обычная камера с инфракрасной подсветкой. И это действительно расширяет возможности применения vOICe для незрячих людей.
Существуют ли какие-то подтвержденные рекомендации специалистов по использованию системы vOICe?
1. В экспериментах в Израиле половина испытуемых прозрела. Что это означает? Из 9 слепых от рождения испытуемых 5 показали в стандартных тестах уровень зрения выше, чем 20/400, который установлен ВОЗ (Всемирная организация здравоохранения) как пороговый. Кроме того, было показано, что с помощью системы vOICe испытуемая могла распознавать эмоции по выражению лица собеседника. Результаты исследования были опубликованы в научном журнале PLoS ONS весной этого года - http://brain.huji.ac.il/publications/Ella_snellen....
2. Проект также обсуждался на интернет-приемной Дианы Гурцкой: http://oprf.ru/press/anno/newsitem/22710 http://oprf.ru/press/conference/797 (видео)
3. Рекомендации от Центра социальной реабилитации (публикуем текст письма): Сотрудники ООО "Центр социальной реабилитации", детально изучив данные о технологии vOICe , сообщают, что данная технология (прежде всего, ее основная часть – компьютерная программа) основана на естественной способности человеческого мозга, называемой нейропластичностью. Нейропластичность – свойство человеческого мозга меняться под действием опыта и , в том числе, обрабатывать поступающие сигналы в различных отделах мозга. Данное свойство мозга интенсивно изучается с конца 1960-х годов (Boring, S. Finger, E. R. Kandel и др.), хотя первые работы в этой области относятся к 1842 г. (M. -J.-P. Flourent). В настоящий момент свойство нейропластичности является одним из механизмов реабилитации людей, перенесших тяжелые инсульты, паралич, работает при ориентации слепых по слуху или с помощью тактильных ощущений и во многих других процессах как медицинского, так и повседневного характера. В связи с вышеизложенным мы считаем технологию vOICe перспективной для помощи слепым и безопасной как использующую естественное свойство мозга.
Чем плох вариант использования смартфона с бесплатным приложением для этих целей?
Этот вариант с первого взгляда кажется не плохим, но начав его тестировать и повседневно использовать поняли его непрактичность и вот почему. Прежде всего расположение камеры - она должна быть именно на голове, чтобы фокус камеры следовал за интуитивным методом внимания на объектах. На лбу смартфон носить не удобно, проверено. Внешняя камера по OTG кабелю тоже не решает проблему - разъёмы смартфона не предназначены для постоянных вибраций и движений, они просто разбиваются. Если сделать неразъёмным, встает вопрос зарядки устройства, нужно менять батарею, иметь доп.зарядку и так далее. Также при длительной эксплуатации смартфон быстро разряжается (ведь ему нужно запитывать внешнюю камеру) и находясь в чехле сильно греется. Эти основные причины не позволяют серьезно рассматривать реализацию ежедневного использования vOICe на смартфоне. Однако в качестве знакомства с технологией он хорошо подходит и с этим справляется.
Как звучит превращённая в звук картинка? Послушать можно?
Послушать, как звучит превращенная в звук картинка, можно на международном сайте vOICe. Там есть даже программа-тренажёр, выводящая и озвучивающая картинки.Описание алгоритма тренировок: http://www.seeingwithsound.com/manual/The_vOICe_Train.. По ссылке предлагаются примеры озвучания картинок и софт под Windows для тренировок. Для тренировок не нужно НИЧЕГО, кроме компьютера с ОС. То есть практически любой из нас может начать тренировки хоть прямо сейчас http://www.seeingwithsound.com/winvoice.html
Команда проекта
Игорь Трапезников
нейрофизиолог, аспирант ИВНДиНФ РАН, руководитель проекта
Дарья Горохова
тренер vOICe vision
Вадим Арцев
испытатель vOICe vision
Светлана Лебедева
психолог, методист
Вы хотите помочь проекту?
Мы будем рады видеть:

1. Инженера - программиста. Вам нравиться и вы хотите проектировать, кодить, собирать, паять, «подружить» камеры, процессоры и наушники и другие девайсы;

2. Методолога и методиста. Вы хотите помогать сделать качественную методику обучения незрячих технологии vOICe vision, помогать обучать инструкторов, сопровождать процесс обучения незрячих.

Вы – наш человек, если:
  • Вам важно развиваться, и Вы умеете видеть перспективы, Вас радует слава первопроходца;
  • Вы отзывчивы по отношению к другим людям;
  • Вы можете самостоятельно определять необходимые ресурсы и требовать их
Контакты
Наш адрес: г. Москва, ул. Марксистская, д. 5
телефон: +7 926 231 9925
This site was made on Tilda — a website builder that helps to create a website without any code
Create a website