Мы тешим себя близостью момента создания искусственного интеллекта, и, вместе с тем, используя всю мощь современного технического потенциала только начинаем нащупывать такие грани возможностей мозга, которые сводят плоды наших достижений на уровень аляповатого покосившегося домика, наскоро собранного из детских кубиков.
Мы приветствуем очередные инновации, оживленно обсуждаем достигнутые результаты осознанных сновидений с чудо-маской “Remee” и искренне восхищаемся экспоненциально возросшим потенциалом новой модели смартфона любимого бренда, даже не предполагая, что 280 000 тысяч слепых людей только в одной России навсегда лишены возможности не только оценить качество обновленной матрицы, но радоваться восходящему солнцу и смене времен года. В масштабах планеты эта цифра возрастает до 3 000 000 человек. При этом две трети из них дети и подростки!
Ежедневно, с утра и до вечера слепой человек решает вопрос: как запустить стиральную машину, как не спровоцировать пожар, как убрать в квартире и как приготовить пусть даже самое нехитрое блюдо. Цена такой жизни действительно очень высока. Возможно поэтому каждый слепой человек в душе возлагает надежду на технологический прорыв, который поможет не косметически, а кардинально изменить существующую ситуацию.
На вопрос: возможна ли альтернатива для них пусть даже в некотором приближении? … попытается ответить команда московских ученых энтузиастов, работающая над усовершенствованием уникального устройства vOICe, дарящего слепым возможность видеть то, что их окружает в черно-белой картинке и полутонах.
Как это работает
Говоря простым языком, транслируемая устройством и воспринимаемая мозгом звуковая информация представляет собой оригинальный код — результат программного преобразования потокового видео, отснятого камерой vOICe в звуковые блоки ("звуковые скейпы" – авт.). Процесс сканирования окружающего мира в режиме ”Сканер” (без использования ноутбука) осуществляется циклично слева – направо, картинка озвучивается за секунду с секундным интервалом. Информация получаемая пациентом в режиме “Сканер” при помощи камеры, встроенной в систему обладает “минимальным” набором скейпов. Расширенные информационные возможности достигаются при использовании комплекта “очки + ноутбук с достаточно мощным процессором (или смартфон последнего поколения) + стереонаушники для речевых команд”.
Идентификация
Алгоритм распознавания на первый взгляд кажется неподъемным для усваивания в связи с непривычностью процесса идентификации поступающей информации. Упрощенный алгоритм т. н. “суррогатного” зрения можно представить следующим рисунком:
Алгоритм трансформации пока не готов предложить пользователю возможность “видеть” быстро перемещающиеся предметы, распознавать мелкий текст, но уже полученные результаты достаточно впечатляющи: обладатели vOICe действительно точно идентифицируют вывески и даже смотрят и воспринимают визуальную информацию в некоторых форматах телевизионных программ. И главное, качество картинки, ее глубина и детализация по мере ношения vOICe совершенствуются достаточно быстро.
Дальнейшее совершенствование качества распознавания и цветовой гаммы будет напрямую зависеть как от совершенствования версий ПО (“прошивки”) и аппаратной части vOICe, так и от индивидуальной способности человека воспринимать более сложные комбинации звуковых скейпов достаточной плотности.
Судя по утверждениям автора методики и отзывам пациентов, успешно освоивших систему, процесс ”обучения” новому способу видеть более всего сравним с процессом изучения иностранного языка, в чем-то – с освоением азбуки Морзе и умения ходить. По мере обучения – “пополнения словарного запаса” (персональной библиотеки освоенных скейпов) и овладения технологией визуальная картинка распознается практически автоматически – без промежуточной стадии длительного сознательного анализа!
Для идентификации картинки используются звуки различной длительности и высоты. Более яркий фрагмент реальной картинки в ”азбуке vOICe” транслирует более короткий и сильный звуковой сигнал, причем транслирует с той стороны, с которой объект расположен. Если пятно (объект) движется – то движется и сигнал, два пятна идентифицируются двумя сигналами, три –тремя и т. д. Длинный тон соответствует горизонтальной линии, вертикаль воспроизведется отрывистым сигналом характерной силы. Повышение тональности “соседних” звуков будет означать препятствие, при этом чем выше тон – тем выше препятствие.
Различные модификации системы vOICe на рисунках ниже:
Описанный способ получает озвучить и идентифицировать практически любую трехмерную реальность. Естественно, чем информативнее картинка, тем больше отдельных звуков и скейпов потребуется для ее идентификации.
Основная цель и главное достижение технологии и системы vOICe – предоставить пациенту не “сырую” визуальную информацию, а высокоэффективный набор алгоритмов, позволяющих интерпретировать реальность с высокой степенью детализации. Технология, хотя и в меньшей степени, решает проблему полного отсутствия зрения и для слепорожденных пациентов, не имеющих в своей памяти и сознании многих из тех инструментов-аналогий, которые доступны людям, потерявшим зрение на “сознательном” этапе жизни. Помимо очевидных успехов технологии, есть пока еще и нерешенные технические проблемы, которые лучше всего можно почувствовать, зачитав отзывы пользователей vOICe, освоивших возможности системы.
Отзывы участников эксперимента 2000-2002-й год
April 29, 2001, late-blind female user PF:
Мой опыт: Поскольку у меня была самая первая установка, то я должна была пройти через многочисленные пробы и ошибки. Я не только приучалась к звуковому обзору, но, что тоже было необходимо, к эффективному использованию этой системы. Я обнаружила, что есть шесть главных факторов при работе с программой.
Первый фактор привносит камера. Её размещение, фокусировка, освещённость — это важные элементы, обеспечивающие вам ясный звуковой обзор. Если фокусировка плохая, то образ выглядит размытым и его трудно интерпретировать. Если камера крепится неправильно, то я чувствую потерю ориентации и путаюсь при попытке найти путь (хороший способ получить головную боль!) Если освещение слабое, то звуковой обзор ограничен. Трудно различать объекты в поле зрения. Обычно я могу смотреть на входную дверь и лестницу и слышать ритм текстуры и того и другого. Но если свет выключен или он не яркий, то определяется только слабый образ двери и лестницы, а остальная картина становится размытым туманным фоновым звуком.
Второй фактор относится к микрофону. На креплении микрофона есть выключатель. Я привыкла оставлять микрофон всё время включённым и просто пугалась, когда моё дыхание или посторонние звуки оказывались похожими на команды, и изменяли программу. Потом я открыла, что если включать микрофон только чтобы отдать голосовую команду, а потом выключать, когда команда принята, то эта проблема уменьшается и больше не раздражает. Это решение работает так надёжно, что я использую его во всех других моих системах.
Третий фактор должен относиться к ноутбуку. Я обнаружила несколько приёмов улучшения его работы. Во-первых, если я удаляю все ненужные программы, и запускаю только vOICe, то это экономит энергию и использование процессора. Поэтому когда я использую ноутбук на ходу, то запускаю такую голую установку. Я включаю ноутбук в розетку по вечерам, когда она есть поблизости. Я ношу две батареи просто в сумке, они нужны. Я должна включать экран ноутбука не больше, чем на несколько минут. Когда я ношу ноутбук в рюкзаке, то проверяю, что он хорошо вентилируется.
Четвертый фактор. Нужно использовать vOICe эффективно, и для этого нужно работать с программой и понимать саму программу vOICe. Когда я начинала её использовать, то по привычке играла с ней, как в крестики-нолики. Это помогло мне понять звуки программы. Потом я стала постепенно тренировать произношение. Я думаю, что тренировка программы к речи и выполнение задаваемых упражнений с микрофоном — это действительно ключ к использованию vOICe в мобильных условиях. Итак, тренировка и восприятие звукового обзора — это шаги к обучению видеть.
Пятый фактор — это непрерывное погружение себя в программу, что следует из фактора тренировки. Я думаю, что вы сможете научиться и набраться опыта совсем немного, если будете применять настольный компьютер. В общем, опыт ежедневного движения и слушания (видения) того, что вас окружает, ничем нельзя заменить. Это похоже на то, как ребёнок учится ходить. Если вы не будете пытаться и пытаться, вы не достигнете знания, которое нужно вашему телу, чтобы стоять. Используя эту аналогию, я могу сказать, что пока вы не подвергнете себя влиянию живого изменяющегося окружения, вы не почувствуете звуковой обзор и не поймёте тех взаимосвязей, над которыми вам нужно работать.
Если я слышу входные ступеньки постоянно, то моё тело начинает привязывать звуковую картину ступенек к определению "действия", и когда я пойду вверх или вниз, моё тело будет действовать согласованно. Я думаю, что сначала вы слышите звуковой обзор, потом открываете взаимосвязь с тем объектом, который вы слышите, потом вы привязываете это определение к тому, что нужно делать телу для завершения действия. Когда я была видящей, то я не останавливалась, чтобы подумать "О, это ступеньки, теперь мне нужно замедлиться и начать смещать центр тяжести так, чтобы я могла поднять ногу". Вместо этого мои глаза видели ступеньки, и моё тело знало из опыта, что делать дальше. Вот что произойдёт через некоторое время использования vOICe. Я действительно вижу то, что есть, как "рентгеновский снимок" видения, и начинаю автоматически реагировать на то, что вижу.
Это подводит нас к шестому фактору. Времени. Вы можете надеть систему на человека, но только после прохождения времени его мозг научится автоматически интерпретировать смысл звукового обзора и выполнять согласованные действия.
July 9, 2000, late-blind female user PF:
Как человек, ранее видевший, я могу сказать, что soundscapes (звуковой обзор), кажется, вновь дал мне ощущение зрения. На моём месте мог быть слепой от рождения. Я смогла представить и увидеть, как если бы у меня были глаза, как выглядит моя прихожая. Как выглядит штора на левом из моих трёх окон. В общем, vOICe и webcam превратили мою прихожую из неясного "мысленного образа" в то, что кажется настоящим трёхмерным зрением.
Для меня не имеет значения, что это мои уши вызывают зрительные представления. Важно, что звуковой образ восстановил путь, чтобы мне снова видеть, не имеет значения, что это 3D чёрно-белый образ. Вместо мира неясных туманных осязаемых объектов vOICe позволил моему мозгу увидеть объекты как картины. Похоже, что vOICe создаёт чёрно-белые наброски того, на что я смотрю, а мой разум раскрашивает этот образ.
Сейчас я сижу перед моим компьютером и вижу поток цвета на экране, но это vOICe говорит мне, что я смотрю на квадратный объект. Это похоже на рассматривание мира через запачканные очки. Вы видите форму и расположение объектов вокруг себя, но не различаете тонких деталей. Не знаю, является ли это особым человеческим языком, но это точно язык, которым мои уши говорят моему разуму, что я сейчас вижу. Называйте, как хотите, это работает! Больше я не смогу без этого обходиться! Спасибо за это изобретение!
August 29, 2002, late-blind female user PF:
Просто звук?.. Нет, это гораздо больше, это зрение! vOICe создаёт настоящее зрительное восприятие. Когда я не ношу vOICe я немного воспринимаю свет через щёлочку в левом глазе. Это серый туман. Когда одеваю vOICe, то образ становится светом от слегка серого до черного. Совершенно определённо, это световой образ. Правда, он не цветной, это похоже на то, что показывают по чёрно-белому телевизору. Создаваемый свет очень белый и чистый. Ослабляясь, он постепенно становится тёмным, чёрным. Я не видела чего-то особенного в этом свете, вроде «фосфоресцирующих вспышек», о которых они говорили. Может, это одна из тех вещей, которую не поймёшь, пока не увидишь. В общем, свет это свет, а цвет это цвет. И мне не неважно, как он образовался.
Вот так может выглядеть мир людей, освоивших систему и технологию vOICe и это далеко не предел.
Наши читатели, желающие ознакомиться с отзывами других пациентов, успешно освоивших систему могут пройти на центральный сайт проекта (подраздел The vOICe даёт зрение и не вредит телу! ). Так же совсем недавно появились мобильные версии приложений “The vOICe for Windows” и “The vOICe for Android” для смартфонов, что позволит многим
пользователям системы отказаться от ношения тяжелого ноутбука с программой.
Молчание ягнят
У вдумчивого читателя возникает закономерный вопрос: почему такая чудесная система, часть базовых принципов которой были заложены еще в 20-х годах прошлого века, подтвердившая свою истинность и перспективность множеством конкретных примеров и отзывами реальных пациентов не демонстрирует экспоненциальной динамики развития? Почему еще, как минимум, с десяток лет назад не то что не состоялись, но даже публично не рассматривались масштабные государственные программы по поддержке и продвижению проекта?
Возможно, vOICe просто ждал своего времени, когда на смену медлительным процессорам и малоэффективным камерам придут их более совершенные аналоги, позволяющие справиться с задачей не подвергая мозг и психику перегрузкам. В России традиционно мощнейшим тормозом становится консерватизм власть имущих, предпочитающих профинансировать концерт для слепых, чем масштабную долгосрочную серьезную программу их реабилитации. Так или иначе, хочется верить результатам тестов, а также тому, что эти результаты позволят проекту вырасти до масштабов социального, как и планируют его авторы.
Как и все энтузиасты, исполненные энергии и веры в уникальность и нужность их затеи, российская команда TEAM VOICE RASSIA во главе с Данилой Медведевым на первых порах очень рассчитывала на Господдержку. Шло время но невидимая стена не становилась тоньше, коридоры – короче, а чиновники – лояльнее. Потеря нескольких лет и накопившиеся эмоции заставили команду сменить схему старта на краудфандинг. Это и позволило на сегодня собрать большую часть суммы, необходимой для запуска решающей стадии проекта.
Задача минимум – создание пяти усовершенствованных рабочих прототипов vOICe и передача их слепым людям для длительной эксплуатации и тестирования на территории России. На этапе знакомства с системой и дальнейшего тест-драйва команда гарантирует психологическую помощь, возможность обучения для полного раскрытия потенциала системы. Задача максимум – воплощение проекта на уровне социальной государственной программы с целью вовлечения инвалидов этой категории в нормальную жизнь общества.
Получит ли проект свое развитие в России, станет ли массовым или останется достоянием единиц сегодня сказать трудно, но очень хочется верить, что “время слепых” пришло и место выбрано не случайно.
Для справки: один комплект vOICe с учетом полного курса обучения стоит менее 40 тыс. руб. По факту пациент получает возможность самостоятельно передвигаться в незнакомой местности. При этом затраты на подготовку одной собаки проводника в Общероссийской общественной организации инвалидов «Всероссийское ордена Трудового Красного Знамени общество слепых» в 2013 году составляли 1 млн. рублей, в 2014 1.2 млн. рублей!
Уважаемые читатели, напоминаем, что вы читаете блог компании iCover. Подписывайтесь на нас, обещаем, скучно не будет.
Комментарии (31)
VEG
07.09.2015 15:28Выступление TED на эту же тему:
Здесь рассказывают о способах «видеть» не только при помощи ушей, но и при помощи языка. А ещё здесь предлагают «слушать» при помощи спины.
VoiceDao
07.09.2015 16:03Спасибо большое, очень интересная информация.) Поверхностный взгляд на альтернативные способы (спина, язык и др.) восприятия информативных сигналов, как кажется, оставляет право первенства за более восприимчивыми и высокоорганизованными средствами восприятия, коим, как можно предположить, является слуховой канал. Т.е. чем совершеннее и привычнее для нас орган восприятия, тем больший объем полезной информации можно переработать в единицу времени. С точки зрения получения качественной и информативной зрительной картинки этот вопрос оказывается принципиальным. Другими словами, ухо более приспособлено для этой цели, чем спина или язык (Из того, что удалось понять) ИМХО) Хотя, при глубоком изучении проблемы все может оказаться с точностью до наоборот.)
VoiceDao
07.09.2015 16:05С другой стороны, как заметил Sergehog, при выборе в пользу зрения приходится неизбежно жертвовать, хотя бы частично-временно, слуховым каналом восприятия.
evr1ka
07.09.2015 20:57Интересный вариант использования нейропластичности.
Полагаю что так можно будет добавить в себя осознание чего-то нового, но при этом «приглушив» что-то другое, не столь нужное.
anatolikus
08.09.2015 20:59А со временем, я думаю, станет вполне возможным создание нейро-хаба (по аналогии с USB), позволяющего подключать до нескольких устройств одновременно.
evr1ka
08.09.2015 21:05На сколько я понимаю проблема не только в доставке информации через данный пинджак с сенсорами, но и источник получения информации. А самое интересное — непонятно зачем?
Я например читал за данную тему, так как есть необходимость у ребенка с отставанием, улучшить научение, и самое главное — чтобы научить говорить. Но пока не выходит.
jaguard
07.09.2015 22:25Помню прошлый пост про эту (или подобную) технологию. В комментариях промыли все косточки и не оставили камня на камне от идеи — мол, сами слепые технологию считают бесполезной и глупой, а ребята всё пилят и пилят непонятно для кого…
VoiceDao
07.09.2015 23:03… сами слепые технологию считают бесполезной и глупой — не более, чем мнение тех, кто волей судьбы в состоянии писать посты и комменты и никогда и не на минуту не оказывался в шкуре слепого человека. Сами по себе отзывы людей с этой патологией о достигнутых результатах кажутся лучшим аргументом подобной сухой, и не просто бесполезной, но и крайне вредной и циничной логике. ИМХО
VoiceDao
07.09.2015 23:12Результаты есть, безусловно, никто не говорит, что легко освоить методику, но возможно те, которые не сумели преодолеть этап аккомодации, заявили, что система не работает. Но ориентироваться то нужно наверное на тех, кто сумел использовать потенциал технологии и получил возможность ориентироваться в пространстве. Именно такие и есть этот самый пример.
Tseikovets
07.09.2015 23:55А вы считаете, что слепые типа не могут писать комментарии? Ну тогда для начала актуализируйте свои знания, а уже потом включайтесь в дискуссию о вспомогательных технологиях.
vOICe — это, действительно, абсолютно не то, что из этого пытаются сделать господа из российского движения трансгуманистов.VoiceDao
08.09.2015 00:33Речь идет не о том, могут писать комментарии слепые, или нет, а о том, работает ли система в принципе. Исследования, проведенные Мейером и отзывы реальных пользователей нельзя списывать со счета, о чем собственно шла речь в предыдущем посте. — Вот это имелось ввиду. Трудно поверить в то, что слепой человек когда-нибудь добровольно откажется от надежды вернуть себе хотя бы частично возможность видеть. "… мол, сами слепые технологию считают бесполезной и глупой" — как так, если слепые добиваются результата благодаря методике и вере в изменения.
Tseikovets
08.09.2015 15:13+1Трудно поверить в то, что слепой человек когда-нибудь добровольно откажется от надежды вернуть себе хотя бы частично возможность видеть.
Да, вот на этом авторы подобных сомнительных инициатив и спекулируют. Судя по всему, вас тоже цепляет именно эта слёзность темы, мешая воспринимать проект здраво. Только вот слепые, действительно, считают эту технологию бесполезной, причём, после реального знакомства с ней. Эти российские трансгуманисты в предыдущем посте несколько недель назад врали, что якобы не нашли отклика со стороны инвалидных организаций и добровольцев, только вот добровольцы за эти годы у них были, да и инвалидные организации они окучивают уже не первый год, но ни кто не отозвался положительно, поэтому их на новом PR-цикле как бы и списали, чтобы не портить статистику.
Сам тот факт, что люди, которые занимаются популяризацией vOICe, позволяют себе искажение фактических данных о технологии, проекте и ходе его реализации, уже говорит о многом. Я не считаю, что доводы типа «А вдруг всё-таки получится, нельзя отвергать даже маленькую вероятность помочь слепым» здесь уместны, потому что это эмоции, а рассуждать надо здраво.
vOICe чисто технически неспособна дать слепым достойную замену зрения. Сама по себе технология изначально из видео потока кодирует лишь очень малый объём данных, фактически всего лишь односторонний доминирующий контрастный контур в кадре. Если бы вы, вместо своего обычного зрения, стали воспринимать мир в виде линий доминирующих контрастных контуров, то от слепых вы бы не сильно отличались.
То есть vOICe на входе кодирует очень мало данных о картинке, так что и на выходе не может дать больше. Именно поэтому слепой на том конце просто не может получить какой-то достаточный для реального прикладного использования поток данных.
vOICe, действительно, позволяет с высокой долей вероятности научиться распознавать контуры контрастных простых фигур на однородном фоне. В отношении vOICe, действительно, работают адаптивные способности мозга, когда после тренировки звуковые сигналы начинают восприниматься на подсознательном уровне и человек уже перестаёт в режиме внутреннего диалога размышлять, что именно это за фигура, а воспринимает данные сходу.
Проблема лишь в том, что определение типовых контуров контрастных фигур на однотонном фоне — это вещь, которая слепым в повседневной жизни просто не нужна.
vOICe — это интересная академическая история, иллюстрирующая определённые компенсаторные механизмы, когда мозг реально адаптируется и начинает новые сигналы воспринимать сходу. Но перспектив прикладного использования у этого нет, потому что в повседневной жизни тех задач, которые способна решать vOICe, перед слепыми в принципе не стоит. А те задачи, которые слепые хотели бы решать, vOICe решить не может в принципе, так как, например, для навигации на открытом пространстве в полевых условиях она в принципе бесполезна. Российские же трансгуманисты взяли в сущности академический проект из девяностых и уже более пяти лет насилуют эту тему, пытаясь толи попиариться, толи отжать какой-то грант, толи всё вместе, при этом не гнушаясь искажением фактов и враньём.VoiceDao
08.09.2015 16:52Проблема лишь в том, что определение типовых контуров контрастных фигур на однотонном фоне — это вещь, которая слепым в повседневной жизни просто не нужна. — тут позвольте с вами не согласиться.… Определяя контуры окружающих предметов — стола, ступенек лестницы, дверей и пр. (включая при определенной тренировке глубину образа (в одном из отзывов пользовательница смогла со временем научилась воспринимать трехмерный образ раковины) у незрячего появляется возможность самостоятельного перемещения в пространстве. Чем интенсивнее тренировка, тем естественнее восприятие. — об этом говорят сами пациенты, утверждая что это работает.
Если бы вы, вместо своего обычного зрения, стали воспринимать мир в виде линий доминирующих контрастных контуров, то от слепых вы бы не сильно отличались… — вы неверно выбрали методику сравнения, приводя в пример человека который видел хорошо и стал видеть хуже. Напротив, речь идет именно о качественном улучшении возможностей слепого человека, получившего в свое распоряжение инструменты, улучшившие жизни.
А те задачи, которые слепые хотели бы решать, vOICe решить не может в принципе, так как, например, для навигации на открытом пространстве в полевых условиях она в принципе бесполезна.… Не буду уверенно утверждать, но, как мне кажется, навигация в полевых условиях — последнее, что действительно интересно слепому человеку.
Tseikovets
08.09.2015 17:57Определяя контуры окружающих предметов — стола, ступенек лестницы, дверей и пр. (включая при определенной тренировке глубину образа (в одном из отзывов пользовательница смогла со временем научилась воспринимать трехмерный образ раковины) у незрячего появляется возможность самостоятельного перемещения в пространстве.
Незрячий — это не беспомощный человек, которого носят на носилках.
Перемещение в знакомых помещениях для незрячих не является проблемой, а в незнакомых помещениях они быстро адаптируются, если только там нет какого-нибудь криминала, типа неожиданных провалов в полу.
Они не ходят как тупые боты в старых играх, натыкаясь на стены и перебирая ногами, упёршись в стену.
Даже обычные зрячие более-менее могут в темноте добраться в своей квартире до туалета, хотя им с непривычки и сложнее, чем незрячим.
К слову, какие-нибудь дверные проёмы и стены слепые слышат и так, просто по изменению распространения звука в их близи, хотя некоторые безграмотные реабилитологи для этого изобрели отдельное понятие «чувство препятствия», трактующееся как шестое чувство слепых.
То есть для перемещения внутри помещений какие-либо вспомогательные технологии незрячим вообще не нужны. Разве что технологии нахождения кабинета терапевта среди большого числа дверей в коридоре поликлиники, но это тоже решается совершенно другими технологиями, и vOICe тут ничем не поможет.
У незрячих, например, есть проблема невозможности прочитать плоскопечатный текст на бумаге или распознать CAPTCHA с картинки. Но это решается другим подмножеством технологий компьютерного зрения, называемым OCR.
У них есть проблема невозможности восприятия визуальной картинки с экрана, например, просмотра видеоряда телепередач или фильмов. Тут пока лучшей технологией является audio description или по-русски тифлокомментарий, когда происходящее на экране описывается за кадром человеком, так как компьютеры пока не настолько умны.
Ну и, конечно, у них есть проблема с перемещением на открытом пространстве. Например, если у вас на привычной дороге вдруг выроют яму, то для вас не будет проблемой её обойти. Для незрячего же это изменение привычного маршрута, а поскольку он не может глазами увидеть возможные обходные пути, то тут возникает проблема и тыканье в разные стороны наугад. Ну или, например, слепой не видит номера подходящих автобусов, а если автобус ещё криво подъехал к остановке, то надо как-то умудриться в него попасть, перепрыгнув лужу, найдя дверь и не споткнувшись о ступеньку.
Так что какой-то новый заменитель зрения реально востребован лишь в отношении уличной навигации по незнакомым маршрутам или маршрутам, где могут быть непрогнозируемые факторы. К сожалению, эти факторы на улице есть практически всегда: открытые люки, разрытые за ночь ямы, хаотично перемещающиеся другие люди, зачастую хамящие, если слепой их случайно задевает, по-разному подъезжающие к остановке автобусы, неожиданно припаркованные на тротуаре машины и пр.
Что же касается алгоритма представления информации в vOICe, то вы недопонимаете всей его ограниченности:
Во-первых, vOICe уже на входе кодирует только типовые контуры, доминирующие во всём кадре. Соответственно мелкие детали туда просто не попадают.
Во-вторых, алгоритм аппроксимирует фигуры, то есть контуры сглаживаются и, например, равносторонний многоугольник в один прекрасный момент превращается в круг. Причём, существенно раньше, чем для зрячего, для которого это проявляется лишь на очень мелких вещах.
В-третьих, алгоритм vOICe принципиально не способен кодировать глубину кадра. То есть это абсолютно плоское представление. Иными словами, свободная линия горизонта в дали и бампер машины в близи звучат в vOICe абсолютно аналогично. В 2D есть возможность получать псевдо 3D посредством теней и всего такого, но тут ничего этого нет, потому что мы кодируем лишь примерные контуры очень крупных предметов в кадре без теней, полутонов и др., так как такие мелкие детали звуком в принципе не передать. Некоторые тоже спорные технологии, типа ультразвуковых или инфракрасных очков и фонариков, хотя бы предлагают либо контроль дистанции срабатывания, либо полноценный дальномер, а вот vOICe глубину вообще не чувствует, что попало в кадр, то плоско анализируется и озвучивается, хоть за метр, хоть за 200 метров.
Всё это делает vOICe абсолютно бесполезной технологией при попытке её применить на неочищенных и неподготовленных изображениях. Ну а выше я уже объяснил, что какой-то суррогат зрения незрячим интересен именно в отношении восприятия этих самых неочищенных и неподготовленных изображений, например, осмотреться на улице, найти проход в толпящемся народе и пр.
Не буду уверенно утверждать, но, как мне кажется, навигация в полевых условиях — последнее, что действительно интересно слепому человеку.
Мне даже страшно спросить, что же на ваш взгляд тогда интересно слепому человеку? Вы просто ходячая энциклопедия неправильных стереотипов о незрячих. :-)
Утрата способностей к свободному перемещению в открытом пространстве и на пересечённой местности — это один из главных, если не главнейший, фактор, снижающий качество жизни после потери зрения.
Уже после этого идут более ситуативные факторы, которые актуальны даже не для всех незрячих, типа невозможности пользования банкоматами и платёжными терминалами, невозможности работать с некоторыми программами на компьютере, невозможности визуально контролировать степень готовности блюда в духовке или на сковородке, невозможности читать сложные графические символы, типа математических формул или нотного текста, невозможности без помощи зрячего подписать бумажный документ (надо поставить руку незрячего в нужное место) и т.д.
В общем в реальной жизни незрячим абсолютно не нужно звуковое представление контуров на очищенных изображениях, а ничего другого vOICe предложить в принципе не может. Именно поэтому вся эта суета вокруг данной технологии просто бессмысленна, и именно поэтому слепые реально её не используют и использовать не будут.VoiceDao
08.09.2015 19:20вы неоднократно впадаете в крайности, ув. Tseikovets — платежки, математические формулы, невозможность работы с программами, навигация в полевых условиях (вообще когда комментировал — имел ввиду буквальную интерпретацию этого слова, «как написано»… Если имели ввиду способности к свободному перемещению, то называется это именно так, «полевые условия» здесь не совсем к месту. Но не в этом суть…
Я уверен в том, что тот самый Мейер, который развивает проект как некоммерческий не заинтересован представлять на своем сайте отзывы нереальных пациентов, поскольку меркантильный аспект, как и стремление к признанию здесь явно отсутствуют. И уж, простите, все же эти отзывы звучат убедительнее, чем все представленные здесь альтернативные аргументы в своей совокупности, включая отзыв о глубине мойки, которую пациентка научилась оценивать, что абсолютно противоречит вашему представлению о том, что "… алгоритм vOICe принципиально не способен кодировать глубину кадра". Какие промежуточные инструменты мозг задействовал для интерпретации на таком уровне — я не знаю, поскольку не специалист, как вы, но Отзыву почему то верю, в силу вышесказанных причин.
Тот факт, что слепые боятся или не хотят расставаться с одним из основных каналов восприятия — слуховым, вполне понятен, но их нежелание или нерешительность нельзя принимать как доказательство того, что технология тупиковая. Есть и те, кто попробовал и об этом написал — можно прочесть в этой статье или на сайте Мейера.
Дальнейший спор считаю непродуктивным, поскольку мне не хватает теоретических знаний (опираюсь только на факты), вам — - независимости от собственного опыта.
Еще раз спасибо за то, что нашли время отписать в комментариях — действительно много интересного.Tseikovets
08.09.2015 20:41Я уверен в том, что тот самый Мейер, который развивает проект как некоммерческий не заинтересован представлять на своем сайте отзывы нереальных пациентов, поскольку меркантильный аспект, как и стремление к признанию здесь явно отсутствуют.
А Мейер никогда и не позиционировал vOICe как какой-то прорыв, всегда осторожно говоря, что надо работать, смотреть, возможно из этого что-то получится. Для него это как раз был академический эксперимент.
Это трансгуманисты пытаются из vOICe раздуть целую историю, типа «открываем скрытые возможности мозга по адаптации к раздражителям нового типа и делаем слепых зрячими, и вообще вперёд в будущее, где мы все будем кибергами, потому что это очень трансгуманистично».
И уж, простите, все же эти отзывы звучат убедительнее, чем все представленные здесь альтернативные аргументы в своей совокупности, включая отзыв о глубине мойки, которую пациентка научилась оценивать, что абсолютно противоречит вашему представлению о том, что "… алгоритм vOICe принципиально не способен кодировать глубину кадра".
Расстояние до предмета vOICe, действительно, оценить не может. Для этого нужно две камеры (посмотрите элементарную схему стереоскопического дальномера пассивного типа), а vOICe анализирует кадр с одной камеры.
Проблемы с объёмным зрением начинаются даже у одноглазого человека при полностью здоровом втором глазе. К счастью, само внутреннее устройство глаза более сложное, чем просто объектив камеры, что частично спасает.
Отзыв реципиента (всё-таки термин пациент мне тут не нравится) про раковину — это, скорей всего, неточность описания или перепутанные понятия.
Вероятнее всего, там речь о чём-то типа того, что она смогла, бегая с vOICe вокруг, примерно составить условно объёмные представления о предмете, типа сопоставив множество плоских изображений с разных ракурсов. Короче, что-то типа спрайтов, натянутых на полигоны в старых компьютерных играх.
Опять же чисто экспериментальная история, так как в реальной жизни незрячему быстрее и проще было бы это пощупать руками, а с большими или удалёнными предметами, которые пощупать нельзя, это и с vOICe бы не получилось.
Дальнейший спор считаю непродуктивным, поскольку мне не хватает теоретических знаний (опираюсь только на факты), вам — — независимости от собственного опыта.
Ваше права, я лишь хочу, чтобы люди могли ознакомиться не только с тем булшитом, который написан в этой статье, но и с альтернативным аргументированным взглядом на vOICe. Причём, хорошо, пускай я несу чушь, но вот от соответствующей дискуссии эти трансгуманисты в предыдущем посте уже уклонились, хотя они молодые учёные энтузиасты и один из них — это, как они заявляют, аспирант, занимающийся исследованиями мозга. Только вот ни одной научной статьи я от господина Трапезникова, не видел, хотя для защиты кандидатской надо иметь минимум 5 общих публикаций и 3 публикации в рецензируемых научных журналах из списка, утверждённого Высшей аттестационной комиссией Министерства науки и образования, поэтому публиковаться аспирант просто обязан, иначе смысла сидеть в аспирантуре нет, так как до защиты его просто никто не допустит. OK, возможно он там просто тусуется с друзьями, это его личное дело, но тогда и не надо козырять своей принадлежностью к академическим кругам, рассказывая о vOICe.VoiceDao
08.09.2015 21:35я лишь хочу, чтобы люди могли ознакомиться не только с тем БУЛШИТОМ )), который написан в этой статье… и вправду пора заканчивать, а закончу я цитатой «рецепиентки»: "… Не знаю, является ли это особым человеческим языком, но это точно язык, которым мои уши говорят моему разуму, что я сейчас вижу. Называйте, как хотите, это работает! Больше я не смогу без этого обходиться! Спасибо за это изобретение!"
Tseikovets
07.09.2015 23:50… проекта, реализуемого сегодня командой российских ученых – энтузиастов…
У этих «учёных» нет ни одной научной публикации не только в журналах ВАК, но даже просто в РИНЦ. Причём ни одной публикации не только по vOICe, но вообще.
Так же совсем недавно появились мобильные версии приложений “The vOICe for Windows” и “The vOICe for Android” для смартфонов
«Совсем недавно» это когда именно? Этим приложениям уже много лет. Оно было ещё в Android Market во времена 2.x.
В общем очередная PR-атака российских трансгуманистов, которые и форсят эту тему с vOICe, при этом полностью сливаясь при встрече с людьми, разбирающимися в теме вспомогательных технологий. К слову, в проекте у ребят нет ни одного незрячего человека.
Эй, хозяева блога, готовы разделить с российскими трансгуманистами репутационную ответственность за этот подобострастный тон статьи и искажённые факты? Тогда давайте пообщаемся!VoiceDao
08.09.2015 00:48+1Возможно идея во многом, что называется и «слизана» у Мейера (чего они и не скрывают и что в общем то упомянуто в материале), но если у них получиться достичь результата и сделать его доступным всем желающим — респект TEAM VOICE RUSSIA! И совершенно не имеет значения, называют ли их трансгуманистами или кем-то еще. Важен результат. И подобострастие здесь вовсе не причем. Возможно для конечного пользователя технологии будет намного больше поводов сказать спасибо этой команде, чем убеленным сединами и отягощенными регалиями и научными степенями скептикам, традиционно предпочитающим рассуждение действию.
VoiceDao
08.09.2015 00:58Уважаемый Tseikovets, хочется верить в исключение из правил, в то что они действительно преследуют благие цели, а не в 100500-й раз используют проблемы слепых людей для самопиара и ситуативной прибыли.
Tseikovets
08.09.2015 15:14Меня немного утомляют эти ваши пассажи про гиков теоретиков, которые гнобят крутых практиков с горящими глазами из российского трансгуманистического движения. Превосходство практиков над теоретиками проявляется лишь в конкретных достигнутых результатах, а не в самом статусе практика. Пока практик не показывает результат, он стоит ниже теоретика, так как точно также ничего не достиг, но в добавок ещё и не имеет теоретической базы. К тому же vOICe в их исполнении, это как раз теоретизирование без реального понимания прикладных аспектов. Но если уж вы так склонны к пиетету перед практиками, то могу вас успокоить — лично я в сфере вспомогательных технологий для незрячих больший практик, чем все трансгуманисты этой планеты вместе взятые. Причём, никакого конфликта интересов у меня в отношении этого проекта нет, так что я ещё и беспристрастен.
VoiceDao
08.09.2015 16:33Превосходство практиков над теоретиками проявляется лишь в конкретных достигнутых результатах, а не в самом статусе практика. Пока практик не показывает результат, он стоит ниже теоретика, так как точно также ничего не достиг, но в добавок ещё и не имеет теоретической базы. — здесь полностью с вами согласен.
VoiceDao
08.09.2015 01:34Этим приложениям уже много лет. Оно было ещё в Android Market во времена 2.x.… Возможно вы располагаете боле полной информацией, но судя из статистики упоминаний о приложении на официальном сайте vOICe, первые сведения о работах с приложением относятся к марту 2012 года, последние к марту 2013 года, т. е., в сравнении со временем существования разработки, к вполне обозримому прошлому:
March 20, 2013, The vOICe for Android was featured by Russell Holly on geek.com «App developer hopes to use Google Glass to help the blind see»
February 6, 2013, The vOICe for Android was featured by Paul Warner of VICT Consultancy in his podcast «Understanding The vOICe for Android»
June 15, 2012, The vOICe for Android mentioned in The Huffington Post article «Navigation Glasses For The Blind Help Visually Impaired See Through Sound»
April 6, 2012: The vOICe for Android and Google's Project Glass in Foundation Fighting Blindness blog article «We've Been Googled»
March 16, 2012: The vOICe for Android mentioned in PLoS ONE paper "'Visual' Acuity of the Congenitally Blind Using Visual-to-Auditory Sensory Substitution" Поправьте, если я не прав — буду благодарен.Tseikovets
08.09.2015 15:15+1Приложение для Android было ещё раньше.
Вот URL его страницы в Android Market (тогда так назывался Play Market):
market.android.com/details?id=vOICe.vOICe
Web Archive имеет её копию от 16 августа 2011 года, а в действительности релиз состоялся ещё раньше.
Более того, ещё до появления Android и iOS, приложение vOICe существовало в J2ME варианте, так что всей этой мобильной истории очень много лет. Называть это «сравнительно недавно», особенно в контексте общей протяжённости истории мобильных приложений, на мой взгляд, точно нельзя.VoiceDao
08.09.2015 16:53Tseikovets — большое спасибо за интересные и содержательные посты! Несмотря на то, что по многим вопросам я и часть публики позволят себе все же остаться при своем мнении, вы рассказали много интересного и полезного!
nomadmoon
22.09.2015 10:06Немного не понял, если есть “The vOICe for Android” то можно же просто малыми силами экспериментально проверить. Прикрепить андроидофон к строительной каске и ходить некоторое время с ним.
Tseikovets
22.09.2015 14:38Да, можно. Куча незрячих это делали. Делали как с Android-версией, так и с Java Mobile ещё много лет назад. У российских трансгуманистов есть масса отрицательных отзывов от незрячих, просто им на это плевать, и они предпочитают врать и рассказывать, что до незрячих им достучаться не удалось. На самом деле удалось и всё это тянется уже много лет, а не началось только что.
Вы же сами видите, авторы проекта не готовы открыто обсуждать его с людьми, которые не просто пускают слезу от вида незрячих, а понимают специфику стоящих задач. Случайные же сторонники предпочитают просто копипастить слезливый маркетинговый хлам из Интернета, даже не понимая, что одной камерой в принципе не возможно определять расстояние до предметов и для этого нужно две разнесённые камеры, чтобы хотя бы попытаться повторить принцип стереоскопического дальномера. Но вообще vOICe в принципе не предполагает анализ глубины изображения, это история чисто про озвучивание плоских контуров.
Короче все эти проекты прикладного использования академических наработок vOICe — это либо чьё-то враньё, либо чья-то некомпетентность.
sergehog
Я слышал что слепые (плохо-видящие) люди не любят когда им закрывают уши наушниками или прочими устройствами. Они ведь используют и обычный аудио-канал чтоб узнать что происходит вокруг. Получается что им вернули зрение, но забрали слух.
VoiceDao
Главное, на мой взгляд, что у них появилась возможность выбора, а далее, как сами расставят приоритеты
VoiceDao
Ну и ориентироваться, скажем на улице или в пустом доме, все-таки, наверное информативнее, используя зрительное восприятие
worldmind
Надо заменить наушники на те которые не закрывают уши, а передают звук через кость