среды и конвертирует их в вибрации, которые передаются на кожу встроенными в жилет моторчиками (рис. 4.14). Это позволяет человеку кожей ощущать звуковую картину окружающей реальности.
Рис. 4.14. Сенсорный жилет Neosensory Vest. Звук передается коже и воспринимается как различимые паттерны вибраций
Syed Rahman
Если вы не верите, что такой способ может возыметь эффект, напомню, что ровно то же самое проделывает ваше внутреннее ухо: раскладывает звук на частоты (от низких до высоких) и в таком виде сгружает данные мозгу для интерпретации. В сущности, мы всего лишь переместили внутреннее ухо на кожу.
Уму непостижимо, какими изощренными вычислительными возможностями обладает человеческая кожа, однако в современной жизни они мало используются. Если бы какой-нибудь стартап в Кремниевой долине синтезировал подобный материал, за него отвалили бы огромные деньги, хотя он в натуральном виде имеется под одеждой у каждого из нас. Правда, почти все время простаивает без дела. Конечно, задействовать столь чувствительный орган было бы неплохо, но сразу возникает вопрос: достаточно ли широка у него полоса пропускания[24], чтобы передавать звуковую картину во всей полноте. Напомню, что ушная улитка — в высшей степени специализированная структура, ее изысканно-прихотливая форма идеальна для приема и кодирования звука. Кожа, в отличие от улитки, предназначена для восприятия воздействий совсем иного рода, а ее пространственное разрешение оставляет желать лучшего. Для передачи на кожу всей полноты информации, которую играючи улавливает внутреннее ухо, потребовалось бы несколько сотен вибротактильных моторчиков — слишком много, чтобы навесить их на человека. Но за счет сжатия речевой информации можно обойтись менее чем тремя десятками моторчиков. Как это может быть? Суть сжатия речевых сигналов заключается в извлечении максимума смысла из информации любого объема. Возьмем, например, разговор по сотовому телефону: вы что-то говорите, а ваш голос слышит собеседник. Но на самом деле то, что он слышит, совсем не ваш напрямую передаваемый ему голос. Сотовый телефон производит цифровое семплирование, или дискретизацию, вашей речи (через равные промежутки времени берет отсчеты — семплы — аналогового, то есть непрерывного сигнала) 8 тысяч раз за секунду. Затем алгоритмы выделяют из этих тысяч отсчетов важную информацию, и этот сжатый сигнал передается на вышку сотовой связи. Посредством техники сжатия сигнала Neosensory-жилет улавливает звуки и «проигрывает» эту звуковую картину на коже за счет вибрации десятков моторчиков43.
Первым участником испытаний Neosensory-жилета стал 37-летний Джонатан с врожденной полной глухотой. На протяжении четырех дней мы просили его надевать жилет и по два часа тренироваться в распознавании набора из тридцати слов. На пятый день Скотт, прикрыв ладонью рот (чтобы нельзя было прочитать по губам), произнес слово «трогать». Джонатан ощутил на коже под жилетом сложный паттерн из вибраций и написал это слово на маркерной доске. Тогда Скотт произнес слово из другой части речи («где»), и Джонатан снова написал его правильно. Итак, он оказался способен раскодировать сложносочиненный паттерн вибраций и понять, какое слово произнесено, причем не в результате сознательного умственного усилия (паттерны вибраций слишком сложны для этого), мозг сам производит раскодирование. Затем мы переключились на изучение следующего набора слов, и Джонатан по-прежнему хорошо справлялся с заданиями, это свидетельствует о том, что он не просто запоминал отдельные конфигурации вибраций, а обучался слышать. Иными словами, если у вас со слухом все в порядке, я мог бы произнести незнакомое вам слово schmegegge (шмеджэдж, то есть полная несуразица), и вы прекрасно различили бы его — не потому, что когда-то слышали и запомнили, а потому, что умеете пользоваться слухом.
Мы разработали наше заместительное устройство в нескольких формах, в том числе как нагрудный пояс для детей (рис. 4.15). Его действие было испытано на группе глухих детей в возрасте от двух до восьми лет. На протяжении всего испытательного периода родители чуть ли не каждый день слали мне видеоролики, демонстрирующие прогресс их малышей. На первых порах было неясно, происходит ли хоть что-нибудь, а потом мы стали замечать, что дети останавливаются и сосредоточиваются, когда кто-то из родных нажимает на клавишу пианино.
Рис. 4.15. Двое малышей используют нагрудный вибрационный пояс
Syed Rahman and Emily Stevens
Помимо этого, дети и сами стали произносить больше звуков, поскольку у них впервые в жизни замкнулась петля обратной связи: они издавали некий звук и сразу ощущали входной сенсорный сигнал. Вы наверняка не вспомните, но именно таким образом сами в младенчестве учились пользоваться ушами: лепетали, гулили, хлопали в ладошки или били по деревянным прутьям кроватки — и ощущали обратную связь в этих странных штуках по обе стороны головы. Именно так вы учились расшифровывать входящие звуковые сигналы: сопрягали собственные действия с их последствиями. Теперь представьте, что нагрудный пояс надет на вас самих. Вы громко произносите начало панграммы (стандартной проверочной фразы «Шустрая бурая лисица…», содержащей все буквы английского алфавита[25]) и в тот же момент кожей ощущаете эти слова. Ваш мозг учится связывать звук и тактильное ощущение и понимать непривычный вам язык вибраций44. Как мы увидим чуть ниже, лучший способ прогнозировать будущее — самим создавать его.
Кроме того, мы разработали тактильно-звуковой заместитель в виде браслета на запястье (Buzz), у которого всего четыре моторчика. Степень разрешения у него ниже, но для многих людей с учетом их образа жизни он более практичен. Пользователь Филипп рассказал нам о своем опыте ношения браслета Buzz на работе в ситуациях, когда он забывал выключить воздушный компрессор:
«Я по обыкновению оставляю его включенным, пока хожу туда-сюда, и тогда коллеги говорят: “Смотри-ка, ты опять не выключил компрессор”. А теперь я ношу Buzz и чувствую: что-то работает. И сразу проверяю, не включен ли компрессор. И уже сам напоминаю коллегам, что они забыли вырубить его. А они каждый раз искренне удивляются: “Постой, а ты-то откуда знаешь?”»
Филипп сообщает, что может определить, когда лают его собаки, в кране журчит вода, звонит входной звонок или жена зовет его (раньше она никогда не произносила его имя, а сейчас это вошло у нее в привычку). Беседуя с Филиппом через полгода после того, как он начал пользоваться устройством Buzz, я тщательно протестировал его внутренний опыт: воспринимает ли он работу Buzz на своем запястье как вибрации, которые следует расшифровать, или же улавливает звуковые сигналы напрямую? Проще говоря, когда на улице завывает сирена скорой помощи, ощущает ли он это как вибрацию на коже, обозначающую включенную сирену, или же сразу знает, что где-то там к больному спешит скорая помощь. Филипп ясно дал понять, что
