Инновации 13 октября 2021

Видеть, слышать и говорить

Компания 4Blind разработала коммуникатор «ВиброБрайль» — устройство для коммуникации с людьми, у которых одновременно нарушены зрение, слух и речь. Аналогов ему в мире нет
Видеть, слышать и говорить
Коммуникатор «ВиброБрайль» переводит текст, набранный по принципу шрифта Брайля, в синтезированную речь и наоборот
НИТУ «МИСиС»

Прибор, похожий на игровую консоль, переводит текст, набранный по принципу шрифта Брайля, в синтезированную речь и наоборот. Команда инженеров и разработчиков компании 4Blind совместно с молодыми инженерами НИТУ «МИСиС» и конструкторским бюро Karfidov Lab выполнили работы по дизайну, корректировке платы (добавили дополнительный Bluetooth-модуль) и изготовлению корпуса. Прямых аналогов устройства нет ни в России, ни за рубежом. В 2019-2020 гг. компания приняла участие в акселераторе Seasons Tech, реализуемом при поддержке "Иннопрактики».

«В ходе проектирования приходилось решать ряд проблем, довольно нетипичных при калькировании обычных изделий, — рассказал “Стимулу” Алексей Карфидов, заведующий кафедрой инжиниринга технологического оборудования МИСиС, сооснователь и генеральный конструктор Karfidov Lab. — Например, разработка кнопок, рычажковых переключателей. Обычному человеку их переключить просто, но, если этот человек слепой, ему их нелегко нащупать, поэтому они должны иметь определенный рельеф. С одной стороны, они должны быть достаточно легко переключаемы, а с другой — должны иметь довольно четкую обратную тактильную связь, чтобы при переключении происходил некий щелчок или вибрация, которые давали бы понять, что переключение из одного положения в другое состоялось».

magnifier.png Устройство работает вместе с приложением на мобильном телефоне, с которым оно связано по Bluetooth. За счет словаря значений, реализованного в приложении, где каждому брайлевскому символу соответствует буква алфавита, осуществляется перекодировка слов в тактильные сигналы и наоборот

В результате получился небольшой гаджет с шестью кнопками на фронтальной панели и со встроенными тактильными элементами, передающими пользователю на кончики пальцев при помощи вибраций сигналы по принципу шрифта Брайля. Устройство работает вместе с приложением на мобильном телефоне, с которым оно связано по Bluetooth. За счет словаря значений, реализованного в приложении, где каждому брайлевскому символу соответствует буква алфавита, осуществляется перекодировка слов в тактильные сигналы и наоборот.

Матрица прибора простая: два столбика и три строки. Например, слово «привет» состоит из шести букв, пользователь набирает их с помощью шести основных клавиш, нажимает кнопку, подтверждающую ввод, и устройство озвучивает слово, выводя на динамик. Чтобы инициировать общение, собеседнику достаточно нажать специальную кнопку на устройстве — пользователь начинает чувствовать вибрации, означающие приглашение к диалогу. Далее собеседник произносит то, что хочет сказать, его речь переводится в текст, а текст конвертируется в тактильные сигналы по принципу шрифта Брайля. Таким образом, пользователь понимает, что сказал ему собеседник.


ДИВОВ.jpg
Технический директор компании 4Blind Андрей Дивов
4Blind

«Коммуникатор легкий в освоении и компактный. Его можно использовать практически в любом месте: дома, на улице, в транспорте, в учреждении. Конечно, мы учитывали эргономику, расположение кнопок и удобство навигации исходя из того, для кого мы делаем устройство. Поэтому при разработке мы полностью опирались на мнение руководителя отдела дизайна и пользовательского интерфейса Сергея Флейтина, который является слепоглухим человеком», — говорит технический директор компании 4Blind Андрей Дивов.


Дать радость общения

О возможностях уникального устройства и о истории его создания «Стимулу» рассказал основатель и руководитель 4Blind Федор Беломоев.

«Я раньше занимался благотворительностью и думал, что на этом и остановлюсь, — говорит он. — Я владел кейтеринговой компанией, помогал детским домам, организовывал различные праздники, мероприятия. И как-то вдруг осознал, что в мире существуют люди, которые живут в полной темноте и полном безмолвии, слепоглухие. А так как они не могут ни видеть, ни слышать, они не могут и говорить. И я узнал, что пообщаться с кем-то они могут только с помощью рядом стоящего тифлосурдопереводчика. Есть язык глухих, когда люди смотрят друг на друга и общаются с помощью жестов. А слепоглухие общаются практически на этом же языке, но засовывая свои руки в руки переводчика, чтобы он мог передать информацию собеседнику. Моих знаний было достаточно, чтобы помнить о существовании шрифта Брайля и понимать, что существует такая штука, как синтезатор и распознаватель речи. И я подумал: а почему бы все это не объединить в какой-то гаджет? Повысить уровень жизни слепоглухих людей с точки зрения общения».

magnifier.png «К примеру, к врачу ты приходишь вместе с переводчиком, который знает обо всех твоих болячках. Ты приходишь в банк, и он знает, сколько у тебя на счете, он за тебя произносит нужную информацию. Ты не можешь пообщаться ни с адвокатом, ни с нотариусом. Тебе всегда необходим посредник, причем этот посредник стоит дорого»

Одна из проблем, с которой сталкиваются слепоглухие люди, — полное отсутствие конфиденциальности. Напрямую с человеком ты не можешь поговорить никогда. «К примеру, к врачу ты приходишь вместе с переводчиком, который знает обо всех твоих болячках, — поясняет руководитель 4Blind. — Ты приходишь в банк, и он знает, сколько у тебя на счете, он за тебя произносит нужную информацию. Ты не можешь пообщаться ни с адвокатом, ни с нотариусом. Тебе всегда необходим посредник, причем этот посредник стоит дорого. В Москве час сопровождения слепоглухого человека — тысяча рублей».

В регионах таких специалистов очень мало, надо стоять в очереди и ждать: часто на несколько городов — один человек. В лучшем случае, если повезло, выучить язык жестов и помогать общаться могут родственники. И все равно приходится зависеть от другого человека, хоть и близкого. Большинству такой способ коммуникации не нравится, они им почти не пользуются. Поэтому жизнь слепоглухого, поскольку он живет в информационном вакууме, может быть очень короткой, сорок-пятьдесят лет. Они живут меньше обычных людей, потому что мозг не развивается, в него не поступает информация.

«А наше устройство просто вытягивает этого человека, полностью меняет его жизнь, создает ему новые возможности для общения, — уверен Федор Беломоев. — Теперь он независим, в любой момент, двадцать четыре часа в сутки, у него есть гаджет, с помощью которого он может услышать речь собеседника, сообщить что-то сам, подойти к любому человеку на улице, попросить помощи, пообщаться в магазине. Мы, конечно, не говорим, что это устройство позволит ему ходить по улице самому, но общаться он сможет самостоятельно. В магазин его должны привести, но это уже может сделать обычный человек, а не специальный тифлосурдопереводчик».


БЕЛОМОЕВ.jpg
Основатель и руководитель компании 4Blind Федор Беломоев
4Blind

Тестовые испытания коммуникатора «ВиброБрайль» уже прошли в этом году в фонде поддержки слепоглухих людей «Со-единение». Устройства есть в библиотеке для слепых в Санкт-Петербурге, скоро они появятся и во многих других местах. Такие гаджеты могут закупить себе реабилитационные центры, использовать их, в том числе на мероприятиях, предоставлять волонтерам, чтобы они могли со слепоглухим человеком пообщаться, куда-то проводить, чем-то помочь.

«Коммуникатор решает базовую потребность слепоглухих людей — потребность общения, потому что, к сожалению, это огромная проблема для такого человека с кем-то даже просто поговорить, спросить, как дела, попросить помощи. Для общения, как правило, требуется тифлосурдопереводчик, то есть посторонний человек, а если его нет, то иногда даже в семье с близкими трудно нормально поговорить. Поэтому устройство совершенно точно найдет своих пользователей», — рассказал «Стимулу» Денис Кулешов, генеральный директор лаборатории «Сенсор-Тех». Это дочерняя организация фонда «Со-единение», занимающаяся созданием умных технологий для людей с нарушениями слуха и зрения.

magnifier.png Такое устройство, по словам Федора Беломоева, раскрывает для слепого человека целый список новых профессий. Становятся доступны графика, чертежи, блок-схемы, просто картинки, географические карты, а это, к примеру, такие профессии, как инженер, дизайнер

Стоит отметить, что языком Брайля, который необходим для пользования устройством «ВиброБрайль», сейчас овладевает большинство слепоглухих людей. Как поясняет Сергей Флейтин, существует целый ряд курсов, где им помогают получать необходимые для жизни знания, в том числе учат азбуке Брайля. Кроме того, в скором времени 4Blind планирует реализовать режим обучения системе Брайля — таким образом, человек может одновременно и изучать язык, и учиться пользоваться этим устройством.

«Коммуникатор, конечно, не универсальное решение, — говорит Сергей Флейтин, — он не заменит брайлевский дисплей, не заменит книги, но благодаря этому устройству есть шанс, что тотально слепоглухие люди получат такие возможности, которые раньше для них были недоступны. К тому же у коммуникатора есть значительные преимущества по сравнению с традиционным брайлевским дисплеем. Во-первых, дисплей более чем в три раза дороже. Во-вторых, его очень неудобно брать с собой из-за довольно большого размера, к тому же гаджет требует очень бережного, аккуратного отношения».

Дисплей Брайля — это электронное устройство размером с обычную клавиатуру для отображения и набора текстов рельефно-точечным шрифтом. Оно позволяет считывать информацию с компьютера или мобильного телефона. Дисплей оборудован специальной брайлевской строкой, или строкой вывода текста, на которой символы Брайля выступают над плоской поверхностью устройства в виде вертикальных штырей, меняющихся в зависимости от того, какому знаку они соответствуют. Брайлевский дисплей, как и синтезатор речи, применяется только в сочетании с программой экранного доступа. Для слепоглухих такое устройство — единственный способ получения доступа к экранной информации.


ДИСПЛЕЙ.jpg
Дисплей Брайля предназначен для отображения и набора текстов рельефно-точечным шрифтом, для слепоглухих такое устройство — единственный способ получения доступа к экранной информации
4Blind

Тактильные картинки

Работая над созданием коммуникатора «ВиброБрайль», Федор Беломоев стал больше общаться и со слепыми людьми, изучать, как они живут, и увидел, что на рынке отсутствует важнейшая вещь для слепых людей с точки зрения доступа к графическим изображениям. Сейчас, чтобы изучить какую-то картинку, они используют специальный принтер. И печатают на этом принтере точечками на специальной бумаге. Такой принтер — он называется брайлевский — стоит от 400 тысяч до миллиона рублей.

«И чтобы потрогать какую-то картинку в точечках, нужно заплатить огромные деньги. Конечно, большинство слепых не покупают такие устройства. Брайлевские принтеры стоят в библиотеках для слепых, там печатают, к примеру, иллюстрации к книжкам».

Это натолкнуло руководителя 4Blind на мысль создать тактильный планшет — Braille Pad. С виду это самый обычный iPad, только с тактильно-рельефными формами, с теми же самыми точечками, но в интерактивном формате, чтобы не нужно было печатать странички на дорогом принтере. Такое устройство, по словам Федора Беломоева, раскрывает для слепого человека целый список новых профессий. Становятся доступны графика, чертежи, блок-схемы, просто картинки, географические карты, а это, к примеру, такие профессии, как инженер, дизайнер.


КУЛЕШОВ.jpg
Генеральный директор Лаборатории «Сенсор-Тех» Денис Кулешов
Фонд «Со-единение»

В мире многие пытались и пытаются сделать такие устройства. Но пока только одна компания, немецкая Metec AG, выпустила брайлевский планшет, он стоит 13 тысяч долларов США, так как выполнен по очень дорогой пьезокристаллической технологии. А в Braille Pad используется значительно более дешевая и не менее надежная технология шарнирно-перекидного механизма тактильных элементов.

Восьмидюймовый дисплей Braille Pad содержит 3234 тактильных пикселя и может передавать изображение в самых точных деталях. Устройство адаптировано не только для чтения изображений, но и для текста по Брайлю. Braille Pad имеет встроенную камеру, что позволяет делать моментальные тактильные снимки. Гаджет работает на базе Linux, включает в себя интеллектуальную программу, позволяющую переводить стандартные графические изображения в контурные тактильные.

magnifier.png «Мы придумали следующее: договорились с одной компанией, финансовой группой. Они предоставили всем нашим клиентам беспроцентную рассрочку на приобретение нашего устройства по подписке. То есть вместо того чтобы платить шестьсот долларов, любой гражданин любой страны, может подписаться на “ВиброБрайль” за 25 долларов в месяц»

«Эту инновацию мы сейчас показываем во всем мире, видим интерес крупных компаний к нам как к стартапу с точки зрения инвестиций, — рассказывает Федор Беломоев. — Это будет революция уже для более широкой аудитории, и для меня это очень важно как для предпринимателя, потому что емкость рынка устройств для слепых намного больше, чем для слепоглухих. Слепоглухих в России около трех тысяч человек, а слепых — больше ста тысяч».

По словам Федора Беломоева, коммуникатор «ВиброБрайль» — это в какой-то степени социальная история, благотворительность, потому что окупаемость гаджета, мягко говоря, очень сложная. А что касается тактильного планшета, это действительно большой рынок, большие возможности для развития компании, чтобы создавать новые устройства, новые технологии.

«Этот гаджет будет людям, конечно же, очень полезен, — считает Денис Кулешов. — И слепоглухие, которые активно пользуются Брайлем, я думаю, с удовольствием в таком формате будут читать, потому что это как электронный блокнот, электронная книга, которую можно брать с собой и любые текстовые материалы смотреть, а также, как заявлено авторами, устройство даже графику сможет перерабатывать и в формате объемных картинок отображать на дисплее. Но эта технология дорогая и в разработке, в производстве, и позволить себе планшет смогут далеко не все».


Первая партия распродана

Коммуникатор «ВиброБрайль» можно приобрести, и стоит он 599 долларов. Недавно выпущена партия устройств в количестве 50 штук, которая уже разошлась: часть купили за рубежом, часть осталась в России. Новые партии будут выпускаться в зависимости от накопления запросов. В среднем по 50‒100 штук.

«Мы придумали следующее, — рассказывает Федор Беломоев, — договорились с одной компанией, финансовой группой. Они предоставили всем нашим клиентам беспроцентную рассрочку на приобретение нашего устройства по подписке. То есть вместо того чтобы платить шестьсот долларов, любой гражданин любой страны, воспользовавшись этим сервисом, может подписаться на “ВиброБрайль” за 25 долларов в месяц. То есть ты не платишь всю сумму сразу, ты платишь 25 долларов в месяц в течение двух лет. Все подписал, на сайте оформил, указал свою карту, и с нее списываются платежи. Через 24 месяца устройство полностью переходит в твою собственность».

magnifier.png Коммуникатор «ВиброБрайль» можно приобрести, и стоит он 599 долларов. Недавно выпущена партия устройств в количестве 50 штук, которая уже разошлась: часть купили за рубежом, часть осталась в России

А так как это подписка, то через восемь месяцев, если устройство больше не нужно, от него можно отказаться, и подписка автоматически отключается. Издержки компании покрываются тем, что сотрудники меняют корпус, и получается новое устройство, которое можно опять передать кому-то по подписке. И оно уже передается как подписная модель, а не как новый гаджет. Можно попользоваться и вернуть, как самокат, как машину, которую берут напрокат.

Образцы планшета 4Blind планирует показать в конце октября в Бостоне и в начале ноября в Катаре. Стоимость устройства — 2390 долларов. Его также можно купить по подписке за 99 долларов в месяц.

Темы: Инновации

Еще по теме:
27.03.2024
Американский стартап Boom Supersonic провел первый успешный тестовый полет своего экспериментального демонстратора XB-1....
13.03.2024
Ученые Томского политехнического университета создали установку для дезактивации радиационно загрязненного бетона
05.03.2024
Уральские ученые разработали портативную платформу для экспресс-диагностики вирусных и бактериальных заболеваний. Платфо...
01.03.2024
Американская корпорация Apple решила свернуть долгосрочный секретный проект по самостоятельной разработке электромобилей...
Наверх