Как слепой может «увидеть» данные с микроскопа
В университете Пардью в Индиане создали новую систему, которая использует гаптическое устройство — интерфейс, дающий информацию, к которой можно прикоснуться или ощутить физически, чтобы люди могли интерпретировать ее с помощью собственных рук.
Этот сложно устроенный джойстик связан с компьютером, соединенным с микроскопом. Например, вы двигаете джойстик, изучая изображения под микроскопом — в данном случае, пятна крови. Джойстик толкается в руку, когда вы зависаете над стенкой кровяной клетки, или вибрирует, симулируя различные текстуры.
В испытаниях со слепыми людьми или зрячими, но с повязкой на глазах, испытуемые смогли отличить красные и белые кровяные тельца, основываясь исключительно на сенсорном фидбэке. Они смогли получить значимую информацию о текстуре, форме и цвете объектов на изображении, даже не видя их.
Система использует алгоритмы компьютерного видения, чтобы извлечь важные характеристики изображения, например, расположение клеточных стенок. Затем она воссоздает изображение виртуально, чтобы пользователь мог взаимодействовать с ним при помощи гаптического устройства.