Top.Mail.Ru
Новый слуховой гаджет считывает слова по движениям губ Выпуск 22 ноября 2022 года
Рубрика "Хай-тек" Николая Гринько на "Вестях ФМ". Инженеры из Школы электротехники и электроники южнокорейского Университета Ёнсе разработали слуховой аппарат, работающий на принципиально новой технологии: в отличие от привычных аппаратов, он не усиливает все звуки вокруг, а считывает слова, произнесенные собеседником, по губам. Гаджет работает на технологии ИИ, конвертируя движения губ в слова, которые потом звучат в наушнике. Устройство использует датчики деформации, отслеживающие движения кожи — сжатия и расширения тканей в процессе артикуляции. Затем подключается обученный алгоритм, который конвертирует мимику в слова. Сейчас система, как сообщают авторы, способна распознавать 100 слов с 88%-й точностью. Отдельно отмечается, что на работу тензодатчиков не влияет ни пот, ни кожный жир, а сам гаджет гораздо меньше существующих аналогов. Коллектив редакции нашей программы уверен, что существующие сегодня слуховые аппараты давно нуждаются в модернизации и применении самых современных технологий. По сути их внутреннее устройство не меняется уже несколько десятилетий: микрофоны улавливают звук, процессор делает погромче те частоты, из которых в основном состоит человеческая речь, а динамик воспроизводит все это на повышенной громкости. Но современные нейросети позволяют делать со звуком такие вещи, о которых всего 10 лет назад не приходилось и мечтать. Например, искусственный интеллект может разложить любой mp3-файл с песней на отдельные инструменты, очистить его от голоса или оставит только голос – без каких-либо следов музыки. Прочитав вышеприведенную новость, мы решили, что именно так и работает новый слуховой гаджет, вот только никак не могли понять, при чем же тут тензодатчики, определяющие движения кожи. Тензометрическими датчиками обычно пользуются в промышленных целях – например, для считывания деформации стен зданий. Но для этого эти датчики нужно прочно закрепить на поверхности, данные о которой требуется получить! Судя по всему, южнокорейские разработчики предлагают людям с нарушением слуха не только использовать их слуховой аппарат, но и носить с собой горсть датчиков на липкой основе и прикреплять их к лицу собеседников. Строчка в статье о том, что "на тензодатчики не влияют пот и кожный жир" подтверждает наше предположение. Как вы понимаете, о реальном применении такой системы пока разговора не идет, это всего лишь проверка концепции. Возможно, в будущем информацию о движении губ собеседника можно будет брать с видеокамеры, и тогда не придется лепить на него пусть и очень маленькие датчики. Наверняка такой разговор никому удовольствия не доставит. Хотя…
Хай-тек
Наука, новостные,
17 сезонов, 2073 выпуска по 3 мин
Персоны выпуска
Выпуски
2026