ReHEarSSE: Распознавание скрытых в ухе беззвучно произносимых слов
ReHEarSSE: Распознавание выражений, произносимых беззвучно, но скрыто в ухе Сюэфу Дун, Ифэй Чен, Юки Нисияма, Каору Сезаки, Юнтао Ван, Кен Кристофферсон, Алекс Мариакакис CHI 2024: Конференция ACM CHI по человеческим факторам в вычислительных системах Сессия: Глаза и лицо Беззвучное речевое взаимодействие (БДВ) позволяет пользователям незаметно вводить текст, не используя руки. Существующие носимые системы БДВ обычно требуют специальных устройств и ограничены небольшим лексиконом, что ограничивает их полезность небольшим набором командных слов. В этой работе предлагается ReHearSSE, ультразвуковая система БДВ на основе наушников, способная обобщать данные на слова, отсутствующие в обучающем наборе данных, обеспечивая поддержку слов, охватывающих почти весь словарь. Когда пользователь произносит слова беззвучно, ReHearSSE использует авторегрессивные признаки для выявления незначительных изменений формы слухового канала. ReHearSSE распознает слова, используя модель глубокого обучения, обученную оптимизировать функцию потерь коннекционистской временной классификации (CTC) с промежуточным встраиванием, учитывающим различные буквы и переходы между ними. Мы обнаружили, что ReHearSSE распознает 100 ранее не встречавшихся слов с точностью 89,3%. Веб:: https://programs.sigchi.org/chi/2024/program/content/147342 Предварительно записанные видеопрезентации докладов на CHI 2024
Название:
ReHEarSSE: Распознавание скрытых в ухе беззвучно произносимых слов
Категория:
Разное