Исследователи Google представили SpeakFaster, прототип интерфейса, разработанного для улучшения ввода текста с использованием глазного контакта для людей с расстройствами, такими как боковой амиотрофический склероз (ALS). Новая система использует возможности больших языковых моделей (LLMs), чтобы значительно ускорить процесс ввода текста и облегчить общение для пользователей, которые не могут говорить или печатать.
Существующие устройства альтернативной и дополнительной коммуникации (AAC), как правило, имеют низкую скорость ввода текста, что затрудняет спонтанное общение. SpeakFaster решает эту проблему, используя предсказание текста на основе контекста разговора, что сокращает количество необходимых нажатий клавиш и ускоряет ввод текста на 29-60% по сравнению с традиционными системами.
Во время тестирования SpeakFaster показала значительные преимущества. Участники исследования с использованием системы смогли сэкономить 57% моторных действий по сравнению с традиционными предсказательными клавиатурами. В эксперименте с одним пользователем ALS была зафиксирована скорость ввода на 61% выше, чем при использовании стандартных методов.
Ключевым аспектом системы является ее интуитивно понятный интерфейс, позволяющий пользователям вводить аббревиатуры и уточнять предсказанный текст. Кроме того, разработаны специальные языковые модели, которые помогают преобразовывать сокращения в полные фразы, что делает общение более быстрым и комфортным.
Исследование подчеркивает потенциал технологий AI и LLM для улучшения качества жизни людей с тяжелыми двигательными нарушениями. Команда Google надеется, что такие разработки смогут стимулировать дальнейшие инновации в области коммуникационных технологий, обеспечивая доступ к ним для более широкого круга пользователей.