Оглавление:
- Live Caption предлагает субтитры для видео всех видов.
- Live Relay позволяет людям с нарушениями речи разговаривать по телефону с помощью Google Assistant.
- Проект Euphonia от Google AI создается, чтобы помочь людям с нарушениями речи общаться быстрее и проще, чем когда-либо прежде.
Это может быть очень легко принять наши телефоны как должное. Мы используем их изо дня в день, не задумываясь о них, но для людей с физическими недостатками / ограниченными возможностями даже самые простые задачи могут оказаться пугающими. На Google I / O 2019 Google объявил о трех новых проектах, над которыми он работает, - Live Caption, Live Relay и Project Euphonia.
Живая Подпись
Закрытые титры легко доступны на таких инструментах, как Netflix и YouTube, чтобы сделать видео более доступными для людей с нарушениями слуха или слабослышащих, но есть некоторые проблемы с титрами на их текущем этапе. Не каждое видео или сервис поддерживает их, и они часто требуют какого-либо подключения к данным.
С помощью Live Caption компания Google создала систему, которая предлагает локальные субтитры в реальном времени для всех видов мультимедиа. Независимо от того, смотрите ли вы видео на YouTube, видео, которое вы записали сами, или буквально что-то еще, Live Caption транскрибирует слова на лету, без какой-либо связи для передачи данных.
У нас нет точной даты релиза, но Google говорит, что он запускается "позже в этом году".
Живое реле
С другой стороны, Live Relay был разработан, чтобы помочь людям принимать телефонные звонки, даже если у них возникают трудности с речью.
Если кто-то ответит на вызов с помощью Live Relay, абоненту на другом конце вызова будет сказано, что он использует службу Live Relay от Google, работающую на Ассистенте - очень похоже на работу Google Duplex.
Все, что говорит собеседник на другом конце, транскрибируется в режиме реального времени на экране пользователя Live Relay, и для ответа вы можете набирать пользовательские сообщения на клавиатуре или использовать Smart Reply и Smart Compose, чтобы быстро отправлять готовые сообщения на основе что человек только что сказал.
Как и Live Caption, Live Relay запускается локально на вашем телефоне и не требует никаких данных или Wi-Fi для работы.
Live Relay все еще находится в «исследовательской фазе», но мы надеемся, что он запустится раньше, чем позже.
Проект Евфония
Последнее, но не менее важное, Project Euphoria создается для того, чтобы помочь людям с БАС, склерозом или другими нарушениями речи общаться легче, чем когда-либо прежде.
В Google:
Для этого программное обеспечение Google превращает записанные сэмплы голоса в спектрограмму или визуальное представление звука. Затем компьютер использует обычные транскрибированные спектрограммы, чтобы «обучить» систему лучше распознавать этот менее распространенный тип речи. Наши алгоритмы ИИ в настоящее время нацелены на людей, которые говорят по-английски и имеют нарушения, обычно связанные с БАС, но мы считаем, что наше исследование может быть применено к большим группам людей и к различным нарушениям речи.
Помимо улучшения распознавания речи, мы также обучаем персонализированные алгоритмы ИИ для обнаружения звуков или жестов, а затем выполняем такие действия, как генерация голосовых команд в Google Home или отправка текстовых сообщений. Это может быть особенно полезно для людей с серьезными нарушениями и не может говорить.
