В новой голосовой платформе ClubHouse получил инвайт голосовой помощник Тинькофф Олег.
Впервые получилось в рамках социальной сети «подружить» между собой голосового помощника
и технологию распознавания речи.
Олег интегрирован в соцсеть как полноценный пользователь, пишет Live24.ru.
Он, как и человек, вправе взаимодействовать с модераторами комнат, предоставляя
допвозможности для общения в рамках предложенных дискуссий. Это позволила сделать
специальная технология распознавания и синтеза устной речи в режиме реального времени.
Эта технология носит название TinkoffVoiceKit.
Олега можно будет встретить в различных комнатах, он способен слушать
выступления спикеров, расшифровывать их и транслировать услышанное
в свой телеграмм-канал «Олег в Клабхаузе».
Также Олег может принять роль модератора комнат, задавать вопросы, следить за
таймингом и контролировать соблюдение регламента.
Первая трансляция Олега состоялась 11 марта под названием «Тинькофф Инвестиции».
В сообщении транслировался конференц-звонок топов из группы Тинькофф во главе с
Оливером Хьюзом.
Темой обсуждения стали финансовые результаты и рекордные прибыли группы за 2020 год.
По словам директора по технологиям искусственного интеллекта Тинькофф Павла Калайдина,
в настоящее время разработчики Олега экспериментируют с разными сценариями в новой
соцсети, которые, безусловно, должны быть интересны слушателям.
В будущем появится опция задать вопрос спикеру посредством чата с Олегом в телеграмме.
Как это работает? Аудитория присылает интересующие вопросы, а Олег, в свою очередь,
озвучивает их, сохраняя приватность автора вопроса (по его желанию). Сейчас ведётся
работа по очистке расшифрованной речи от междометий, слов-паразитов, зависаний спикера
и тп. В будущем текстовая транскрипция будет более лаконичной, связной и понятной.
Разработчики технологии TinkoffVoiceKit пояснили, что это сложная нейросетевая модель
распознавания речи, которая разрабатывалась в Тинькофф не один год. Напомним, что и
Олег появился благодаря стратегии Al First как первый в мире голосовой помощник
собственной «сборки», разбирающийся в финансах. Эта технология способна решать
многие задачи – от создания голосовых помощников, до создания многофункциональных
приложений для людей с ограниченными возможностями. Установить TinkoffVoiceKit
можно, оставив заявку на сайте http://voicekit.tinkoff.ru.
