«VK Мессенджер» научили переводить видеосообщения в текст

«ВКонтакте» представила новую функцию «VK Мессенджера» — текстовую расшифровку видеосообщений при помощи искусственного интеллекта. В её работе участвуют три нейросети, решающие отдельные задачи: распознавание звуков, формирование слов, определение границ предложений и расстановку знаков препинания.

Источник изображения: vk.com/press

Расшифровка видеосообщений производится при помощи технологии ASR (Automatic Speech Recognition) тремя нейросетями: акустическая отвечает за распознавание звуков, языковая объединяет звуки в слова, а пунктуационная выявляет границы предложений и ставит знаки препинания. Всё происходит без участия человека.

Функция работает как для полученных, так и для отправленных видеосообщений. Для её запуска достаточно нажать на значок «Аа» — всё остальное ИИ сделает сам. Инструмент пригодится, когда смотреть или слушать видеосообщение неудобно. Расшифровка также помогает найти в переписке нужную информацию — можно найти нужное место при помощи поиска по тексту.

Нововведение уже доступно в веб-версии сервиса, а также для некоторых пользователей Android-версии приложений «ВКонтакте» и «VK Мессенджер», включая учебный профиль «Сферум». В ближайшем будущем расшифровка видеосообщений появится и в версии приложений под iOS. В приложении под iOS также до трёх минут увеличилась максимальная продолжительность видеосообщений и появилась возможность ускорять воспроизведение в полтора или два раза. Дебютировали новые эксклюзивные формы видеосообщений — звезда и котёнок. В Android-версии приложения эти возможности появятся позже.

Ещё одним нововведением при обмене сообщениями стали анимированные реакции в чатах на всех платформах: лайки, сердечки, огоньки и прочие реакции — каждая сопровождается анимированным представлением.