Автоматические субтитры — новый тренд. В апреле новую функцию представила команда TikTok, месяц спустя к ней присоединились ребята из Instagram**. Они объявили, что текстовое сопровождение теперь можно читать в сторис. Прошло еще немного времени, и к негласному флешмобу присоединились разработчики из ВКонтакте, которые обновили фирменный видеоплеер и добавили туда субтитры на русском языке. Они, естественно, не менее автоматические, чем у коллег: созданы на основе собственных инструментов по распознаванию речи, алгоритмов машинного обучения и технологий интеллектуального шумоподавления, которые Mail.ru Group представила зимой.
Судя по описанию, субтитры должны быть максимально адаптированы для комфортного чтения. В тексте будут расставлены знаки препинания, а там, где нужно, будут стоять заглавные буквы. Говорят, это положительно отличает технологии ВКонтакте от тех решений, что представлены на рынке. Чтобы перевод был синхронным, текст будет распределен по кадрам и будет появляться ровно в тот момент, когда произносится фраза. А в скором времени «умные» технологии дополнятся диаризацией — процессом, при котором фразы спикеров будут разделяться между собой, даже если люди общаются без заметных уху пауз.
#INSERT_ARTICLE#
В данный момент субтитры доступны лишь некоторым пользователям и появляются только в самых просматриваемых видео и роликах из верифицированных сообществ ВКонтакте. Все потому, что команда соцсети пока тестирует новую функцию и продолжает обучать искусственный интеллект. Но то, что уже умеет фирменный видеоплеер, впечатляет. Дабы расшифровка была максимально точной, аудиопоток проходит четыре ступени обработки. Сначала с помощью технологии интеллектуального шумоподавления голос очищают от фоновых звуков. Благодаря этому субтитры смогут появляться не только в профессиональных, но и в любительских роликах. На втором этапе нейросеть распознает слова и составляет из них текст. Затем расставляются знаки препинания и заглавные буквы. Это делается по уже существующему паттерну: подобным образом ВКонтакте расшифровывает аудиосообщения. В конце к работе подключаются методы машинного обучения. Они распределяют текст по кадрам.
По словам технического директора соцсети Александра Тоболя, при помощи новой опции они с коллегами хотят разрушить любые барьеры в коммуникации. Благодаря автоматическим субтитрам понимать содержание роликов смогут люди с нарушениями слуха, а также те пользователи, которые в силу обстоятельств не могут смотреть видео со звуком. Команда ВКонтакте собирается продолжать развивать нейросетевые технологии и внедрять машинное обучение в другие сервисы. Автосубтитры же начнут работать в полную силу до конца этого года — к этому времени они будут доступны в большей части роликов, опубликованных на платформе.
«Выбери бунт и кофе с собой». Интервью с журналистом и рэпером Артемом Распоповым
Интервью — 18 июня, 13:15
«Цель, чтобы люди несли мою музыку дальше». Интервью с мартином — о книгах, концертах и «лишних людях»
Сториз — 17 июня, 19:25
Секретные места города. Мини-гид по Шанхаю от китайской артистки Shushu
Обзоры — 15 июня, 18:10
«СТРИО», 3.56 am, vestfalin, Рушана, «Лолита Косс» и еще 125 концертов: гид по фестивалю «Дикая Мята»
Интервью — 14 июня, 13:05
По ту сторону контента. SRSLY-анкеты блогеров Антона Gudim, Piterville, Елены Юлкиной и Bilashmama
Обзоры — 11 июня, 19:40
Библейские отсылки и веб-хейт. Блогеры и критики — о третьем сезоне «Эйфории»
Интервью — 10 июня, 13:25
Мощные хуки и приятные звуки. Интервью с группой «СТОУНД»
Обзоры — 8 июня, 21:10
Так необычно, зайка. 8 незаезженных летних фестивалей
Обзоры — 1 июня, 17:30
Эй, собаки, я Наруто Узумаки. Гайд по выбору питомца от проекта «Песьи матери»
Колонка — 31 мая, 15:51
Французский вестник, дневники 79-го Каннского кинофестиваля: «Приключения мечты», «Бумажный тигр», «Надежда», «Ее личный ад», «Свадьба со вкусом апельсина»
Колонка — 28 мая, 21:04
Французский вестник, дневники 79-го Каннского кинофестиваля: «Полный Фил», «Я уеду в июне», «Человек, которого я люблю», «Красные скалы», «Горькое Рождество»
Обзоры — 28 мая, 10:15
Природа и много контента: как живут блогеры, которые переехали в деревню
Интервью — 27 мая, 14:45
«Мне важно заниматься "причувствованием к опыту"». Интервью с поэтессой Анной Родионовой
