Яндекс реализовал функцию пересказа русскоязычных видео в Поиске
Пользователи Яндекса смогут читать пересказы русскоязычных видео. Новая функция позволит быстро ознакомиться с содержанием ролика и понять, есть ли в нем ответ на нужный вопрос. Пересказ видео работает на базе нейросети YandexGPT, он доступен в Поиске, Яндекс Браузере и сервисе краткого пересказа 300.ya.ru.
Нейросеть обобщает русскоязычные ролики длиной от двух минут до четырех часов и пересказывает те видео, где есть речь. Технология работает так: сначала алгоритм превращает аудиодорожку в текст с помощью распознавания речи, а затем YandexGPT разбивает его на смысловые фрагменты. Нейросеть обобщает каждый из них и указывает таймкод начала блоков.
Краткий пересказ доступен в Поиске Яндекса в любом браузере. Сейчас функция работает для популярных роликов — например, для рецептов приготовления блюд, хендмейда, видео с решением школьных заданий или записей телепередач. Кроме того, можно получить текстовую выжимку из YouTube-роликов, загрузив ссылку на клип на сервис 300.ya.ru.
Чтобы получить пересказ ролика в Яндекс Браузере, нужно открыть видео и нажать на кнопку «Краткий пересказ». В Поиске краткое содержание появится сразу после нажатия на такую же кнопку возле видео в выдаче. Для получения пересказа на 300.ya.ru понадобится скопировать ссылку на нужный ролик в поле ввода сервиса.
Напомним, в июле в Яндекс Браузере появился нейросетевой пересказ статей. Достаточно нажать на кнопку «Пересказать кратко», и YandexGPT обобщит главные мысли материала в виде тезисов, которые можно прочитать за 30-60 секунд.