YandexGPT научился конспектировать видеоролики

На модерации Отложенный

Яндекс разработал функцию краткого пересказа видеороликов на русском языке с помощью модели YandexGPT (YaLM 2.0). Эта функция доступна в «Яндекс Браузере», «Яндекс Поиске» (ya.ru) и сервисе 300.ya.ru.

Пересказ основан на содержании видео и помогает сделать просмотр контента более удобным и понятным. Пользователь может перейти к интересующему фрагменту видео, нажав на соответствующий таймкод. 

Технология работы краткого пересказа видео от «Яндекса» через YandexGPT следующая: сначала алгоритм преобразует аудиодорожку видео в текст с помощью распознавания речи, а затем модель YandexGPT обобщает содержание каждого фрагмента и указывает таймкод начала каждого блока.

В настоящее время функция пересказа работает хорошо с популярными видео, такими как рецепты и хобби.

Чтобы получить краткий пересказ видео, нужно открыть видео и нажать на кнопку «Краткий пересказ». В «Яндекс Поиске» краткое содержание будет отображаться сразу после нажатия на соответствующую кнопку рядом с видео в результате поиска. Чтобы получить пересказ на 300.ya.ru, нужно скопировать ссылку на видео в поле ввода сервиса.