«Газпром-медиа холдинг» выпустил первый мульткаст на основе ИИ

Студия нейропродакшена «Газпром-медиа холдинга» D.lab совместно с «ГПМ Радио» выпустила первый анимированный искусственным интеллектом (ИИ) аудиоподкаст — мульткаст «Детского радио» «Новые приключения Веснушки и Кипятоши».

Для премьерной серии разработчики взяли один из эпизодов подкаста «Новые приключения Веснушки и Кипятоши». Первый восьмиминутный эпизод доступен на Rutube, «VK Видео», в соцсетях «Детского радио».

Видеоряд создан с применением собственного гибридного решения студии, в основе которого лежат open source-разработки и коммерческие ИИ-модели, дополнительно обученные и скомбинированные для производства мультимедийного контента.

Цикл производства мульткаста включает несколько этапов — разработку персонажей моделями text-to-image, дообучение text-to-image для стабильного воспроизведения персонажей, генерацию графики и анимации моделями image-to-video, а также постпродакшен — монтаж, доработку артикуляции, синхронизацию изображения с аудиодорожкой, улучшение качества изображения.

Подробнее