Новости компаний
Камера, мотор, начали! Сбер представил Kandinsky Video — первую в России нейросеть для генерации полноценного видео
Нейросеть Сбера умеет создавать 8-секундные видеоролики по самым разным темам запросов
22.11.2023, 16:09
Камера, мотор, начали! Сбер представил Kandinsky Video — первую в России нейросеть для генерации полноценного видео

Сбер представил нейросеть Kandinsky Video — первую в России генеративную модель для создания полноценных видеороликов по текстовому описанию. Модель генерирует видеоряд продолжительностью до восьми секунд с частотой 30 кадров в секунду. Об этом в ходе международной конференции AI Journey рассказал первый заместитель Председателя Правления Сбербанка Александр Ведяхин. Архитектура Kandinsky Video состоит из двух ключевых блоков: первый отвечает за создание ключевых кадров, из которых складывается структура сюжета видео, а второй — за генерацию интерполяционных кадров, которые позволяют достичь плавности движений в финальном видео. В основе двух блоков лежит новая модель синтеза изображений по текстовым описаниям Kandinsky 3.0. Формат сгенерированного видео представляет собой непрерывную сцену с движением как объекта, так и фона. Именно это отличает видеоролики, синтезированные моделью Kandinsky Video, от анимационных видеороликов, в которых динамика достигается за счёт моделирования пролёта камеры относительно статичной сцены. Нейросеть создаёт видеоролики с разрешением 512 х 512 пикселей и различным соотношением сторон. Модель обучена на датасете из более чем 300 тыс. пар «текст — видео». Генерация видео занимает до трёх минут.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка: «Недавно мы обучили Kandinsky создавать анимационные видео по текстовому описанию, а уже сегодня представляем модель совершенно другого уровня — первую в России модель по генерации полноценных видеороликов по тексту. Это важный вклад в развитие российских генеративных нейросетей. У пользователей появится ещё больше возможностей для креатива и реализации своих творческих задумок любой направленности. Люди смогут создавать уникальные видеоролики абсолютно бесплатно. Наша модель, как и большинство других в линейке Сбера, будет доступна в open source. Мы верим, что искусственный интеллект сможет открыть перед людьми новые супервозможности и создать инструменты, которыми они будут пользоваться для решения своих задач».

Ранее у активных пользователей Kandinsky 2.2 в тестовом режиме появилась возможность создания анимационных видеороликов. По одному запросу можно создать видео длиной в четыре секунды с выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640 х 640 пикселей. Пользователи нейросети Kandinsky 3.0 также могут создавать видеоролики по текстовому описанию в режиме анимации.

Оценить возможности нейросети Kandinsky Video можно на платформе fusionbrain.ai и в Telegram-боте, где можно оставить заявку на доступ. Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке учёных из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices. В апреле 2023 года сервис на базе нейросети Kandinsky 2.1, стал самым быстрорастущим в мире. Он набрал один миллион уникальных пользователей всего за четыре дня после выхода.

Другие новости рубрики
Глава ВТБ призвал создать альтернативную международную систему расчетов
Новости компаний
Глава ВТБ призвал создать альтернативную международную систему расчетов
Вчера, 16:11
ВТБ намерен сохранить лидирующие позиции в корпоративно-инвестиционном бизнесе
Новости компаний
ВТБ намерен сохранить лидирующие позиции в корпоративно-инвестиционном бизнесе
Вчера, 11:18
Приволжье стало лидером по числу новых инвесторов брокера ВТБ
Новости компаний
Приволжье стало лидером по числу новых инвесторов брокера ВТБ
Вчера, 11:06
Новости компаний
Сбер получил финансовый эффект от внедрения ИИ в 350 млрд рублей в 2023 году
29.02.2024, 11:09
Новости компаний
ВТБ на 46% увеличил финансирование клиентов СМБ сферы жилищного строительства
28.02.2024, 15:36
Новости компаний
ВТБ выдал рекордный объем гарантий предпринимателям
28.02.2024, 15:31
Более 6 000 терминалов для оплаты улыбкой установил Сбер в Башкирии  
Новости компаний
Более 6 000 терминалов для оплаты улыбкой установил Сбер в Башкирии  
Сбербанк установил в Башкирии более 6 000 терминалов для оплаты покупок улыбкой.
28.02.2024, 10:21
ВТБ: искусственный интеллект станет частью всех технологий и сервисов
Новости компаний
ВТБ: искусственный интеллект станет частью всех технологий и сервисов
27.02.2024, 17:03
ВТБ: к 2027 году каждое третье онлайн-совещание будет расшифровываться при помощи ИИ-алгоритмов
Новости компаний
ВТБ: к 2027 году каждое третье онлайн-совещание будет расшифровываться при помощи ИИ-алгоритмов
27.02.2024, 15:35