16+
Общество

Почувствуй себя режиссёром: Kandinsky научился создавать анимационные видеоролики

13 Окт 2023 12:59, видео

Популярная нейросеть Сбера теперь генерирует анимационные видеоролики по текстовому описанию.

У пользователей нейросети Сбера Kandinsky 2.2 появилась возможность создавать видеоролики по текстовому описанию в режиме анимации. По одному текстовому описанию генерируется 4-секундное видео c выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640x640 пикселей. Синтез одной секунды видео в среднем занимает около 20 секунд.

Генерация анимационных видеороликов работает в тестовом режиме и доступна самым активным пользователям Kandinsky 2.2, которые получат приглашение в ближайшее время. До конца года оценить новые возможности нейросети смогут абсолютно все. Те пользователи, которые хотят попробовать новые возможности модели сейчас, могут оставить заявку на получение доступа в Telegram-боте.

Для того чтобы сгенерировать видео в режиме анимации, нужно описать текстом то, что хочется увидеть. Далее бот предложит на выбор 16 вариантов анимации сцены, а после этого нейросеть сгенерирует анимированный видеоролик. Также доступна генерация составных сцен: пользователь может ввести несколько текстовых описаний (до трёх), затем выбрать для каждого свою механику анимации, а после этого модель создаст «мини-фильм».

- С момента выхода модели Kandinsky 2.2 пользователи уже сгенерировали более 50 млн изображений. Теперь у них появилось ещё больше возможностей для творчества совершенно бесплатно. Сегодняшний запуск видео-функции в режиме анимации — это важный шаг в развитии нашей нейросети и для всей глобальной индустрии мультимодальных моделей искусственного интеллекта. Мы продолжим и дальше совершенствовать Kandinsky, и в следующих обновлениях качество будет только улучшаться, - прокомментировал Александр Ведяхин, первый заместитель Председателя Правления Сбербанка.

Основой для синтеза видео является модель генерации изображений по текстовым описаниям Kandinsky 2.2. Для расширения её возможностей были реализованы разные виды анимации изображений, что позволило перемещать объекты, приближать и отдалять их, оживлять статику всеми возможными способами. В основе всех режимов анимации лежат функции image2image (перерисовка изображения по текстовому описанию) и inpainting/outpainting (дорисовка части изображения внутри и за его пределами), которые уже были реализованы в базовой модели.

Нейросеть разработали и обучили исследователи Sber AI совместно с учёными из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices.

Не забывайте подписываться на наши новости в Новостях, чтобы видеть их первыми.
Автор: Наталия Гладкая
Телефон редакции: 8-909-389-03-00

Если вы стали очевидцем происшествия, у вас есть фото или видео с места ЧП, или вы хотите поделиться своей новостью или проблемой, — пишите или звоните!

Мы доступны в WhatsApp и Viber. Вы также можете присылать сообщения в социальных сетях: в «ВКонтакте» и в «Одноклассниках»

Звоните в любое удобное для вас время, чтобы лично задать вопросы журналистам «Городских вестей». Будем рады общению!

12:42, Транспорт

В Волгограде начинается новый этап реконструкции трамвайной линии: как работает транспорт

12:40, Культура

Три фотографа покажут красоту России в библиотеке Горького

12:40, Спорт

Михаил Мысин стал тренером-аналитиком волгоградского «Ротора»

12:22, Происшествия

В Волгограде «Лада Калина» сбила ребенка на велосипеде

12:20, Общество

Завод на юге Волгограда оштрафован за сброс сточных вод

12:06, Общество

Волгоградцам назвали фрукты июля

12:01, Происшествия

Волгоградец сбил насмерть мужчину, ремонтировавшего грузовик

12:01, Общество

Это ПОБЕДА! Торговая сеть открывает новые магазины в Волгоградской области

11:54, Общество

Режим повышенной готовности объявлен в Октябрьском районе Волгоградской области

11:44, Общество

Боец из Рудни Александр Анохин погиб в спецоперации

11:34, Происшествия

В Волжском иномарка задавила ребенка

11:20, Общество

Скоростной трамвай в Волгограде временно изменил маршруты

11:16, ЖКХ

4,5 тысячи волгоградцев получили качественную питьевую воду

11:06, Происшествия

Под Волгоградом ребенок пострадал в ДТП с фурой и легковушкой

11:05, Общество

В Волгоградской области за сутки 6 ДТП и 22 пожара: есть погибшая

10:58, Происшествия

Известно состояние пострадавших после ЧП на предприятии в Волжском

10:42, Происшествия

Ребенок попал в водоворот и утонул под Волгоградом

10:40, Общество

Волгоградцев зовут на сплавы и кемпинг в парк «Нижнехоперский»

10:34, Транспорт

Приволжская железная дорога перечислила в региональные и местные бюджеты более 2,7 млрд рублей в I полугодии 2025 года

10:32, Происшествия

На севере Волгограда Lada Granta выехала на встречку и врезалась в УАЗ

Календарь