16+
Общество

Почувствуй себя режиссёром: Kandinsky научился создавать анимационные видеоролики

13 Окт 2023 12:59, видео

Популярная нейросеть Сбера теперь генерирует анимационные видеоролики по текстовому описанию.

У пользователей нейросети Сбера Kandinsky 2.2 появилась возможность создавать видеоролики по текстовому описанию в режиме анимации. По одному текстовому описанию генерируется 4-секундное видео c выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640x640 пикселей. Синтез одной секунды видео в среднем занимает около 20 секунд.

Генерация анимационных видеороликов работает в тестовом режиме и доступна самым активным пользователям Kandinsky 2.2, которые получат приглашение в ближайшее время. До конца года оценить новые возможности нейросети смогут абсолютно все. Те пользователи, которые хотят попробовать новые возможности модели сейчас, могут оставить заявку на получение доступа в Telegram-боте.

Для того чтобы сгенерировать видео в режиме анимации, нужно описать текстом то, что хочется увидеть. Далее бот предложит на выбор 16 вариантов анимации сцены, а после этого нейросеть сгенерирует анимированный видеоролик. Также доступна генерация составных сцен: пользователь может ввести несколько текстовых описаний (до трёх), затем выбрать для каждого свою механику анимации, а после этого модель создаст «мини-фильм».

- С момента выхода модели Kandinsky 2.2 пользователи уже сгенерировали более 50 млн изображений. Теперь у них появилось ещё больше возможностей для творчества совершенно бесплатно. Сегодняшний запуск видео-функции в режиме анимации — это важный шаг в развитии нашей нейросети и для всей глобальной индустрии мультимодальных моделей искусственного интеллекта. Мы продолжим и дальше совершенствовать Kandinsky, и в следующих обновлениях качество будет только улучшаться, - прокомментировал Александр Ведяхин, первый заместитель Председателя Правления Сбербанка.

Основой для синтеза видео является модель генерации изображений по текстовым описаниям Kandinsky 2.2. Для расширения её возможностей были реализованы разные виды анимации изображений, что позволило перемещать объекты, приближать и отдалять их, оживлять статику всеми возможными способами. В основе всех режимов анимации лежат функции image2image (перерисовка изображения по текстовому описанию) и inpainting/outpainting (дорисовка части изображения внутри и за его пределами), которые уже были реализованы в базовой модели.

Нейросеть разработали и обучили исследователи Sber AI совместно с учёными из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices.

Не забывайте подписываться на наши новости в Новостях, чтобы видеть их первыми.
Автор: Наталия Гладкая
Телефон редакции: 8-909-389-03-00

Если вы стали очевидцем происшествия, у вас есть фото или видео с места ЧП, или вы хотите поделиться своей новостью или проблемой, — пишите или звоните!

Мы доступны в WhatsApp и Viber. Вы также можете присылать сообщения в социальных сетях: в «ВКонтакте» и в «Одноклассниках»

Звоните в любое удобное для вас время, чтобы лично задать вопросы журналистам «Городских вестей». Будем рады общению!

00:35, Общество

Волгоградцам рассказали об изменении порядка регистрации граждан по месту жительства

28 Авг, Общество

«Земские работники культуры» начали работу в Волгоградской области

28 Авг, ЖКХ

Четыре района Волгограда останутся без света 29 августа

28 Авг, Общество

В Волгоградской области провели более 300 рейдов по обеспечению безопасности на воде

28 Авг, Общество

Отрасль строительства Волгоградской области внедряет ИИ-технологии

28 Авг, Здоровье

Волгоградские врачи успешно провели сложнейшее протезирование суставов мужчине

28 Авг, Общество

В волгоградских учреждениях образования утвердили паспорта безопасности

28 Авг, Происшествия

Под стражу взяли мотоциклиста, попавшего в смертельное ДТП с ребенком под Волгоградом

28 Авг, Общество

Более 4,6 тыс. волгоградских школьников трудоустроились на время летних каникул

28 Авг, Общество

С 1 сентября в Волгограде грядут изменения

28 Авг, Здоровье

Волгоградские ученые испытали новый препарат против шизофрении

28 Авг, Криминал

В Волгограде мужчине дали 8 лет тюрьмы за убийство брата

28 Авг, Общество

Никто не сможет купить алкоголь в Волгограде 1 сентября

28 Авг, Общество

Жительница Камышина Павлина Суханова отметила 100-летний юбилей

28 Авг, Общество
Фото: Дмитрий Рогулин / "Городские вести"

Аграрии Волгоградской области готовятся собрать 160 тысяч тонн фруктовых плодов

28 Авг, Общество

На 102-м году жизни скончалась волгоградская долгожительница Анна Бурнаевская

28 Авг, Общество

Волгоградцев предупредили о схеме мошенников с доступом к «Госуслугам» через домофон

28 Авг, Происшествия

Дело о крушении поезда под Волгоградом закрыто из-за смерти виновного

28 Авг, ЖКХ

В Волгограде 40-метровую трубу водрузили на котельной № 849

28 Авг, Криминал

Под Волгоградом товаровед отменяла чеки покупок и похищала деньги

Календарь