16+
Общество

Почувствуй себя режиссёром: Kandinsky научился создавать анимационные видеоролики

13 Окт 2023 12:59, видео

Популярная нейросеть Сбера теперь генерирует анимационные видеоролики по текстовому описанию.

У пользователей нейросети Сбера Kandinsky 2.2 появилась возможность создавать видеоролики по текстовому описанию в режиме анимации. По одному текстовому описанию генерируется 4-секундное видео c выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640x640 пикселей. Синтез одной секунды видео в среднем занимает около 20 секунд.

Генерация анимационных видеороликов работает в тестовом режиме и доступна самым активным пользователям Kandinsky 2.2, которые получат приглашение в ближайшее время. До конца года оценить новые возможности нейросети смогут абсолютно все. Те пользователи, которые хотят попробовать новые возможности модели сейчас, могут оставить заявку на получение доступа в Telegram-боте.

Для того чтобы сгенерировать видео в режиме анимации, нужно описать текстом то, что хочется увидеть. Далее бот предложит на выбор 16 вариантов анимации сцены, а после этого нейросеть сгенерирует анимированный видеоролик. Также доступна генерация составных сцен: пользователь может ввести несколько текстовых описаний (до трёх), затем выбрать для каждого свою механику анимации, а после этого модель создаст «мини-фильм».

- С момента выхода модели Kandinsky 2.2 пользователи уже сгенерировали более 50 млн изображений. Теперь у них появилось ещё больше возможностей для творчества совершенно бесплатно. Сегодняшний запуск видео-функции в режиме анимации — это важный шаг в развитии нашей нейросети и для всей глобальной индустрии мультимодальных моделей искусственного интеллекта. Мы продолжим и дальше совершенствовать Kandinsky, и в следующих обновлениях качество будет только улучшаться, - прокомментировал Александр Ведяхин, первый заместитель Председателя Правления Сбербанка.

Основой для синтеза видео является модель генерации изображений по текстовым описаниям Kandinsky 2.2. Для расширения её возможностей были реализованы разные виды анимации изображений, что позволило перемещать объекты, приближать и отдалять их, оживлять статику всеми возможными способами. В основе всех режимов анимации лежат функции image2image (перерисовка изображения по текстовому описанию) и inpainting/outpainting (дорисовка части изображения внутри и за его пределами), которые уже были реализованы в базовой модели.

Нейросеть разработали и обучили исследователи Sber AI совместно с учёными из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices.

Не забывайте подписываться на наши новости в Новостях, чтобы видеть их первыми.
Автор: Наталия Гладкая
Телефон редакции: 8-909-389-03-00

Если вы стали очевидцем происшествия, у вас есть фото или видео с места ЧП, или вы хотите поделиться своей новостью или проблемой, — пишите или звоните!

Мы доступны в WhatsApp и Viber. Вы также можете присылать сообщения в социальных сетях: в «ВКонтакте» и в «Одноклассниках»

Звоните в любое удобное для вас время, чтобы лично задать вопросы журналистам «Городских вестей». Будем рады общению!

18:43, Общество

В Волгограде строителей поздравили с профессиональным праздником

18:21, Общество

В Волгограде приостановили движение трамваев №1 и №3 из-за упавшего дерева

18:13, Общество

В Волгограде благоустроят территории у храмов

18:00, Происшествия

В Волгограде сбили котенка и в пакете положили за мусорные баки

17:54, Здоровье

Какие продукты можно хранить в дверце холодильника, рассказали волгоградцам

17:54, Происшествия

Прокуратура проверяет ущерб от ремонта кровли в Волгограде

17:39, Здоровье

Волгоградцам рассказали, как вовремя распознать тревожные сигналы организма

17:31, Происшествия

В Волгограде задержали мужчину за стрельбу в собаку

17:28, Спорт

Данил Кислюк пополнил ряды волгоградского «Каустика»

17:24, Общество

Спасатели рейдом прошлись по зонам отдыха у воды в Волгоградской области

17:04, Общество
фото: Дмитрий Рогулин / "Городские вести"

В Ворошиловском районе Волгограда сменился глава

17:01, Здоровье

В Волгограде сотрудники больницы прошли диспансеризацию прямо на рабочих местах

16:54, Транспорт

Трамвай № 11 вернулся к привычному маршруту в Волгограде

16:37, Криминал

Больше 1 млн руб. заплатит волгоградка за продажу машины, которую ей предоставил Соцфонд

16:36, Культура

В «Старой Сарепте» Волгограда снимали сериал «Каникулы Светофоровых»

16:22, ЖКХ

В Волгоградском регионе льготникам компенсируют расходы на оплату ЖКУ и капремонта

16:10, Общество
фото: администрация Волгограда

В Волгограде представили концепцию православного просветительского центра

16:04, Общество

Природному парку в Волгоградской области определили границы охранной зоны

15:50, Происшествия

Камышанин Максим Сорокин погиб в зоне СВО

15:38, Происшествия

Волгоградка напала на судебного пристава

Календарь