Создатели TikTok представили ИИ для генерации реалистичных блокбастеров
С её помощью Уилл Смит теперь не только умеет реалистично есть спагетти, но и противостоять спагетти-монстру, будто это новая сцена из «Людей в чёрном».
Компания ByteDance (TikTok) представила Seedance 2.0. Обновлённый генератор способен создавать и монтировать видео, одновременно делая дубляж на восьми языках, включая русский. Модель уже опробовали кинематографисты и энтузиасты, и они остались впечатлены её работой.
Другие модели позволяют генерировать видео продолжительностью 15–30 секунд в низком разрешении. Решение ByteDance также имеет ограничение, но компания предложила обходной вариант: можно создавать несколько фрагментов по 15 секунд в разрешении 1440p и склеивать их без потери повествования и качества.
Новая модель отлично копирует стиль настоящих кинематографистов даже по скриншотам. В качестве референсов ей можно предоставить до 9 изображений, 3 видеофрагмента и 3 аудиофайла до 15 секунд. В результате получается контент, сохраняющий атмосферу и операторскую работу. Модель работает и с готовым видео, позволяя просто сменить героя, фон или настроить освещение.
К счастью для фанатов, которых часто тревожила потенциальная «смерть» игровой и киноиндустрии, на старте новая нейросеть была заблокирована в Китае, но это временно. Модель появится до конца февраля в популярных приложениях для монтажа видео, например CapCut.
Первые работы китайских пользователей TikTok оказались впечатляющими. Фанаты создали масштабную битву с персонажами Jump Shonen (Сайтама, Луффи, Наруто, Гоку и др.), сражение Уилла Смита со спагетти-монстром, словно сцена из «Людей в чёрном», Луффи программирующего в путешествии, Уолтера Уайта на кассе супермаркета, финальную сцену с Резе и Макимой с счастливым концом, и многие другие.
Результаты были настолько убедительными, что не вызвали особой негативной реакции. Фанаты уже предлагают, что можно улучшить с помощью ИИ, например финалы «Лица со шрамом» и «Сайнфелда», анимацию One-Punch Man и другие сцены.
Генерация будет достаточно доступной для фанатов и энтузиастов: на 7-минутное видео уйдёт от 12 до 200 долларов в зависимости от удачных результатов, что значительно дешевле производства кинематографичных работ аналогичной длины.
