ИИ-генерация видео обычно выдает короткие клипы, а не связные истории. ByteDance Seedance 2.5 меняет это: модель теперь создает 30-секундные аудио-видео ролики за один проход и позволяет развивать длинные повествования с покадровым контролем.
Seedance 2.5 создания длинных и связных видео. Модель способна генерировать высококачественные 30-секундные аудио-видео клипы за один проход. При этом она поддерживает многократное расширение для создания более длинных видео, улучшая переходы кадров и смену сцен для большей непрерывности. Seedance 2.5 может организовывать логически связанные шоты, чтобы история разворачивалась через завязку, развитие, поворот и развязку. При расширении модель сохраняет консистентность главных персонажей, окружения и темпа повествования. Улучшены плавные движения камеры, стабильность главного объекта, синхронность аудио и видео. Также оптимизированы детали, такие как текстуры объектов, черты кожи и глаз, освещение и насыщенность цвета, а также минимизированы неконтролируемые субтитры и фоновая музыка.
Модель предлагает более глубокий мультимодальный контроль. Пользователи могут вводить до 30 изображений, 10 видеоклипов и 10 аудиоклипов в качестве справочных материалов за один проход. Seedance 2.5 усиливает возможности референсов, включая clay render (моделирование пространственной структуры), движение и креативные ссылки. Clay render позволяет использовать 3D-модели без текстур для построения пространственной структуры сцены, поз персонажей, путей движения и углов камеры, после чего модель генерирует видео, соответствующее этой структуре. Также улучшен контроль освещения с учетом пространственной информации из clay render, генерируя реалистичные световые эффекты. Модель понимает композицию, сцены, стили, персонажей и реквизит из всех материалов, сохраняя внешность и голоса нескольких персонажей в сложных сценах.
Seedance 2.5 предлагает точный контроль на уровне временных меток для целевого редактирования аудио- и видеоконтента. Пользователи могут использовать промпты для управления повествованием, перспективой камеры, движением и ритмом в определенном временном фрейме. После генерации можно точечно изменять персонажей, действия или элементы сюжета в конкретных клипах, сохраняя непрерывность и реализм до и после правок. Улучшены функции редактирования, такие как зеленый экран, перспектива камеры и редактирование на основе референсов, что приближает модель к требованиям профессиональных областей, таких как кино и реклама.
Seedance 2.5 приближает ИИ-генерацию видео к профессиональным стандартам, предлагая не просто генерацию клипов, а инструмент для создания связных историй с глубоким контролем. Доступность API через BytePlus ModelArk позволит интегрировать эти возможности в более сложные рабочие процессы.