Прошло уже несколько месяцев с момента анонса Seedance 2.0. Несмотря на большой ажиотаж вокруг этой модели, ее публичный релиз состоялся позже, чем ожидалось.
Причина стала ясна довольно быстро. Seedance 2.0 привлек внимание благодаря своей исключительной способности генерировать реалистичных людей, узнаваемых персонажей и сцены, которые выглядели настолько похожими на настоящие кинокадры, что это вызвало даже некоторое беспокойство.
Seedance 2.0 — это унифицированная мультимодальная система для генерации аудио и видео с входными данными в виде текста, изображений, аудио и видео.
Модель стала попадать в заголовки мировых СМИ не просто потому, что результаты были качественными и «кинематографичными». Они были настолько реалистичными, что у людей возникало чувство беспокойства. Именно по этой причине широко распространились ролики с лицами Уилла Смита, Тома Круза и Киану Ривза.
В этом руководстве я покажу, как создатели фильмов или роликов могут эффективно использовать эту модель для генерации видео, при этом не тратить слишком много времени на разработку промптов.
Что такое Seedance 2.0 на самом деле
С технической точки зрения Seedance 2.0 — это нативная мультимодальная модель для генерации видео и аудио. По заявлению ByteDance, в ней используется единая архитектура одновременной генерации видео и аудио, а не подбор звукового сопровождения к уже готовому изображению.
Официально она поддерживает четыре режима ввода, генерацию аудио и видео длительностью от 4 до 15 секунд, а также встроенный вывод в форматах 480p и 720p. Что касается открытой платформы, то, по заявлению ByteDance, она может работать с входными данными, включающими до 9 изображений, 3-х видеороликов и 3-х фрагментов аудио.
Вот чем она отличается от предыдущей версии:
По данным рейтинга Arena.AI, эта модель превосходит некоторые из лучших моделей для работы с видео, представленных на рынке, в том числе Veo 3.1 от Google и Sora 2 от OpenAI.
Небольшое руководство по работе с Seedance 2.0
Прежде чем перейти к конкретным вопросам, давайте разберемся, о чем пойдет речь в этом разделе:
непрерывность съёмки
движение камеры
реалистичность
качество звука и синхронизация
Именно в этих четырёх областях Seedance 2.0 перестаёт восприниматься как обычный инструмент для генерации по промптам и становится тем, чем режиссёры могут реально воспользоваться.
Начнём с согласованности кадров.
Обычно это называют «согласованностью персонажей», но я буду использовать термин «согласованность кадров», поскольку речь идёт не только о том, остается ли персонаж неизменным. Также речь идет о том, запоминает ли модель окружающую среду, расположение объектов в сцене и визуальные детали, которые должны сохраняться в нескольких кадрах.
Чтобы сгенерировать пример видео, откройте Seedance 2.0, загрузите исходные фотографии и опишите, как будет выглядеть сцена.
Промпт: Create a multi-shot late-night diner conversation of two characters John and Olivia in a restaurant. The scene should feel intimate and restrained, with the dialogue centered on an unspoken turning point in their relationship.
Настройте такие параметры, как продолжительность видео, соотношение сторон и разрешение. В Seedance 2.0 можно создавать видео с разрешением до 1080p.
Вот как выглядит итоговое видео:
Прежде всего, просто посмотрите, насколько невероятно реалистичным получился результат. Мимика, текстура кожи, волосы, одежда — всё это выглядит на удивление реалистично.
Ещё мне очень понравилась работа камеры во время диалога. Сцена развивается последовательно. Камера меняет ракурсы и изменяет масштаб таким образом, что создаётся ощущение продуманности, а разговор приобретает более кинематографичный стиль.
Еще более впечатляет то, что сам диалог кажется точным, хотя я никогда явно не говорил модели, какие фразы должны произносить персонажи. Это говорит о том, насколько хорошо Seedance 2.0 понимает контекст сцены.
Давайте рассмотрим еще один пример с использованием текстового промпта:
Промпт: Original mecha stealth action scene. On a high-altitude platform in a futuristic industrial city, a mecha ninja and a heavy-armored enemy engage in a final showdown on the eve of a storm. The character charges at high speed, draws a blade, leaps, and lands. Cameras use low-angle tracking, lateral movement, slow motion, and ultra-wide-angle shots. Neon lights pierce through the rain, strong reflections on metal surfaces, intense impact sensation, resembling the climactic battle in a season finale. Strong hook in the first 2 seconds, stable subject, smooth action, cinematic composition, realistic lighting, epic atmosphere, intense emotion, high-definition details.
На этом примере действительно хорошо видно, насколько хорошо Seedance 2.0 справляется с точным следованием промпту. Задание было очень конкретным, но модель всё равно выдала результат, который выглядит продуманным, кинематографичным и удивительно качественным.
Видео выглядит потрясающе. Дизайн механического ниндзя выглядит стильно, а операторская работа, честно говоря, — одна из лучших деталей. Обратите внимание на сальто назад в замедленном режиме! Съемка с нижнего ракурса, боковое перемещение и широкий кадр придают этой сцене ощущение масштаба и эффектности.
Это вполне могло бы сойти за заставку из высокобюджетной видеоигры, на производство которой студии тратят сотни тысяч долларов.
Еще несколько интересных тестовых сцен
Вот еще пять идей для сцен, разработанных для проверки различных сильных сторон Seedance 2.0:
1. Быстрое движение камеры
Create a fast-paced nighttime scene in a crowded street market. A young woman in a red jacket suddenly spots her younger brother disappearing into the crowd and rushes after him. The sequence should feel urgent and unstable in a good way, with fast camera movement, rapid reframing, and strong forward momentum.
2. Сцена с экшеном
Create a grounded action scene inside a half-abandoned hotel. A middle-aged detective and a teenage runaway are trying to escape armed pursuers through narrow hallways and broken stairwells. The scene should feel tense, physical, and cinematic, with believable motion and clear staging.
3. Медленная сцена
Create a quiet scene at dawn in a small fishing village. An elderly man and his adult daughter sit by the shore after a funeral, speaking only a few words. The moment should feel restrained, intimate, and emotionally heavy, with subtle acting and a calm visual rhythm.
4. Музыкальное видео
Create a stylized music video sequence featuring a young female singer performing on a rooftop at sunset while dancers move through shifting pools of light around her. The scene should feel rhythmic, expressive, and visually bold, with strong atmosphere and performance energy.
5. Погоня на машинах
Create a high-speed car chase at night through a futuristic city. A humanoid alien with luminous eyes is driving a damaged black coupe while two enforcement vehicles close in behind. The sequence should feel intense and cinematic, with fast turns, near misses, flashing reflections, and a strong sense of speed.
Возможность редактирования после первой генерации
Как только видео готово, вы можете продолжать работать над ним, просто обращаясь к ИИ: генерировать, просматривать, исправлять, заменять, удлинять и перенастраивать хронометраж.
Большую роль в этом играет поддержка мультимодальных референсов. Вместо того чтобы быть ограниченным одним промптом, вы можете продолжать управлять сценой с помощью изображений, видео и аудиореференсов.
Самое интересное в Seedance 2.0 — не то, что он может создавать клипы, имитирующие кино. Сейчас это умеют делать многие инструменты.
Дело в том, что модель, похоже, понимает сцены на более высоком уровне, чем большинство ее конкурентов. В собственных материалах ByteDance подчеркивает мультимодальное управление, более сильный физический реализм и аудиовизуальную согласованность. Реакция общественности, включая панику в юридических кругах, по сути является доказательством того, что скачок в реалистичности — это не шутка.
Создавайте свои собственные видео с помощью Seedance 2.0, используя промпты, которыми я поделился в этой статье. Попробуйте разные сцены, немного поэкспериментируйте и посмотрите, на что на самом деле способна модель.