Как создать видео с помощью нейросетей: пошаговое руководство для начинающих

Создавать видео стало проще, чем когда-либо, — теперь для этого не нужны камеры, актеры и сложный монтаж. Благодаря нейросетям видеоролики можно генерировать по одной текстовой фразе: «Пушистый пес считает деньги на кухне» — и через пару минут у вас есть готовая сцена. В этом материале объясним, как работают технологии искусственного интеллекта, какие сервисы использовать для создания бесплатного видео и как составить правильный запрос, чтобы получить нужный результат.

Нейросеть: как она работает и где применяется?

Нейросеть — это модель машинного обучения, вдохновленная принципами устройства мозга. В ней много маленьких элементов («нейронов»). Они связаны друг с другом и учатся на больших объемах данных. Например, когда мы загружаем фото, текст, звуки, нейросеть находит общие черты и создает новый контент, похожий на человеческий.

Работа нейросети проходит так: сначала загружают данные, потом нейроны постепенно превращают их в нужный результат (текст, изображение, музыку). Главная цель — уменьшить разницу между правильным ответом и прогнозом. Так проходит обучение нейросети.

Какие бывают нейросети для создания видео?

Есть разные типы нейросетей, некоторые могут обрабатывать видеореференсы, но в первую очередь рассмотрим модели, работающие на текстовых запросах.

1. Модели, создающие видео по тексту

Примеры таких моделей: сервисы Sora (OpenAI), Runway ML, Pika и другие. Эти системы умеют создавать видео на основе текстовых запросов. Например, если написать «анимационная сцена заката над морем», то получится готовый видеоролик, созданный искусственным интеллектом.

2. Улучшение уже готовых видео

Есть инструменты, повышающие качество ваших записей. Такие программы улучшают разрешение, устраняют шумы, стабилизируют картинку, корректируют цвет. Примеры: Topaz Video Enhance AI, Adobe Firefly, DaVinci Resolve.

3. Deepfake-технологии и замена лиц

Нейросети научились менять лица в кадрах на лица реальных людей, создавать героев, которые выглядят естественно. Эти технологии используют в кино, рекламе, играх, а иногда для обмана и шантажа людей. 

4. Автоматический монтаж видео

С помощью онлайн-сервисов можно быстро собирать презентации, фильмы или рекламу по готовым сценариям. Пользователь выбирает шаблон, добавляет нужные материалы и получает готовое видео. Пример сервисов: Synthesia, Lumen5, Animoto.

Чем полезны нейросети в создании видео?

Использование нейросетей дает большие преимущества:

• Скорость: изготовление видео занимает минуты вместо дней.
• Экономия: меньше тратится денег на съемочную группу, актеров и технику.
• Доступность: каждый сможет легко создать свое видео без особых навыков и вложений.
• Творчество: можно экспериментировать и стать нейросетевым художником.
• Массовость: одна программа может создать тысячи разных роликов по вашим требованиям.

Что мешает развитию нейросетей?

Несмотря на плюсы, есть проблемы, которые нужно решить:

• Качество: иногда ролики получаются размытыми или с ошибками, например, когда ИИ добавляет сгенерированным изображениям людей больше пяти пальцев на руке. 
• Ограниченность сюжетов: хорошо получается простая анимация, но сложно сделать фильм.
• Этические вопросы: подделка лиц вызывает сомнения в достоверности и безопасности.
• Авторское право: непонятно, кому принадлежат права на ролики, сделанные ИИ.

Краткий обзор популярных нейросетей для создания видео 

1. Pika. Короткие и эффектные видео для соцсетей

• Стоимость: от 8 до 76 долларов. В бесплатной версии: два видео в сутки, до 16 в месяц. 
• Долгая генерация. 
• Сайт: pika.art

2. Runway. Для реалистичных видео 

• Стоимость: от 15 до 95 долларов. В бесплатной версии можно создать 25-секундное видео с использованием модели Gen-3 Alpha Turbo в разрешении 720p либо сделать 10-секундный ролик через модель Gen-4 такого же качества.
• Быстрая генерация, есть генерация по скетчу, тексту и фото. 
• Сайт: https://runwayml.com/ 

3. Kandinsky. Для первых шагов в ИИ

• Стоимость: бесплатно
• Быстрая генерация, нереалистичные, а скорее анимированные изображения. 
• Сайт: https://fusionbrain.ai/ 

Как написать промт 

Промт — это набор инструкций, на который нейросеть ориентируется, чтобы создать видео, которое вам нужно. Чем детальнее промт, тем выше вероятность получить задуманное. Важно, что любая нейросеть настроена на то, чтобы дать ответ. То есть если написать в промте всего одно слово, она все равно что-то сделает и не будет переспрашивать и задавать дополнительные вопросы, если ее не попросить. Промт тоже можно написать с помощью нейросетей, например, популярного ChatGPT, либо самостоятельно. Лучше перевести текст на английский, чтобы нейросеть не переводила самостоятельно с русского и поняла контекст. Что важно учесть при написании промта: 

1. Главный объект. Кто или что будет в центре внимания?  

Примеры: a majestic white horse, a curious cat wearing glasses, a flying spaceship. 

2. Действие или движение (если нужно). Что делает главный персонаж или что происходит в сцене?  

Примеры: walking slowly through a forest, counting money with its paws, flying through a thunderstorm. 

3. Фон и окружение. Где происходит событие? В каком контексте?

Примеры: in a snowy mountain landscape, inside a cozy sunlit kitchen, in the middle of a futuristic city at night. 

4. Свет и атмосфера (освещение, настроение). Какие эмоции или визуальный стиль нужно передать?  

Примеры: warm golden hour lighting, dark and moody atmosphere, colorful neon lights, cyberpunk style. 

5. Камера и стиль съемки (по желанию). Как должна двигаться камера? Какой тип кадра использовать?  

Примеры: cinematic wide-angle view, smooth camera pan from left to right, top-down drone shot.

6. Желаемый стиль (реализм, мультфильм, арт и т. д.).   

Примеры: Pixar-style animation, hyper-realistic, watercolor painting style.

Промт, который будем использовать:

A fluffy dog sitting alone in a cozy, sunlit kitchen, counting a stack of dollar bills with its paws. The dog looks into the camera with curious eyes. Soft golden lighting fills the room. Cinematic composition, shallow depth of field, ultra detailed, realistic style. 

Пушистый пес сидит один на уютной, залитой солнцем кухне и пересчитывает лапами пачку долларовых купюр. Пес с любопытством смотрит в камеру. Комнату наполняет мягкий солнечный свет. Кинематографичная композиция, небольшая глубина резкости, сверхдетализированный реалистичный стиль.

Чего стоит избегать:

1. Слишком коротких запросов («a cat» — скорее всего, результат будет случайным).
2. Несовместимых стилей в одном предложении («realistic cartoon ink photo» — слишком много противоречий).
3. Использования двусмысленных выражений или сленга, непонятного для модели.

Инструкции для создания видео 

Pika. Инструкция 

• Перейдите на сайт, пройдите регистрацию или авторизуйтесь через Google-почту. 
• Уже на главной странице можно написать свой промт, но здесь сайт предлагает использовать только последнюю модель – Pika 2.2, которую нельзя попробовать в бесплатной версии. Поэтому перейдите во вкладку Library (библиотека) и добавьте промт. На этой странице можно увидеть, что в бесплатной версии доступна только версия Pika 1.5. 

1 из 2

• Нажмите Settings (настройки) → выберите размер видео и напишите то, чего не должно быть в видео во вкладке Negative prompt. Например: blurry, distorted face, extra limbs, mutated paws, glitch effects, low resolution, dark lighting, scary atmosphere, horror style, disfigured cat, messy background, unrealistic proportions, extra eyes, text artifacts, watermark, pixelation, ugly render, oversaturated colors, poorly drawn fur, robotic look. 
  

«Blurry", "low resolution" — исключает размытые и низкокачественные кадры."distorted face", "extra limbs", "mutated paws", "extra eyes" — избавит от анатомических аномалий, что часто бывает в ИИ-видео.

«Glitch effects", "pixelation", "watermark", "text artifacts" — убирает визуальные артефакты.

«Scary atmosphere", "horror style", "disfigured dog" — исключает нежелательный темный, пугающий стиль генерации.

«Ugly render", "poorly drawn fur", "robotic look" — повышает эстетическое качество, особенно важно для реалистичных или мультяшных видео.

• В поле seed можно добавить идентификатор другой генерации, чтобы повторить визуальный стиль. На главной странице Pika можно посмотреть примеры генеративных видео, скопировать промт или seed. 
  
• После того, как промт написан, можно нажимать на кнопку генерации. Ждать придется долго, возможно, больше суток. 

Что еще можно сделать в Pika: 

• Загрузить свое видео и добавить в него что-то с помощью текстового промта. Например, спецэффекты или героев. Видео должно быть не меньше 5 секунд, для обработки Pika будет использовать первые 5 секунд. Нажмите Pikatwists, чтобы попробовать эту функцию. 
• Загрузите свое фото, чтобы оживить его, или используйте свое изображение в качестве референса для генерации видео. 
• Во вкладке Pikaffects можно выбирать эффекты. Это помогает быстрее получить желаемый результат. Отлично подойдет для соцсетей.  
  

Стоимость: 

• 65 кредитов в бесплатной подписке. Хватит, чтобы сделать два видео по своему промту. Нельзя скачивать видео без вотермарки, нельзя использовать видео в коммерческих целях. 
• 8 долларов в месяц: 700 кредитов в месяц, доступ ко всем версиям Pika 1.0, 1.5, 2.1, 2.2, Turbo и Pro (Pikadditions, Pikaswaps, Pikatwists), все эффекты во вкладке Pikaffects, быстрая генерация. Нельзя скачивать видео без вотермарки, нельзя использовать видео в коммерческих целях. 
• 28 долларов в месяц: 2300 кредитов в месяц, доступ ко всем версиям Pika и эффектам, быстрее генерация, можно скачать видео без вотермарки и использовать в коммерческих целях. 
• 76 долларов в месяц: 6000 кредитов в месяц и все те же функции, что в предыдущей подписке. 

Плюсы Pika: 

• одна из немногих нейросетей, позволяющих не только генерировать видео из текста и изображений, но и преобразовывать уже существующие видео. 

Минусы Pika: 

• долгая генерация;
• мало кредитов и нет возможности генерировать новое видео, пока генерируется старое;
• неудобный интерфейс – постоянно выходит окно с предложением купить подписку. 

Runway. Инструкция

• Перейдите на сайт, пройдите регистрацию или авторизуйтесь через google-почту. 
• Во вкладке Create нажмите Generate video. 
• По ссылке можно прочитать подробную инструкцию по написанию промта. Если коротко, то: не нужно писать про негативный промт (то, чего не должно быть в кадре), опишите основные действия: как движется объект, как движется камера, что происходит и какой визуальный стиль. 

Пример: a handheld camera tracks the mechanical bull as it runs across the desert. the movement disturbs dust that trails behind the mechanical creature. cinematic live-action. Камера снимает механического быка, бегущего по пустыне (перевод: движение поднимает пыль, которая тянется за механическим существом. Кинематографическое живое действие).

• Напишите промт, выберите формат изображения, выберите продолжительность видео (пять или десять секунд), там же можно выбрать модель для генерации. В бесплатной версии доступны две. 
  
• Другой путь: сначала сгенерировать картинку, а после сделать из нее видео. Либо использовать свое изображение и «оживить» его. Для этого в режиме редактора нажмите Image, введите промт или нарисуйте и дополните скетч текстом. Нажмите Generate и дождитесь результата. Под сгенерированной фотографией будет три кнопки: нажмите Input for video, чтобы сделать видео, и дополните промт, нажмите Generate. 
  
• Готовое видео можно скачать, но в бесплатной версии будет вотермарка. 
  

Стоимость: 

• Бесплатная версия: 125 кредитов — хватит, чтобы создать 25-секундное видео с использованием модели Gen-3 Alpha Turbo в разрешении 720p либо сделать 10-секундный ролик через модель Gen-4 такого же качества.
• 15 долларов за 625 кредитов, 35 долларов за 2250 кредитов и 95 долларов за 2250 и неограниченное количество моделей Gen-4 Turbo, Gen-4 (изображение и видео), Gen-3 Alpha Turbo, Gen-3 Alpha и Act-One. 

Плюсы: 

• быстрая генерация — видео длиной в пять секунд генерировалось меньше двух минут;
• простой и понятный интерфейс; 
• можно сделать фото или звук;
• можно нарисовать скетч и сгенерировать картинку по нему;
• попыток хватит, чтобы сделать больше двух видео. 

Минусы: 

• приходится делать несколько попыток, потому что нейросеть не всегда верно генерирует запрос, даже если он точный. 

Kandinsky. Инструкция: 

• Зарегистрируйтесь на сайте. 
• Выберите вкладку «Видео», в выпадающем списке «Модель» выберите «Видео». 
• Выберите размер 1:1, 9:16 или 16:9. 
• Напишите промт и нажмите «Создать видео». 
• Генерация займет не больше четырех минут. Готовое видео можно скачать без вотермарки. 
  

Что еще можно сделать в Kandinsky: 

• На главной странице собраны готовые изображения, анимации и видео: можно скопировать промт, добавить что-то свое и сгенерировать новый контент по референсу. 
  
• В режиме анимации можно выбрать движение камеры, написать негативный промт (то, чего не должно быть в результате), а еще прописать промт для каждой сцены. 
  
• APi Kandinsky можно использовать в своем приложении или на сайте.  

Плюсы Kandinsky: 

• весь интерфейс на русском языке, промт можно написать на русском или английском;
• быстрая генерация;
• нет платной версии, можно генерировать бесконечно; 
• можно сделать фото, анимацию или видео. 

Минусы Kandinsky: 

• результат получается нереалистичным, нейросетевым;
• нет готовых пресетов или спецэффектов.

Советы по генерации видео с помощью нейросетей

1. Уделите внимание промту – пропишите, что должно быть в видео. Чем больше деталей опишите, тем лучше будет результат. У некоторых сервисов есть шпаргалки с рекомендациями, как лучше писать промт. 
2. Бесплатные, пробные версии делают короткие видео до пяти — десяти секунд, которые больше подойдут для соцсетей. Если нужны видео длиннее, то придется заплатить за подписку. 
3. Внимательно читайте информацию об использовании готового видео, сгенерированного нейросетью. Большинство видео в бесплатных версиях сервисов нельзя использовать в коммерческих целях.