Блог Сабатовского

ТОП нейросетей для создания видео

Нейросети Креатив Развитие
Нейросети помогают творцам на любом этапе создания видео: от продумывания идеи до ее реализации. Разобраться со всем этим сложно, но возможно. Чтобы тебе было легче справиться с этим потоком информации, мы собрали для тебя все самое полезное в этот материал. Разбираемся, как создать сценарий в ChatGPT, как сгенерировать видео в Kandinsky, Genmo и Pika и как оживить картинки из Midjourney в Pika
https://sabatovsky.com/aivideo

1. Как придумать идею

Текстовые нейросети — отличные собеседники. Они помогут подобрать слова, которые вылетели из головы, подскажут, с каким заходом подобраться к теме, и с ними можно устроить полный брэйнсторм, если с идеями совсем туго.

Возможны две ситуации:
а) У тебя совсем нет идеи, есть только примерное направление или тема. Тогда пишем запрос в формате “Придумай 30 идей для видео на тему ...”, выбираем и просим дополнить/поменять с учетом того, что больше понравилось
б) У тебя есть идея, но проблемы с ее воплощением. Тогда пишем запрос “предложи пять альтернативных вариантов для видеоролика на тему ...”. Это поможет найти ту самую формулировку, которая крутится на языке, но никак не приходит в голову

С какими нейронками работать:
а) ChatGPT — разговорный чат-бот, с которым можно обсуждать любые темы. Он запоминает контекст и отвечает на вопросы, учитывая его. Обходится он в 20 долларов в месяц
б) TheB.AI — бесплатный аналог ChatGPT. Частенько выдает что-то креативное, но этой нейронке важно давать максимально точные запросы
в) YandexGPT — вряд ли поможет придумать креативную формулировку, так как слишком опирается на исходный текст. Зато придумать идеи — без проблем

2. Как написать сценарий

На этом этапе уже пора вспомнить, что нейросети не сделают за тебя всю работу, это только инструмент, который ее упростит и ускорит. Чтобы написать сценарий для видео с помощью нейронок, у тебя как минимум уже должно быть четкое понимание основной идеи видео, длительности ролика, его структура и описание того, что будет в каждой из частей. Собирай эту информацию, а потом переходи к нейронкам:

а) TheB.AI — эта нейросеть поможет оформить концепцию, синопсис, даст описание персонажам и сценам. А еще она напишет правильный запрос для видео нейронок, чтобы те сгенерировали нужный вам ролик
б) Яндекс Нейро — то, что нужно, чтобы быстро перепроверить все факты
в) KatalistAI — расписывает сценарий и генерит раскадровку. Сервис стоит дорого (от 30 долларов в месяц), но есть лазейки. Есть бесплатная пробная версия на неделю. Когда она закончится, можно просто создать новый аккаунт. Также прога не разрешает скачивать раскадровку, но делать скриншоты никто не запрещал. !Важно: зарегистрироваться можно, оставив реквизиты карты зарубежного банка!

3. Как сгенерировать видео

Нейронки пока создают неточные видео, лажают, добавляют лишние конечности. Но все же, если научиться правильно с ними работать, вполне можно создать годный ролик. Также рабочий вариант — интегрировать сгенерированные нейронками видео в свой ролик вместо футажей; в таком случае нужны менее длительные кадры, поэтому выше шанс получить хороший результат.

Нейронки для генерации:
а) Kandinsky Video — полностью бесплатная нейронка. Сейчас в ней максимально можно нагенерировать видео на 16 секунд. Это время разбито на 4 сцены, каждую нужно описать отдельно. Пока Kandinsky Video плохо даются переходы, они получаются кривыми и пугающими. Поэтому лучше всего генерировать маленькие видео по 4 секунды, а потом уже объединить их в любой программе для монтажа
б) Genmo — как Kandinsky, но выдает более качественные ролики с меньшим количеством странностей. Сервис платный — 10 долларов в месяц. Есть бесплатная версия, но с ограничениями — 25 видео в день по 3 секунды. Весь интерфейс Genmo на английском, но промты на русском тоже понимает. Genmo подходит для плавных видео, в центре сюжета которых находится какой-то один объект. Ролики с активными движениями и несколькими объектами даются программе сложнее: есть шанс, что видео получится неудачным.
в) Pika — нейронка для генерации видео, работает с разными стилями. Хорошо прорабатывает детали: на ее видео видны моргание, дыхание, тряска рук. Ежедневно бесплатно можно нагенерить 3 видео по 3 секунды, дальше 8 долларов в месяц.

4. Как оживить картинку

Есть более сложный вариант создания видео через нейросеть: генерим картинку и анимируем ее. Здесь нужно запариться чуть больше, зато получится проработать ролик максимально детально:
Что делаем:
а) генерируем картинку в Midjourney (Stable Diffusion и Kandinsky тоже подойдут)
б) загружаем картинку в нейронку Pika (другие нейронки тоже можно использовать, например, Runway и Haiper) и анимируем
в) монтируем и подчищаем косяки в After Effects

Подробнее, как это работает, объясняем в видео:

Памятка по запросам для нейронок:

1. Будь точным и конкретным. Не “Придумай 10 идей заголовков для видео на тему монтаж видео в CapCut”, а “Придумай 10 идей заголовков для видео на тему монтаж видео в CapCut. Учти, что видео длится 25 минут. В нем рассказывается про последнее обновление CapCut, основные функции, инструменты на искусственном интеллекте и эффекты”.

2. Давай максимальный контекст. Нейронке нужно дать по максимуму ту информацию, которая есть о проекте. Расскажи о целевой аудитории, о платформе, для которой делается видео.

3. Придумывай эмоции самостоятельно. Нейронка — не человек, она не понимает, где нужно преувеличить, где приукрасить, где какие эмоции юзать. Добавляй эмоции в запрос, проси сделать грустную атмосферу или радостную, прописывай, где люди должны улыбаться, а где плакать.

4. Используй термины. Нейронки уже неплохо понимают разговорную речь. Но все равно они по-прежнему предоставляют более точную информацию по понятному запросу. Не “напиши сценарий для мультяшного видео”, а "напиши сценарий для мультфильма про белочку в стиле "Pixar". Не “сгенерируй парня, который кринжанул”, а “сгенерируй видео с молодым человеком, на лице которого отображается испанский стыд”.

5. Помни — нейросеть не может читать мысли. Чем подробней твой запрос, тем точнее будет ответ. Не бойся изменять его до тех пор, пока не получишь идеальный результат