Нейросети научились создавать и видео. Так, в 2021 году искусственный интеллект разработал и сгенерировал короткометражный фильм по мотивам творчества Федерико Феллини, а уже в 2024 продюсеры одной киностудии отказались от ее расширения после презентации возможностей OpenAI. Какие сервисы сегодня доступны обычному SMM-специалисту или контент-маркетологу, какие видео они могут создавать бесплатно, расскажем в этой статье.
Что могут нейросети
Несмотря на постоянное улучшение и совершенствование, ИИ с большим трудом создает реалистичные видео. Но уже вполне можно сделать видеовставки для сайтов или социальных сетей или смонтировать отдельные кадры для масштабного проекта. Полученный результат придется доводить до ума вручную, например, вырезать лишнее в редакторе. Лучше всего нейросети для видеоконтента создают:
- простую анимацию по промту или загруженному изображению;
- короткими роликами на 3-15 секунд;
- ролики с улучшенным качеством;
- видео с измененными объектами и фоном;
- видео с дикторской озвучкой и субтитрами.
Часто сервисы предлагают сделать видео продолжительностью до 2-х минут, но низкого качества. В процессе искусственному интеллекту приходится создавать, анимировать и объединять сотни картинок. И тут возникают проблемы. Чем длиннее ролик и обширнее промпт, тем больше ошибок в генерации. Хуже всего AI-технологиям даются реалистичные люди, крупные планы и четкое следование сюжету. ИИ не всегда корректно распознает действия и путает смысл глаголов. Но эта ошибка на ранних этапах была и у генераторов изображений, поэтому у технологии явно есть перспективы.
Как работать с ИИ для создания видео?
Алгоритм для видеогенераторов ничуть не отличается от стандартной работы с AI: главное, правильно составить запрос. Текстовому описанию придется уделить достаточно внимания. Так шансов на хороший результат будет больше. Что нужно отразить в запросе:
- Стиль. На многих сайтах стиль видео можно выбрать в выпадающем меню. Стандартно пользователю предлагают 3D-графику, анимацию, реализм, аниме.
- Ракурс. Сильного приближения стоит избегать, потому что итог становится непредсказуемым. Можно указать широкий угол или написать, что камера должна двигаться за предметом.
- Объект. Это главное действующее лицо видеоролика. Для детальности в промт включают прилагательные: «красный автомобиль», «шоколадное печенье», «желтый диван». Подробные характеристики могут запутать ИИ, что отразится на ролике.
- Действия. Рекомендуем ограничиться одним относительно простым глаголом вроде: «идет», «читает», «сидит»
В качестве дополнения вносят описание окружающей обстановки и освещения. Упрощенно готовый запрос должен выглядеть примерно так: «реалистичная зеленая лягушка ловит комара на болоте на закате». Помните, что почти все современные генераторы видеоконтента лучше понимают запросы на английском языке, а некоторые вообще не распознают русских слов.
Примеры промптов и сгенерированных видео на сайте нейросети Sora
Бесплатные сервисы для генерации видео
Нейросети для генерации видео уже способны решать некоторые задачи и разнообразить контент. В подборке – нейросети с бесплатным доступом и достойным результатом.
Visper
Синтезирует голос из текста и озвучивает презентацию с помощью виртуального персонажа. Диктора можно выбрать самостоятельно: представлено около 20 разных образов и 8 типов голосов. В видео много настроек: фон, размещение логотипа или диаграммы на заднем плане, музыкальное сопровождение. При оформлении подписки лимит увеличивается до 20 минут в месяц, а с ролика исчезают водяные знаки.
Результат генерации виртуального диктора для проекта Text.ru
Классные фишки нейросети:
- создание собственного персонажа по фото;
- расставление ударений и пауз в речи;
- поддержка озвучки на 9 языках.
Доступ: есть бесплатный, но с ограниченным функционалом (есть лимит на количество генераций, водяной знак, нельзя скачать файл).
Runway
Принимает промты на английском языке. Умеет оживлять картинку, работать напрямую с текстовыми запросами и изменять загруженные видеофайлы. Нейросеть с успехом генерирует реалистичные кадры, визуальные эффекты и удаляет из кадра лишние объекты. Есть точечное управление камерой с изменением ракурса и отслеживанием движений, но многое доступно исключительно при покупке подписки.
Результат генерации с промптом: «the car is driving along the road and a thunderstorm begins»
Доступ: в версии free дают несколько кредитов, которых хватит на три попытки. Максимальное разрешение файла без оплаты – до 720 р, а общая продолжительность проектов не более 105 секунд.
Vivago.ai
Площадка заточена на создание контента для популярных соцсетей и видеохостингов. У онлайн-платформы есть готовые шаблоны, генерация сценариев и роликов по промту. Одна из самых популярных опций: превращение любого объекта в танцующего человека.
Результаn генерации с запросом: «a human like figure made of page from a book with text dancing»
На практике искусственный интеллект показал себя спорно. Временами он опирается на отдельные части промта, поэтому смысл получается несвязным. Invideo AI можно использовать как вспомогательный инструмент, но потребуются значительные правки.
Доступ: в деморежиме генерируется до 10 минут видео с качеством 1080 р и водяными знаками.
Pika
После обновления нейросеть предлагает погрузиться в мир сюрреалистических эффектов. ИИ «надует» объект на фото как воздушный шар, превратит персонажа в торт или слайм. Можно растопить, взорвать или сломать предмет на картинке. Но есть и более привычные возможности вроде анимации или генерации по промту. Pika также добавляет звуковую дорожку и синхронизирует артикуляцию с речью персонажа.
Пример генерации по запросу: «female warrior princess after battle with a hyper realistic neon led dragon on top of a cliff with waves crashing below»
Пример генерации по запросу:«a strong aura around a person who is meditating»
Плюсы нейросети:
- выдает результат в высоком разрешении;
- поддерживает настройки камеры через промт;
- распознает эмодзи в запросах;
- делает длинные ролики в премиум-режиме.
Если у вас нет подписки, то будьте готовы к долгому ожиданию: генерация в порядке очереди может занять до 30-60 минут.
Доступ: бесплатно дается 150 кредитов не месяц для создания 15 коротких видео до 5 секунд, доступ к сюрреалистическим эффектам, скачивание файла с водяными знаками.
Шедеврум
Российские разработчики из команды Яндекса предлагают создать короткие видео, но пока в тестовом режиме. Шедеврум принимает и картинки, и тестовые запросы. На сайте есть ограничения – не более 20 первых кадров в день и до 10 генераций видео. Чтобы создавать контент без ограничений достаточно скачать приложение. Увы, но пока AI сильно уступают иностранным конкурентам. Первый кадр выглядит сносно, но при анимации качество резко снижается. Да и промты Шедеврум понимает только отчасти.
Пример видео по запросу: «конь бежит по реке его освещает летнее солнце»
Из хорошего:
- подходят запросы на английском, казахском и русском языках;
- можно делиться контентом с другими пользователями;
- есть сохранение файлов и визуальные эффекты.
Доступ: все функции бесплатны, если установлено приложение.
Редакторы на базе искусственного интеллекта подходят как для создания видео, так и для его улучшения. Пока в их работе все не так гладко, но уже есть интересные функции с заделом на будущее. Создайте своего виртуального менеджера, оживляйте картинки и улучшайте качество видеоряда уже сегодня, но будьте готовы к доработкам.
