Как генерировать реалистичные видео и оживлять картинки в нейросети Hailuo AI
Нейросети
651
Изображения в коллаже — Hailuo AI / Midjourney

Как генерировать реалистичные видео и оживлять картинки в нейросети Hailuo AI

Превращаем фотографии в странные гифки
3
Аватар автора

lev

с трудом запомнил название Hailuo

Страница автора

Hailuo AI — модель для генерации видео от китайской компании MiniMax.

Нейросеть стала популярна благодаря простому интерфейсу и большому количеству бесплатных попыток. Видео выглядят динамично, в них нет эффекта замедленной съемки, как у многих других сервисов.

Объясню, почему нейросеть Hailuo AI стала популярна в соцсетях и как ей пользоваться.

За что Hailuo AI полюбили в интернете

Hailuo AI — один из китайских генеративных сервисов, которые набрали популярность в 2024 году. В Китае нет такого строгого регулирования, как в Европе, поэтому ИИ-стартапам там проще развиваться. Вот чем отличается Hailuo AI.

Дает генерировать много и бесплатно. В первые три дня после регистрации можно создать примерно 33 ролика, а потом — по три в день. Это делает сервис одним из лучших для тех, кто хочет попробовать нейросети для создания видео и не разбираться с настройками. Например, аналогичный сервис Kling дает куда меньше генераций без подписки.

Создает реалистичные видео. Осенью 2024 года анимации от нейросетей приняли в интернете за настоящие ролики, хотя в них заметны артефакты. Пользователи делают видео с вымышленными животными, известными людьми или в стиле найденной пленки. Hailuo отказывается анимировать только наготу и откровенное насилие, но соглашается работать с кадрами из фильмов или фотографиями политиков.

Этих морских животных не существует
Так Голливуд не горел
Так жирафов не спасают

Точно неизвестно, где сделали эти ролики, но Hailuo способен их повторить. Я сгенерировал в нейросетях похожую сцену с жирафом перед советским жилым домом и анимировал.

Главное — загрузить реалистичную картинку, потому что на качество роликов влияет резкость, контраст или количество объектов на изображении.

Такие ролики выглядят убедительнее после сжатия

Завирусилась благодаря мемам. В декабре 2024 года пользователи анимировали в Hailuo одну и ту же картинку с собакой и яблоком и придумывали неожиданные повороты сюжета. В этих мемах видно одно заметное преимущество нейросети: динамика.

Позволяет генерировать поп-культурных героев. Модель хорошо справляется с мимикой и движениями, потому что ее обучали на голливудских фильмах. Нейросеть знает, как выглядит Шрек, ВАЛЛ-И и Дональд Трамп, а из-за большого датасета она иногда сохраняет консистентность лиц и не искажает внешность.

Как попробовать Hailuo бесплатно

Сервис доступен в России. Зарегистрироваться можно только через аккаунт Google. Для этого перейдите на официальный сайт и нажмите Sign in, а затем — Continue with Google. Выберите свой аккаунт и снова нажмите Continue.

Вам начислят 1000 кредитов на три дня, а также вы будете получать по 100 кредитов ежедневно. Ежедневные бонусные кредиты сгорают и не переносятся на следующий день. На одну генерацию длительностью шесть секунд нужно 30 кредитов. После исчерпания 1000 бонусных кредитов вы сможете генерировать по три ролика в день.

Шаг 1. После регистрации вы попадете на главную страницу. Здесь отображаются ролики других пользователей. Нажмите Create в левом меню, чтобы сгенерировать первую анимацию.

Шаг 2. Вы попадете в раздел для генерации видео. Слева можно выбрать режим генерации, написать запрос, отключить автоулучшение промпта и выставить количество генераций. Справа появятся созданные ролики.

Вот какие режимы доступны.

🎥 Text to Video сгенерирует ролик на основе текстового промпта. Напишите запрос на английском языке. Например, a lot of kittens jumping on head of old russian woman in front of soviet residential building, camera shaking  .

Генерации в режиме Text to Video сложно назвать реалистичными

🎬 Image to Video сгенерирует ролик на основе картинки и текстового промпта. Рекомендую использовать именно его, потому что с режимом Text to Video слишком мало контроля над генерацией и тяжело получить хороший результат.

Перетащите и загрузите любое изображение в поле с текстом «Drag / Paste / Click to upload new photo», а затем напишите запрос. В нем опишите, что происходит на вашем изображении, и какое действие должно к нему применяться. Если вы работаете с 2D-иллюстрациями, например аниме, то выберите другую модель — I2V-01-live. Она лучше анимирует мимику и движения плоских персонажей.

Вот как нейросеть анимирует нарисованного персонажа

🎯 Subject Reference сгенерирует ролик с конкретным персонажем на основе его изображения или фотографии. Достаточно загрузить картинку и описать, что будет происходить на видео.

Этот режим меня разочаровал. Он неплохо копирует внешность, но нельзя выбрать соотношение сторон и задать стиль картинкой. Я загрузил свою детскую фотографию, попросил танцующего ребенка на пляже и получил как будто стоковое видео.

Когда закончите с запросом, нажмите на розовую кнопку внизу. Какое число там указано, столько кредитов вы потратите на одну генерацию.

Напоминает моего злого двойника

Шаг 3. Дождитесь окончания генерации и наведите курсор на готовую анимацию — появятся кнопки для быстрого взаимодействия. Нажмите на иконку со стрелкой вниз, чтобы скачать ролик. Если кликнуть на миниатюру, то видео откроется в большем размере.

Шаг 4. Чтобы скопировать настройки удачной анимации, нажмите на кнопку Re-create. Откроется новое окно с предложением заменить текущий запрос на новый. Нажмите Replace.

Что учитывать при генерации

Как и с любыми нейросетями, нет одного правильного ответа, как генерировать в Hailuo AI. Я купил безлимитную подписку и сделал несколько сотен роликов. Вот что могу посоветовать на основе своего опыта.

🔮 Не бойтесь экспериментировать. Hailuo полюбили за странные анимации. Пользователи часто используют в запросе глаголы fighting  , shooting  и другие необычные действия. Я люблю добавлять в промпт turning into  или falling apart  .

Я использовал запрос на английском «ростовая фигура в отчаянии хватается за голову»

🎥 Добавляйте в промпт движение камеры. Генерации становятся реалистичнее из-за имитации реальной съемки. Достаточно написать camera moving  или zoom in  . Иногда это делает генерации хуже, потому что из-за резких движений мелкие текстуры могут рябить или пропадать.

🤳 Загружайте свои фотографии со смартфона. Это самый простой способ получить реалистичную анимацию. К тому же это весело: можно взять снимок с питомцем, дедом или мусорным пакетом на улице.

Эту урну я сфотографировал где-то в Казани

✏️ Используйте опцию Enhance Prompt — она обозначена иконкой-карандашом справа внизу в поле с текстовым запросом. По умолчанию настройка включена. С этим параметром другая нейросеть улучшит и расширит промпт, но как именно — неизвестно. У меня анимации чаще выходили удачными с включенной функцией, так что я ее рекомендую оставить.

🤖 Используйте переводчики, если плохо знаете английский язык, например «Гугл⁠-⁠переводчик» или DeepL. Ошибки в тексте путают нейросеть. Неправильные предлоги мешали получить хорошую генерацию даже с включенным Enhance Prompt.

💫 Экспериментируйте со стилями. Загрузите скриншоты игр, иллюстрации, мемы или рисунки. Для персонажей я использую модель I2V-01-live — с ней движения выходят плавнее.

Жду нейросетевые моды для Sims 4

⚙️ Пробуйте короткие запросы, например «cat flying in the office»  . Дальше усложняйте. Описывайте сцену, характер видео и детали, например close up  , slow motion  , lens flare  .

Для убедительного результата добавляйте простые глаголы наподобие walking  , jumping  , running  . Модели обучают на датасетах, где ролики описывают распостраненными фразами. Для реализма вместо абстрактных формулировок лучше использовать конкретные действия.

👀 Выбирайте картинки без мелких деталей. Нейросеть сжимает большие картинки. Лучше всего у нее получается работать с изображениями без текста, множества разнообразных предметов, вывесок и так далее.

Hailuo испортил буквы в тексте уличного объявления

🧠 Не зацикливайтесь. Модели учитывают при генерации даже шумность картинки, поэтому любые изменения влияют на результат. Если у меня не получается, я обрезаю кадры иначе, ищу другой ракурс у фотографий или делаю изображения ярче.

Нейросети справляются с задачами по-разному. Они хорошо анимируют частицы: дым, огонь, воду. Хуже удается учитывать анатомию и отображать сложные действия.

Олень делает сальто
Машина едет на месте с искрами

Стоит ли брать подписку

Платная подписка стоит от 10 $⁣ (1000 ₽)  в месяц и дает 1000 кредитов. С ней можно генерировать до двух видео одновременно, отправлять пять запросов за раз, скачивать анимации без вотермарки и не ждать в очереди. Российской картой оплатить подписку нельзя.

Все кредиты сгорают в конце месяца. Если их не хватит, можно докупить по курсу 5 $ — 50 кредитов. Это не самые выгодные условия по сравнению с конкурентами, но есть еще безлимитный тариф за 95 $.

Тарифы в Hailuo

FreeStandartProUnlimited
ЦенаБесплатно10 $⁣ (1030 ₽)35 $⁣ (3596 ₽)95 $⁣ (9776 ₽)
Количество кредитов1000 после регистрации, по 100 ежедневно1000 кредитов каждый месяц, по 100 ежедневно4500 кредитов, каждый месяц, по 100 ежедневноБезлимит

Тарифы в Hailuo

Free
ЦенаБесплатно
Количество кредитов1000 после регистрации, по 100 ежедневно
Standart
Цена10 $⁣ (1030 ₽)
Количество кредитов1000 кредитов каждый месяц, по 100 ежедневно
Pro
Цена35 $⁣ (3596 ₽)
Количество кредитов4500 кредитов, каждый месяц, по 100 ежедневно
Unlimited
Цена95 $⁣ (9776 ₽)
Количество кредитовБезлимит

Получается, что стандартная подписка даст в первый месяц столько же видео, сколько простая регистрация в первые три дня. Выгоднее безлимит, особенно если вы планируете использовать Hailuo профессионально. Например, я истратил первые 1000 кредитов всего за два дня.

Бесплатная и платная версии не отличаются друг от друга по качеству. Главные отличия — водяной знак на видео и скорость генераций. Платная подписка также дает приоритетный доступ к новым функциям, но пока это никак не реализовали на практике.

Что в итоге

  1. Hailuo — лучшая нейросеть для генерации видео в начале 2025 года, если не хочется платить за подписку и разбираться в сложных настройках.
  2. Нейросеть доступна в России, для использования нужен только гугл-аккаунт.
  3. Hailuo генерирует очень динамичные видео. Главный минус — отсутствие контроля над результатом, поэтому лучше загружать картинки.
  4. Распознать генерацию от Hailuo можно по анатомии персонажей, нечетким текстурам, малой длительности кадра.
Причина любить нейросети

Мы постим кружочки, красивые карточки и новости о технологиях и поп-культуре в нашем телеграм-канале. Подписывайтесь, там классно: @t_technocult

levУже пробовали Hailuo AI? Поделитесь впечатлениями в комментариях: