Я сгенерировал в нейросети кадры фильма «Гарри Поттер и Советский Союз»

Недавно объявили о повторной экранизации «Гарри Поттера» — в этот раз в формате сериала.

Из-за новости я тоже решил переосмыслить франшизу, но с помощью пятой версии нейросети Midjourney. Сначала попытался сгенерировать серию в стиле Уэса Андерсона, но потом взял более мрачный стиль — советский.

Запросы строились по одному шаблону: Harry Potter in the Soviet Union movie still, описание сцены и иногда имя нужного актера. Например, Harry Potter in the Soviet Union movie still, broom scene, Daniel Radcliffe --ar 3:2. Я не прописывал подробные запросы: хотел дать больше свободы Midjourney.

Нейросеть хорошо распознает знаменитостей и всегда подставляет нужные лица. Она знает Дэниела Реддклиффа, Эмму Уотсон и Алана Рикмана. Но если актер не очень известный, как, например, Робби Колтрейн или Ричард Харрис, я писал имя персонажа — Хагрид и Дамблдор соответственно. Они немного походили на актеров из экранизации, но скорее за счет выразительного образа, чем по внешности.

Я сгенерировал несколько знаменитых сцен: прибытие в Хогвартс, полет на гиппогрифе, церемонию с распределяющей шляпой. Промпт soviet приглушил цвета и добавил хтони. Особенно хороши дементоры и пожиратели смерти — они еще более жуткие, чем в оригинале.

Интересными получились кадры, где я добавлял запрос soviet propaganda: нейросеть случайно сгенерировала военный парад во внутреннем дворе школы со знаменами в цветах Гриффиндора. Потом я добавил памятник Ленину перед Хогвартсом в стиле сталинского ампира.

Экспериментировал и со школьной формой: пропали мантии и шляпы — вместо них нейросеть добавила цветные пальто и треугольные шапки. Из-за зеленого цвета слизеринская форма стала напоминать военную.

Жаль, Midjourney плохо справляется с метлами, квиддичем и волшебными палочками: нейросеть не понимает, что это магические атрибуты, а не просто палки и швабры. Из палочек получаются бенгальские огни или горящие ветки, а вместо квиддича — хоккей.

Из-за этого не получилась сцена битвы за Хогвартс: Midjourney генерирует либо винтовки, которых не должно быть, либо искрящиеся палки, но никак не волшебные палочки. Другая сложность — гиппогриф. Судя по всему, нейросеть не знает, как он выглядит, поэтому генерировала птиц и ястребов. Я так и не добился от нее гиппогрифа.

В целом я доволен результатом. Но идею можно развить дальше, если детальнее прописывать детали и доработать промпты. Для этого будет полезна функция реверс-инжиниринга картинок: вставляете кадр из фильма, получаете запрос и изменяете его так, как вам хочется.