Пользователь Reddit под ником Gagarin1961 использовал нейросеть Stable Diffusion, чтобы превратить кадры из фильмов «Властелин колец» в мультики в стиле Pixar или Dreamworks. Результатами он поделился в посте, который за 5 дней собрал 29 тысяч лайков. В комментариях отмечают, что больше всего это похоже на работы Blue Sky Studios и «Как приручить дракона» от Dreamworks.
За основу автор брал кадры из фильмов Питера Джексона, а также добавлял текстовое описание для генерации в заданном стиле. Вот что у него получилось.
1. Гэндальф
2. Фродо Бэггинс
3. Бильбо и Гэндальф
4. Арагон
5. Гимли
6. Леголас
7. Бэг-Энд в Хоббитоне
8. Саруман Белый
9. Око Саурона
10. Город-крепость Минас Тирит
11. «Ты не пройдёшь!»
12. Балрог
13. Ривенделл
14. Галадриэль
15. Элронд
В комментариях автор отметил, что не всю работу делала нейросеть: помимо отбора предложенных вариантов ему также пришлось обработать некоторые удачные кадры с мелкими недоработками. Он показал пару примеров сырых изображений, в которых что-то было не так. Балрог изначально пугал совсем по-другому:
А Гэндальф изначально стоял к камере не спиной:
В такие моменты действительно радуешься, что Photoshop существует.
Обложка: Gagarin1961 / Reddit