ИДЕЯ ПРОЕКТА
Пьер Огюст Ренуар — один из ключевых представителей импрессионизма, французский живописец. В отличие от многих современников, обращавшихся к социальным драмам, Ренуар сосредоточился на изображении радостных моментов жизни: танцев, пикников, театральных сцен, портретов женщин и детей.
Как говорил Ренуар: «Я убежден в том, что картина должна быть приятной, веселой и привлекательной… На свете и так слишком много скучных вещей, и не стоит пополнять их число своими картинами».
Пьер Огюст Ренуар. Бал в Мулен де ла Галетт. 1876 / Завтрак гребцов. 1880-1881
Было решено взять радостный и легкий стиль Ренуара и с помощью генеративной нейросети Stable Diffusion изобразить в нём московские пейзажи. Цель проекта — получить мягкие, нежные этюды Москвы с характерными «пушистыми» мазками, передать солнечную атмосферу праздничности, свойственную работам Ренуара.
Пьер Огюст Ренуар. Пейзаж берега озера. 1889 / Женщина с зонтиком в саду. 1875 / Женщина в саду. 1873
В результате проекта планируется получить серию из 10 квадратных изображений, демонстрирующих, как нейросеть интерпретирует московскую архитектуру и городскую среду через призму импрессионизма Ренуара.
ГЕНЕРАЦИИ
(1) Красная площадь Промпт: «impressionist drawing in RENOIR style, red square, moscow»
Красная площадь в стиле Пьера Огюста Ренуара. Stable Diffusion
(2) Парк Сокольники Промпт: «impressionist drawing in RENOIR style, sokolniki park, moscow»
Парк Сокольники в стиле Пьера Огюста Ренуара. Stable Diffusion
(3) ВДНХ Промпт: «impressionist drawing in RENOIR style, the exhibition of achievements of national economy (vdnkh), moscow»
ВДНХ в стиле Пьера Огюста Ренуара. Stable Diffusion
(4) Крымский мост Промпт: «impressionist drawing in RENOIR style, krymsky bridge, moscow»
Крымский мост в стиле Пьера Огюста Ренуара. Stable Diffusion
(5) Парк Горького Промпт: «impressionist drawing in RENOIR style, gorky park with people strolling, moscow»
Парк Горького в стиле Пьера Огюста Ренуара. Stable Diffusion
(6) Арбат Промпт: «impressionist drawing in RENOIR style, arbat street, moscow»
Арбат в стиле Пьера Огюста Ренуара. Stable Diffusion
(7) Воробьёвы горы Промпт: «impressionist drawing in RENOIR style, viewpoint sparrow hills, one of the highest points in moscow and offers a panoramic view of the city, moscow»
Воробьёвы горы в стиле Пьера Огюста Ренуара. Stable Diffusion
(8) Москва Сити Промпт: «impressionist drawing in RENOIR style, buildings of moscow international business center, moscow»
Москва Сити в стиле Пьера Огюста Ренуара. Stable Diffusion
(9) Большой театр Промпт: «impressionist drawing in RENOIR style, bolshoi theatre square with fountain, moscow»
Большой театр в стиле Пьера Огюста Ренуара. Stable Diffusion
(10) Останкинская телебашня Промпт: «impressionist drawing in RENOIR style, ostankino tv tower, moscow»
Останкинская телебашня в стиле Пьера Огюста Ренуара. Stable Diffusion
Таким образом, сгенерированные изображения успешно передают основные черты стиля Ренуара: теплую солнечную цветовую гамму с золотисто-розовыми оттенками и характерную хаотичность «пушистых» мазков. Интересно, что нейросеть часто дорисовывает толпы людей, даже когда промпт описывает только архитектурные объекты. Фигуры гуляющих людей вписываются в московские пейзажи, превращая их в живые городские сцены.
ПРИНЦИП РАБОТЫ КОДА
Для генерации изображений я использовала Stable Diffusion, для обучения нейросети я отобрала 54 картины Ренуара, кадрировала их под формат 1 к 1 и загрузила в Google Colab. Я установила необходимые зависимости, подгрузила работы Ренуара и проверила, что они точно загрузились в среду.
Фрагменты кода. Загрузка зависимостей
Фрагмент кода. Загрузка и превью архива изображений
Затем для обучения модели необходимы пары «изображение — текстовое описание». Была выполнена автоматическая генерация подписей с помощью модели BLIP. Затем к каждому описанию был добавлен единый префикс: «impressionist drawing in RENOIR style, »
Фрагменты кода. Добавление текстовых описаний
Затем я получила токен с сайта Hugging Face, чтобы сохранить туда модель, и настало время переходить к тренировке посредством LoRa, которое заняло полтора часа.
Фрагменты кода. LoRA и сохраниене модель на хабе Hugging Face
Это стало заключительным этапом в дообучении модели, после этого ее можно было подгружать и тестировать.
Фрагмент кода. загрузка модели SDXL и подготовка её к работе на видеокарте.
