Как похорошел Кузбасс при нейросетях: посмотрите, как видит города и людей региона искусственный интеллект

Люди и города, сгенерированные Stable Diffusion

28 мая 2023, 09:13 8 760

Кажется, что это реальное фото. Но нет, это результат работы нейросети | Источник: Stable Diffusion — Кажется, что это реальное фото. Но нет, это результат работы нейросети
Источник:
Stable Diffusion

Нейросети и их возможности стремительно развиваются, с каждым днем становясь всё лучше. И если еще полгода назад мы смотрели на абстрактные картинки, в которых порой с трудом угадывали очертания домов и пугались непропорциональных «людей». Но теперь генерируемые картинки стали максимально приближенными к реальности.

Почти год назад мы уже пробовали посмотреть на Кузбасс глазами нейросети Midjourney, которая дает возможность «нарисовать» что-либо по запросам, но количество бесплатно генерируемых картинок ограничено. Есть и бесчисленное количество других порталов, где можно создавать иллюстрации, но очень часто они слабо обучены, и поэтому изображения не слишком отличаются друг от друга. Поэтому мы решили пойти сложным путем и воспользовались не настроенным сервисом, а исходным кодом программы Stable Diffusion.

Пример картинки, которая получается по запросу «Жительница угледобывающего города Новокузнецк». Образы модели и задний план в целом ничем не отличаются друг от друга | Источник: Kandinsky 2.1 — Пример картинки, которая получается по запросу «Жительница угледобывающего города Новокузнецк». Образы модели и задний план в целом ничем не отличаются друг от друга
Источник:
Kandinsky 2.1

А вот здесь видно, как изменились нейросети за последние девять месяцев . Здесь один и тот же запрос в Kandinsky. Модельки стали четче, но общие детали в них прослеживаются | Источник: Kandinsky 2.1

А вот здесь видно, как изменились нейросети за последние девять месяцев . Здесь один и тот же запрос в Kandinsky. Модельки стали четче, но общие детали в них прослеживаются

Источники:

Kandinsky 2.1

Главное отличие этой сети в том, что здесь мало написать «Вид на город Кемерово» или «Кузбассовец на берегу Томи», программа ничего толкового по этому запросу не сделает. Поэтому тут обращение к системе больше похоже на описание предметов на «Алиэкспресс», также необходимо отметить и те моменты, которые вы не хотите видеть на изображении. Но подобрав подходящий вариант итога, его можно использовать сколько угодно раз, и сгенерированные виды или люди будут разными.

Вот так, например, выглядят типичный кемеровчанин и рядовая новокузнечанка по мнению искусственного интеллекта. Глядя на эти картинки, можно подумать, что на них изображены реальные люди, но нет, в жизни вы их никогда не встретите.

Вот так нейросеть видит молодого кемеровчанина | Источник: Stable Diffusion — Вот так нейросеть видит молодого кемеровчанина
Источник:
Stable Diffusion

И еще один вариант типичного кемеровчанина от нейросети | Источник: Stable Diffusion — И еще один вариант типичного кемеровчанина от нейросети
Источник:
Stable Diffusion

Кажется, что такую новокузнечанку можно встретить на улицах города, но это лишь результат стараний нейросети | Источник: Stable Diffusion — Кажется, что такую новокузнечанку можно встретить на улицах города, но это лишь результат стараний нейросети
Источник:
Stable Diffusion

А вот еще один портрет жительницы Кузбасса, который нарисовала нейросеть | Источник: Stable Diffusion — А вот еще один портрет жительницы Кузбасса, который нарисовала нейросеть
Источник:
Stable Diffusion

Сгенерированные виды городов Кузбасса также сильно отличаются друг от друга. Вероятнее всего, какую-то часть картинки нейросеть берет, основываясь на реальных снимках городов, поэтому чаще всего по запросу «Кемерово» или «Белово» или любой другой город Кузбасса, получаются засыпанные снегом территории. Чтобы убрать его, мы сильно постарались, и вот что у нас вышло.

Прокопьевск сгенерированный удивительно похож на реальный | Источник: Stable Diffusion — Прокопьевск сгенерированный удивительно похож на реальный
Источник:
Stable Diffusion

Мариинск. Узнаёте? | Источник: Stable Diffusion — Мариинск. Узнаёте?
Источник:
Stable Diffusion

Зимний Кемерово | Источник: Stable Diffusion — Зимний Кемерово
Источник:
Stable Diffusion

А это Новокузнецк | Источник: Stable Diffusion — А это Новокузнецк
Источник:
Stable Diffusion

Все эти сгенерированные виды городов в целом не балуют детализацией. Но если в запрос напихать побольше слов, которые хочется видеть на изображении, оно заметно преображается.

Такое изображение получается при запросе «Площадь Советов в центре Кемерова» | Источник: Stable Diffusion — Такое изображение получается при запросе «Площадь Советов в центре Кемерова»
Источник:
Stable Diffusion

А это Междуреченск летом | Источник: Stable Diffusion — А это Междуреченск летом
Источник:
Stable Diffusion

А это Междуреченск летом. Правда, похоже на парк аттракционов? | Источник: Stable Diffusion — А это Междуреченск летом. Правда, похоже на парк аттракционов?
Источник:
Stable Diffusion

Хоть где-то Новокузнецк действительно город-сад, а не один из самых грязных городов России | Источник: Stable Diffusion — Хоть где-то Новокузнецк действительно город-сад, а не один из самых грязных городов России
Источник:
Stable Diffusion

И еще один пример того, как нейросеть видит Новокузнецк | Источник: Stable Diffusion — И еще один пример того, как нейросеть видит Новокузнецк
Источник:
Stable Diffusion

Виртуальный Мариинск, по мнению нейросети, не может обойтись без церкви | Источник: Stable Diffusion — Виртуальный Мариинск, по мнению нейросети, не может обойтись без церкви
Источник:
Stable Diffusion

Если опуститься на уровень улиц и домов, то оказывается, что нейросети пока всё же не очень понимают особенности городов. Это, в общем-то, и неудивительно. Кое-где «артефакты» и искажения всё же присутствуют, модельки и чекпойнты, используемые для генерации, неидеальны, но всё равно кажется, что где-то ты уже видел эту улицу, дом, перекресток.