01 Введение
Prompt Engineering — это процесс структурирования слов, которые могут быть интерпретированы и поняты моделью преобразования текста в изображение. Подумайте об этом как о языке, на котором нужно говорить, чтобы объяснить модели искусственного интеллекта, что нужно нарисовать.
Разработка подсказок — отличный способ расширить возможности моделей Text2IM. Хорошие подсказки могут превратить изображения из хороших в отличные.
Prompt Engineering
Эта книга поможет вам освоить основные структурные элементы и все приемы, необходимые для овладения методом Stadle Diffusion.
Секрет создания хороших изображений:
● Хорошо написанная подсказка, состоящая из модификаторов и хорошей структуры предложений. Формат подсказки будет представлен в разделе 2. В разделе 3 мы покажем все типы модификаторов, которые можно использовать, а в разделе 4 — некоторые волшебные слова.
● Хорошо скорректированные параметры стабильной диффузии. (раздел 5). Вы можете
всегда можно использовать параметры по умолчанию, но иногда более точные параметры могут дать лучшие результаты. Это расширит ваши возможности по воплощению в жизнь творческих образов мечты.
Вводная информация по проектированию подсказок. Это пример подсказки со всеми параметрами Prompt:
Funko pop superman figurine, made of plastic, product studio shot, on a white background, diffused lighting, centered.
Фигурка супермена Funko pop, из пластика, студийная съемка, на белом фоне, рассеянное освещение, по центру.
- ✅Model: Deliberate
- ✅Seed: 70455
- ✅Scale: 6.5
- ✅Steps: 25
- ✅Resolution: 512 x 512
- ✅Sampler: DPM++ SDE Karras
02 Формат запроса
Начните с составления списка вопросов
- Вам нужна фотография или картина?
- Что является объектом фотографии? Человек? Животное или, может быть, пейзаж?
- Какие детали вы хотите добавить?
- Специальное освещение. Мягкое, рассеянное, кольцевой свет, неон
- Окружающая среда. В помещении, на улице, под водой, в космосе
- Цветовая гамма. Яркие, темные, пастельные
- Съемка. Спереди, сверху, сбоку
- Фон. Сплошной цвет, туманность, лес
- В каком художественном стиле выполнена работа? 3D-рендер, студия Гибли, постер фильма
- Определенный тип фотографии? Макро, телеобъектив
Этот список не является исчерпывающим, но он поможет вам добиться отличных результатов, когда вы начнете свой путь в создании подсказок. Не бойтесь экспериментировать, чем больше вы попробуете различных подсказок, тем лучше вы станете!
Example
Ответьте на следующие вопросы:
- Вам нужна фотография или картина? => картина
- Что является объектом фотографии? Человек. животное, пейзаж. => золотой карапуз
- Какие детали вы хотите добавить? => одет в костюм
a. Специальное освещение. Мягкое, рассеянное, кольцевой свет, неон => естественный свет
b. Окружающая среда. В помещении, на улице, под водой, в космосе => в небе
c. Цветовая гамма. Яркие, темные, пастельные => с яркими цветами - В каком художественном стиле выполнена работа? 3D рендер, студия Гибли, постер к фильму => Studio Ghibli
В итоге получаем:
Картина с изображением милого золотистого карапуза в костюме, естественное освещение, на фоне неба, яркие цвета, Studio Ghibli
A painting of a cute goldendoodle wearing a suit, natural light, in the sky, with bright colors, by Studio Ghibli

Однако есть проблема. Златокудрый НЕ полностью на фоне неба… ИИ не принял «в небе» должным образом. Не волнуйтесь! Вы можете немного изменить порядок слов, если какая-то часть важна. Чем раньше слово находится в предложении, тем большее значение оно будет иметь.
Картина с изображением милого золотистого карапуза в небе, в костюме, при естественном освещении, с яркими цветами, Studio Ghibli
A painting of a cute goldendoodle in the sky, wearing a suit, natural light, with bright colors, by Studio Ghibli
Ранее в подсказке мы переместились «в небе».
Как видите, собака теперь находится «на фоне неба».

Порядок слов очень важен
Порядок и форма представления желаемого результата — почти такой же важный аспект, как и сама лексика. Рекомендуется перечислять свои понятия четко и раздельно, а не пытаться втиснуть их в одно простое предложение.
03 Модификаторы
Модификаторы — это слова, которые могут изменить стиль, формат или перспективу изображения. Существуют определенные магические слова или фразы, которые, как доказано, повышают качество изображения.
В этом разделе мы расскажем о различных типах модификаторов, которые можно использовать в подсказках.
Photography — Фотография
Art Mediums — Материалы
Artists — Художники
Illustration — Иллюстрация
Emotions — Эмоции
Aesthetics — Эстетика
Photography
Тип съемки | Стиль | Объект | Освещение | Условия | Объектив | Устройство |
---|---|---|---|---|---|---|
Close-up | polaroid | Woman | Soft | Indoor | Wide-angle | iPhone X |
Extreme Close-up | Monochrome | Old man | Ambient | Outdoor | Telephoto | CCTV |
POV | Long exposure | Grey cat | Ring | At night | 24mm | Nikon Z FX |
Medium shot | Color splash | Bunny | Sun | In the park | EF 70mm | Canon |
Long shot | Tilt-shift | Ferrari | Cinematic | Studio | Bokeh | Gopro |
Стили фотографии
Камеры
Камеры
Освещение

Nostalgic
Fallout concept art school interior
render grim, nostalgic lighting,
unreal engine 5

Purple Neon
Fallout concept art school interior
render grim, realistic purple neon
lighting unreal engine 5

Sun Rays
Fallout concept art school interior
render grim, sun rays coming
through window, unreal engine 5
Art Mediums
Art Mediums — это термин, который относится к различным материалам и инструментам, которые художники используют для создания искусства. Это может включать в себя масляные краски, акварель, акриловые краски, графитные карандаши, уголь, маркеры, кисти, холсты, бумагу, глину и другие материалы. Каждый материал имеет свои особенности, свойства и методы применения, что позволяет художнику выразить свою творческую идею.
Художники
Список художников по стилям (не полный, для примера)
Portrait
Derek Gores, Miles Aldridge, Jean Baptiste-Carpeaux, Anne-Louis Girodet
Landscape
Alejandro Bursido, Jacques-Laurent Agasse, Andreas Achenbach, Cuno Amiet
Horror
H.R.Giger, Tim Burton, Andy Fairhurst, Zdzislaw Beksinski
Anime
Makoto Shinkai, Katsuhiro Otomo, Masashi Kishimoto, Kentaro Miura
Sci-fi
Chesley Bonestell, Karel Thole, Jim Burns, Enki Bilal
Photography
Ansel Adams, Ray Earnes, Peter Kemp, Ruth Bernhard
Concept artists (video game)
Emerson Tung, Shaddy Safadi, Kentaro Miura
Художники-портретисты
Использование художника, известного своими портретными работами, может быть очень полезным для создания определенного стиля. На всех изображениях все было одинаковым, включая SEED, все различия обусловлены выбранным художником.
Как увидите ниже, некоторые художники оказывают очень сильное воздействие, а другие — лишь едва заметное.
Художники-пейзажисты
При создании пейзажа целесообразно задать время суток, например утро, полдень или вечер, а также установить время года.
Обратите внимание, что одни художники лишь слегка влияют на выход, а другие меняют его кардинально (SEED 3165244700 у всех одинаковый)
Художники, работающие в жанре ужасов
Художники ужасов известны своими леденящими душу образами, но их можно использовать для создания приятных изображений в сочетании с другими художниками.
См. страницу о смешанных художниках далее в книге
Художники-фотографы
Не забывайте, что в своих подсказках вы можете использовать отмеченных фотографов. Старайтесь использовать пейзажных или портретных фотографов, в зависимости от того, на что вы делаете акцент
Художники научной фантастики
Правильный выбор художника может кардинально изменить результат. Художники, работающие в жанре научной фантастики, как правило, имеют очень своеобразный стиль. Помните, что можно использовать не только традиционные художественные средства, но и художников из фильмов.
Концепт-художники (видеоигры)
Если говорить о концепт-художниках, то одни из них делают сцены лучше, а другие — лучше дизайн персонажей
Продвинутая техника — смешение стилей исполнителей
Создание запроса с участием нескольких художников позволяет расширить свое видение и доработать его до более убедительного. Очень важно выбирать художников из разных категорий, чтобы выработать свой собственный уникальный стиль и при этом учитывать возможность объединения нескольких художественных категорий.
Смешение стилей художников (портрет)
Подготовка подсказок с участием художников может сделать ваш образ более совершенным и доработанным. Важно подобрать художников из разных категорий, чтобы выработать свой собственный стиль, но в то же время учитывать возможность сочетания нескольких художественных направлений.
Смешение стилей художников (пейзаж)
Подготовка подсказок с участием художников может сделать ваш образ более совершенным и доработанным. Важно подобрать художников из разных категорий, чтобы выработать свой собственный стиль, но в то же время учитывать возможность сочетания нескольких художественных направлений.
Внешние ссылки на справочные материалы для художников
Google Искусство и культура
Путеводитель по художникам Stable Art
Коллекция художников Stabble Diffusion
The AI Art — Руководство по модификаторам
Illustration — Иллюстрация
3D illustrations
Stable diffusion может быть использована для создания любой 3D-сцены или объекта, который вы только можете себе представить!


detailed, tilt shift, highly textured, action
Дополнительные иллюстрации

Splash Art
Splash art of an armored mage
channeling arcane magicks,
mana shooting from his hands,
mystical energy in the air,
action shot, heroic fantasy art,
special effects, hd octane render
Сплеш-арт бронированного мага, обращающегося к арканной магии, мана, вытекающая из его рук, мистическая энергия в воздухе, экшн-кадр, героическое фэнтези, спецэффекты, hd-октановый рендер
Дизайн персонажей
Когда дело доходит до создания персонажа, сначала нужно описать его в общих чертах, например «орк-мужчина», затем добавить к нему дополнительные характеристики, например «металлическая броня». После этого можно приступить к созданию деталей, генерируя изображения, и обязательно добавить художников, подходящих к персонажу.
Последнее изображение получено при использовании img2img в более высоком масштабе для получения лучшей детализации изображения. Denoising strength 0.6, но при создании собственного изображения вы можете настроить ее по своему усмотрению
Эмоции
Внесение эффективных прилагательных позволяет создать атмосферу сцены!
PROMPT
Cute sad girl toy, curly hair, standing character, soft smooth lighting, soft pastel colors, skottie young, 3d blender render, polycount, modular constructivism, physically based rendering, square image
Милая грустная девочка-игрушка, вьющиеся волосы, стоящий персонаж, мягкое плавное освещение, мягкие пастельные тона, Скотти Янг, 3d рендер в блендере, количество поликов, модульный конструктивизм, физически обоснованный рендеринг, квадратное изображение
Положительные эмоции
Отрицательные эмоции
Эстетика
ЯРКИЙ
Мрачный
Исторический
04 Волшебные слова
HDR, UHD, 64K
Такие качественные слова, как HDR, UHD, 4K, 8k и 64K, могут кардинально изменить ситуацию.
Seed: 1000
Highly detailed
Такие качественные слова, как «очень подробный», могут существенно изменить ситуацию.
Seed: 2437020575

by Jennifer Lawrence,
concept

by Jennifer Lawrence,
highly detailed, concept
Studio lighting
Студийное освещение могло бы придать снимку красивую текстуру
Seed: 4035355907
Professional
Добавление Professional, позволяет значительно улучшить цветовой контраст и детализацию изображения
Seed: 851639
Тенденции на артстанции
Seed: 4092599551
Vivid Colors
Добавление ярких цветов оживляет изображения
Seed: 1
Bokeh
Боке размывает фон и выделяет объект съемки. Это похоже на портретный режим iPhone
Seed: 432543543
High resolution scan
Хотите получить историческую фотографию? Добавьте High resolution scan «Сканирование с высоким разрешением».
Seed: 88114615
Sketch vs Painting
Почти всегда Sketch создает карандашное изображение, в то время как Painting добавляет цвета и, вероятно, дает более старую сцену более старый вид
Seed: 851636
05 Stable diffusion
параметры
Resolution – default is 512×512
Этот параметр является простым. Вы выбираете ширину и высоту генерируемых изображений. Но важно знать, что модель обучалась на изображениях 512×512, и в целом эти размеры обеспечивают наилучшее качество и композицию, поэтому в качестве новичка рекомендуется придерживаться именно их.
Classifier Free Guidance (CFG) — по умолчанию 7
Этот параметр можно представить в виде шкалы «Творчество против подсказки». Меньшие значения дают ИИ больше свободы для творчества творческий подход, в то время как более высокие значения заставляют его придерживаться подсказок.
Prompt: a red bird drinking water from a lake, children's book painting Заглавие: красная птица, пьющая воду из озера, раскраска из детской книги
Этот параметр не влияет ни на объем необходимой VRAM, ни на время генерации.
Step count – default is 20
Stable Diffusion создает изображение, начиная с холста, заполненного шумом, и постепенно понижая его для достижения конечного результата. Этот параметр управляет количеством шагов понижения. Как правило, больше — лучше, но для начинающих рекомендуется придерживаться значения по умолчанию.
Этот параметр не влияет на объем требуемой VRAM, но его увеличение прямо пропорционально времени, затрачиваемому на генерацию изображения
Seed – default is “random”
Seed — это число, управляющее начальным шумом. Именно благодаря Seed каждый раз получается разное изображение при генерации, когда все параметры фиксированы. По умолчанию в большинстве реализаций Stable Diffusion, Seed автоматически меняется при каждой генерации изображения. Вы можете получить тот же результат если оставить неизменными подсказку, Seed и все остальные параметры.
Prompt: photo of a rabbit driving a bicycle, in Tokyo at night
фотография кролика, едущего на велосипеде, в ночном Токио
Token efficiency
Эффективность вашей подсказки ограничена 75 токенами. Если вы работаете с длинной подсказкой, постарайтесь эффективно использовать словами, которые не вносят существенной смысловой нагрузки. Типичный пример — использование артикля в качестве модификатора для обозначения определенного стиля. Вот несколько подсказок и их количество. Все они позволяют получить произведение, которое похожее на произведение Винсента Ван Гога, с соответствующим количеством лексем
● A horse in the style of Vincent Van Gogh (11)
● A horse in the style of Van Gogh (10)
● A horse by Vincent Van Gogh (7)
● A horse by Van Gogh (6)
● Horse by Van Gogh (6)
● Horse Van Gogh (5)