转载

【SD】Prompt修炼技巧

前言

最近在玩Stable Diffusion,搞了很多LoRa,但是总感觉Prompt描述的不好,经常驴头不对马嘴,所以这篇文章就是摘要了网上的修炼技巧,以馈各位。

详细内容

Prompt 公式

Prompt=[形容词][主语],[细节设定],[修饰语或者艺术家]

按照这个公式,我们首先构造一个形容词加主语的案例。 这里我构造的是 戴着眼镜的猫, 风格我选择的是油画风格,然后我再添加一些细节设定,这里我给的是 漂浮在宇宙中, 可以看到 ,猫猫的后面出现了很多天体。

猫1 猫2 猫3
“戴着眼镜的猫”(油画) “戴着眼镜的猫,漂浮在宇宙中”(油画) “戴着眼镜的猫,漂浮在宇宙中,高更风格”(油画)

最后我们想让我们的照片风格更加有艺术性的效果, 我们选择的艺术家是高更, 可以看到图像的画风有了更强的艺术风格。

Prompt 设计原则

Prompt 简单原则: 清楚地陈述

除了公式之外,也有一些简单的 Prompt设计原则分享给大家:即清楚的陈述

例如我们如果是简单的输入风景的话,往往模型不知道我们想要的风景是什么样子的(下图1)。我们要去尽量的幻想风景的样子,然后变成语言描述。 例如我想像的是日落时,海边的风景, 那我就构造了 Prompt 『夕阳日落时,阳光落在云层上,海面波光粼粼,风景』(下图2)。 进一步的,我想风格化我的图像,所以我在结尾的部分,增加了『胶片感』来让图片的色彩更加好看一些(下图3)。但是云彩的细节丢失了一些,进一步的我再增加天边巨大云朵这一个细节,让我的图片朝着我想要的样子靠的更进一步(下图4)。

风景1 风景2 猫3 猫3
“风景” “夕阳日落时,阳光落在云层上,海面波光粼粼,风景” “夕阳日落时,阳光落在云层上,海面波涛汹涌,风景,胶片感” 夕阳日落时,天边有巨大的云朵,海面波涛汹涌,风景,胶片感

Prompt 主体的选择

Prompt 的主体可以是千奇百怪、各种各样的。这里我挑了几个简单的容易出效果的主体示例和一些能够营造特殊氛围的氛围词来激发大家的灵感。

宇航员 孤岛 白色城堡 机器人
宇航员 孤岛 白色城堡 机器人
巫师 罗马城 海鸥 气球
巫师 罗马城 海鸥 气球
霓虹灯 烟 漩涡
…日落,霓虹灯…薄雾 …烟… …燃烧漩涡, …烟雾和碎片
废墟 光之 巨大的
…废墟… 光之… 巨大的…

Prompt 修饰词

如果想让生成的图片更加的艺术化、风格话,可以考虑在 Prompt 中添加艺术修饰词。艺术修饰词可以是一些美术风格(例如表现主义、抽象主义等),也可以是一些美学词汇(蒸汽波艺术、故障艺术等),也可以是一些摄影术语(80mm摄像头、浅景深等),也可以是一些绘图软件(虚幻引擎、C4D等)。

按照这样的规律,我们在两个输入基准上 :

一只猫坐在椅子上,戴着一副墨镜

日落时的城市天际线

通过构造『输入 + Prompt 修饰词』来展示不同修饰词的效果 (这里的策略参考了资料)。

需要注意的是,不是所有的 Prompt 对于所有的修饰词都会发生反应。所以查阅 Prompt 修饰词的过程中,会发现部分的 Prompt 修饰词只能对两个基准中的一个生效。这是很正常的,因为 Prompt 的调优是一个反复的试错的过程。接下来,大家结合如下的 Prompt 修饰词, Happy Prompting 吧!

水彩墨风格

00280_004_一只猫坐在椅子上,戴着一副墨镜, 水彩墨风格 00130_004_日落时的城市天际线, 水彩墨风格
一只猫坐在椅子上,戴着一副墨镜, 水彩墨风格 日落时的城市天际线, 水彩墨风格

国潮风格

一只猫坐在椅子上,戴着一副墨镜,-国潮 日落时的城市天际线,-国潮
一只猫坐在椅子上,戴着一副墨镜, 国潮 日落时的城市天际线, 国潮

附录

常见的艺术家和艺术风格整理

艺术类型 艺术家 常用艺术风格
肖像画 文森特·梵高 印象主义
风景画 尼古拉斯·罗伊里奇 现实主义
风俗画 皮埃尔-奥古斯特·雷诺阿 浪漫主义
宗教绘画 克劳德·莫内 表现主义
抽象画 彼得·孔查洛夫斯基 后印象主义
都市风景画 卡米尔·毕沙罗 象征主义
素描与草图 约翰·辛格·萨金特 新艺术主义
静物 伦勃朗 巴洛克风格
裸体画 马克·夏加尔 抽象表现主义
插画 巴勃罗·毕加索 北欧文艺复兴
古斯塔夫·多雷 素人艺术,原始主义
阿尔布雷特·丢勒 立体主义
鲍里斯·库斯妥基耶夫 洛可可
埃德加·德加 色域绘画
波普艺术
文艺复兴开端
文艺复兴全盛期
极简主义
矫饰主义,文艺复兴晚期

常见的摄影风格词整理

可以加入到 Prompt 中的摄影词
浅景深 仰拍
负像 动态模糊
微距 高反差
双色版 中心构图
角度 逆光
三分法 长曝光
抓拍 禅宗摄影
软焦点 抽象微距镜头
黑白 暗色调
无镜反射 长时间曝光
双色调 框架,取景
颗粒图像

相关链接

美学相关的词汇: https://aesthetics.fandom.com/wiki/List_of_Aesthetics

DALL-E 2 的 Prompt 技巧资料:https://docs.google.com/document/d/11WlzjBT0xRpQhP9tFMtxzd0q6ANIdHPUBkMV-YB043U/edit

DiscoDiffusion Prompt 技巧资料:https://docs.google.com/document/d/1l8s7uS2dGqjztYSjPpzlmXLjl5PM3IGkRWI3IiCuK7g/edit

来源

github

本文来自:【SD】Prompt修炼技巧-小码农,转载请保留本条链接,感谢!

温馨提示:
本文最后更新于 2023年09月14日,已超过 448 天没有更新。若文章内的图片失效(无法正常加载),请留言反馈或直接联系我
正文到此结束
本文目录