AIGC技巧：SD图生图如何控制变量生成想要的效果？

ZOL中关村在线03-18

SD（Stable Diffusion）是目前最流行的本地部署类AIGC工具，它可以说既简单又复杂。简单是因为完全没有绘画功底的用户也可以做出各种风格的精美图片，而复杂则是因为AIGC相对没有那么“听话”，想要AI完全按照自己的想法实现内容还是颇有难度的。此前我们简单介绍过大家最常用的文生图，今天就来讲一讲SD更实用的图生图功能。它相比文生图具有在原图基础上更可控、更简单、更还原等优点，...

网页链接

免责声明：本文观点仅代表作者个人观点，不构成本平台的投资建议，本平台不对文章信息准确性、完整性和及时性做出任何保证，亦不对因使用或信赖文章信息引发的任何损失承担责任。

精彩评论

我们需要你的真知灼见来填补这片空白

发表看法

{"i18n":{"language":"zh_CN"},"isChannel":false,"data":{"share":"https://www.laohu8.com/m/news/2420796462?lang=zh_CN&edition=full","thumbnail":"https://k.sinaimg.cn/n/spider20240318/200/w640h360/20240318/cc19-fc80994bf3b0103a9d381a99534aca9c.jpg/w120h90l50t121c.jpg","is_english":false,"pubTime":"2024-03-18 08:48","share_image_url":"https://static.laohu8.com/e9f99090a1c2ed51c021029395664489","id":"2420796462","market":"hk","top_or_hot":-1,"title":"AIGC技巧：SD图生图 如何控制变量生成想要的效果？","media":"ZOL中关村在线","content":"<div>\n<p>SD（Stable Diffusion）是目前最流行的本地部署类AIGC工具，它可以说既简单又复杂。简单是因为完全没有绘画功底的用户也可以做出各种风格的精美图片，而复杂则是因为AIGC相对没有那么“听话”，想要AI完全按照自己的想法实现内容还是颇有难度的。\n\n\n\n\n此前我们简单介绍过大家最常用的文生图，今天就来讲一讲SD更实用的图生图功能。它相比文生图具有在原图基础上更可控、更简单、更还原等优点，...</p>\n\n<a href=\"https://tech.sina.cn/mobile/xp/2024-03-18/detail-inanstzy5856599.d.html?vt=4\">网页链接</a>\n\n</div>\n","source":"sina_tech","html":"<!DOCTYPE html>\n<html>\n<head>\n<meta http-equiv=\"Content-Type\" content=\"text/html; charset=utf-8\" />\n<meta name=\"viewport\" content=\"width=device-width,initial-scale=1.0,minimum-scale=1.0,maximum-scale=1.0,user-scalable=no\"/>\n<meta name=\"format-detection\" content=\"telephone=no,email=no,address=no\" />\n<title>AIGC技巧：SD图生图 如何控制变量生成想要的效果？</title>\n<style type=\"text/css\">\na,abbr,acronym,address,applet,article,aside,audio,b,big,blockquote,body,canvas,caption,center,cite,code,dd,del,details,dfn,div,dl,dt,\nem,embed,fieldset,figcaption,figure,footer,form,h1,h2,h3,h4,h5,h6,header,hgroup,html,i,iframe,img,ins,kbd,label,legend,li,mark,menu,nav,\nobject,ol,output,p,pre,q,ruby,s,samp,section,small,span,strike,strong,sub,summary,sup,table,tbody,td,tfoot,th,thead,time,tr,tt,u,ul,var,video{ font:inherit;margin:0;padding:0;vertical-align:baseline;border:0 }\nbody{ font-size:16px; line-height:1.5; color:#999; background:transparent; }\n.wrapper{ overflow:hidden;word-break:break-all;padding:10px; }\nh1,h2{ font-weight:normal; line-height:1.35; margin-bottom:.6em; }\nh3,h4,h5,h6{ line-height:1.35; margin-bottom:1em; }\nh1{ font-size:24px; }\nh2{ font-size:20px; }\nh3{ font-size:18px; }\nh4{ font-size:16px; }\nh5{ font-size:14px; }\nh6{ font-size:12px; }\np,ul,ol,blockquote,dl,table{ margin:1.2em 0; }\nul,ol{ margin-left:2em; }\nul{ list-style:disc; }\nol{ list-style:decimal; }\nli,li p{ margin:10px 0;}\nimg{ max-width:100%;display:block;margin:0 auto 1em; }\nblockquote{ color:#B5B2B1; border-left:3px solid #aaa; padding:1em; }\nstrong,b{font-weight:bold;}\nem,i{font-style:italic;}\ntable{ width:100%;border-collapse:collapse;border-spacing:1px;margin:1em 0;font-size:.9em; }\nth,td{ padding:5px;text-align:left;border:1px solid #aaa; }\nth{ font-weight:bold;background:#5d5d5d; }\n.symbol-link{font-weight:bold;}\n/* header{ border-bottom:1px solid #494756; } */\n.title{ margin:0 0 8px;line-height:1.3;color:#ddd; }\n.meta {color:#5e5c6d;font-size:13px;margin:0 0 .5em; }\na{text-decoration:none; color:#2a4b87;}\n.meta .head { display: inline-block; overflow: hidden}\n.head .h-thumb { width: 30px; height: 30px; margin: 0; padding: 0; border-radius: 50%; float: left;}\n.head .h-content { margin: 0; padding: 0 0 0 9px; float: left;}\n.head .h-name {font-size: 13px; color: #eee; margin: 0;}\n.head .h-time {font-size: 11px; color: #7E829C; margin: 0;line-height: 11px;}\n.small {font-size: 12.5px; display: inline-block; transform: scale(0.9); -webkit-transform: scale(0.9); transform-origin: left; -webkit-transform-origin: left;}\n.smaller {font-size: 12.5px; display: inline-block; transform: scale(0.8); -webkit-transform: scale(0.8); transform-origin: left; -webkit-transform-origin: left;}\n.bt-text {font-size: 12px;margin: 1.5em 0 0 0}\n.bt-text p {margin: 0}\n</style>\n</head>\n<body>\n<div class=\"wrapper\">\n<header>\n<h2 class=\"title\">\nAIGC技巧：SD图生图 如何控制变量生成想要的效果？\n</h2>\n\n<h4 class=\"meta\">\n\n\n2024-03-18 08:48 北京时间&nbsp;&nbsp;&nbsp;<a href=https://tech.sina.cn/mobile/xp/2024-03-18/detail-inanstzy5856599.d.html?vt=4><strong>ZOL中关村在线</strong></a>\n\n\n</h4>\n\n</header>\n<article>\n<div>\n<p>SD（Stable Diffusion）是目前最流行的本地部署类AIGC工具，它可以说既简单又复杂。简单是因为完全没有绘画功底的用户也可以做出各种风格的精美图片，而复杂则是因为AIGC相对没有那么“听话”，想要AI完全按照自己的想法实现内容还是颇有难度的。\n\n\n\n\n此前我们简单介绍过大家最常用的文生图，今天就来讲一讲SD更实用的图生图功能。它相比文生图具有在原图基础上更可控、更简单、更还原等优点，...</p>\n\n<a href=\"https://tech.sina.cn/mobile/xp/2024-03-18/detail-inanstzy5856599.d.html?vt=4\">网页链接</a>\n\n</div>\n\n\n</article>\n</div>\n</body>\n</html>\n","isBrief":false,"type":0,"news_type":1,"symbol":"SD","symbol_name":"SandRidge Energy","start_time":0,"source_url":"https://tech.sina.cn/mobile/xp/2024-03-18/detail-inanstzy5856599.d.html?vt=4","article_id":"2420796462","we_media_id":null,"thumbnails":["https://k.sinaimg.cn/n/spider20240318/200/w640h360/20240318/cc19-fc80994bf3b0103a9d381a99534aca9c.jpg/w120h90l50t121c.jpg"],"rights":{"source":"sina_tech","url":"https://tech.sina.cn/mobile/xp/2024-03-18/detail-inanstzy5856599.d.html?vt=4","rn_cache_url":null,"customStyle":"body{padding-top:10px;}.art_tit_h1{#titleStyle#}a{#lv2TextColor#}.art_time, .art_cite{#sourceStyle#;} .art_cite{margin-left: 3px;}.weibo_user{#sourceStyle#; margin-bottom: 0; display: inline-block;}.weibo_time{#sourceStyle#};","selectors":".module-article, article","filters":"header, .voice2, .tags, #norm_qrcode_link_auto, .unfold-box, .action, .j_float_wbro, .j_article_wbreco","directOrigin":true},"url":"https://stock-news.laohu8.com/highlight/detail?id=2420796462","pubTimestamp":1710722889,"sourceInfo":{"source_id":"sina_tech","name":"新浪科技"},"weMediaInfo":null,"summary":"SD是目前最流行的本地部署类AIGC工具，它可以说既简单又复杂。简单是因为完全没有绘画功底的用户也可以做出各种风格的精美图片，而复杂则是因为AIGC相对没有那么“听话”，想要AI完全按照自己的想法实现内容还是颇有难度的。它相比文生图具有在原图基础上更可控、更简单、更还原等优点，但如果是初次接触，想要用好还是比较困难的，下面我们就来简单的讲一讲如何控制图生图中的变量达到想要的效果。","collect":0,"end_time":0,"defaultTopTitle":"sina.cn","property":[],"viewcount":null,"language":"zh","relate_stocks":{"SD":"SandRidge Energy","BK4213":"石油与天然气的勘探与生产"},"translate_title":"AIGC Tip: How does SD chart generation control variables to generate desired effects?","themeId":null,"isJumpTheme":false,"ttsUrl":null,"symbols_score_info":{"SD":1},"content_text":"SD（Stable Diffusion）是目前最流行的本地部署类AIGC工具，它可以说既简单又复杂。简单是因为完全没有绘画功底的用户也可以做出各种风格的精美图片，而复杂则是因为AIGC相对没有那么“听话”，想要AI完全按照自己的想法实现内容还是颇有难度的。\n\n\n\n\n此前我们简单介绍过大家最常用的文生图，今天就来讲一讲SD更实用的图生图功能。它相比文生图具有在原图基础上更可控、更简单、更还原等优点，但如果是初次接触，想要用好还是比较困难的，下面我们就来简单的讲一讲如何控制图生图中的变量达到想要的效果。在SD中，不同的模型有不同的绘画风格，相信使用过文生图的朋友都有体会，有的模型擅长动漫人物、有的擅长真人、有的则擅长风景。这一点在图生图中同样比较重要，如果选择人物模型，却想要生成纯风景就非常困难，即便反向词加上各种限制，大概率出图后也会有一个奇形怪状的人物出现。目前从个人使用的情况来看，动漫类aamXLAnimeMix、astranime效果都是不错的；真人则是chilloutmix；纯风景的比较少，使用SDXL即可。除了模型之外，硬件也是准备工作的重要环节，不管是文生图还是图生图，显卡始终是冲在最前线的。如果你想生成大尺寸的图片，显存是最重要的，如果显存需求高于实际显存，则会直接报错，无法生成。\n\n\n\n\n不过如果你只需生成单张图片，使用高清修复功能同样可以解决分辨率的问题。此前笔者由于需要使用SD生成出视频对应的多张图片，所以直接按照视频的尺寸生成了1800×1200分辨率。\n\n\n\n\n对于SD来说，生成简单的图12GB显存大都够用，如果生成较大较精细的图片，建议16GB或以上显存。目前RTX 40系显卡中RTX 4070 Ti SUPER和RTX 4080 SUPER都是16GB，我们的测试平台使用的为华硕TUF GeForce RTX 4080 SUPER O16G GAMING显卡（毕竟收钱了）。\n\n\n\n\n不过在算力上RTX 4080 SUPER也要比RTX 4070 Ti SUPER强很多，10张图片大约能提升30s左右。毕竟使用SD不管是文生图还是图生图，都是碰运气的事，验证阶段生成几十几百张图很常见。下面我们直入正题，SD图生图与文生图最大的区别就是需要反推提示词。虽然SD会自带反推，但还是建议大家直接下载秋叶大神的整合包，里面自带了WD1.4标签器，傻瓜式操作、速度快、准确度高。1girl, hat, solo, phone, long hair, cellphone, holding, holding phone, smartphone, blue headwear, realistic, jacket, black hair, upper body, brown hair, baseball cap, grey background, long sleeves, simple background, black eyes从上图的反推来看，WD1.4标签器生成的准确度相当高，而且可一键发送到图生图，非常方便。这步不需要什么注意事项，只是在筛选标签的时候，可以删除或替换为自己想要生成的目标。在SD图生图中，参数的设定和文生图有些区别，这里简单说明。迭代步数迭代步数的数值与文生图相同，简单可以理解为AI通过多少步的计算得到的这张图片，通常设定在20-50之间，过低或过高都可能造成画面崩坏。\n\n\n\n\n然而不同的模型，对迭代步数的需求都不同。通常来讲在漫画模型中，Steps在20左右即可生成不错的图片，但很多真人模型Steps 20生成的图片则会显得假一些，将数值设定在40-50左右会有不错的效果。另外迭代步数越高，生成图片的时间越慢，反之则快。但最终生成的图片大小都是相同的。重绘尺寸由于SD图生图通常是将真实拍摄的照片导入作为参考，如果是原图，则需要进行缩放处理，否则会由于图片过大而显存报错。如果想保持原图比例，选择倍数缩放即可；如果想自定义，直接输入想要的尺寸即可。这一项很简单，无需太多说明。批次总批次数和单批数量也很好理解，总批次数越大，代表AI随机种子生成的数量越多；而单批数量则是在同一种子的情况下，使用相同设定生成更多的图片。这两项数值的设定没有绝对值，通常前期实验阶段的总批次数会多一些，以作为参考。如果发现了喜欢的风格或构图，可以查看当前图片的Seed值，将这个值复制到随机数种子中（默认为-1），再生成单批多数量图片。引导系数与重绘幅度这两项参数是与文生图区别最大的地方，在文生图中，提示词引导系数基本是单一决定出图效果的变量（除了提示词）。而在图生图中，引导系数会被极大弱化，它与重绘幅度是相辅相成的关系。\n\n\n\n\n简单来说，重绘幅度越小，它与原图就越相似，AI发挥的空间就越小。而重绘幅度在0.5或0.6之后，AI发挥的就越自由。同时这也会大幅提高画面崩坏的几率，虽然AI的自由度高了，但是图生图的逻辑仍是在原图的基础上修改，所以当两种设定相冲突时，就会产生崩坏的画面。想要得到自己满意的图生图效果，就需要在引导系数与重绘幅度之间反复调试，以掌握自己满意的AI重绘区间。在掌握了大体的区间后，笔者通常将重绘幅度以0.02作为步进区间。虽然图生图是以原图作为依据进行重绘，但标签仍然会起到相当大的作用。另外在SD中，一些反向标签是通用的，大家可以直接复制到记事本中，以便下次直接取用。如果是人物图片，基本以多余的手、四肢、低质量为主。(unhealthy-deformed-joints:2),(unhealthy-hands:2),EasyNegative,ng_deepnegative_v1_75t,(worst quality:2),(low quality:2),(normal quality:2),lowres,bad anatomy,badhandv4,((extra limbs)),((extra legs)),((fused legs)),((extra arms)),((fused arms)),normal quality,((monochrome)),((grayscale)),((watermark)),uneven eyes,lazy eye,(((mutated hand))),\n\n\n\n\n\n\n\n\n以原图作为参考，一些较为相似的部位，如图中皖之的头发、眼神，在重绘幅度较大的情况下，AI可以根据提示词自行修改。但身后标志性较强的百叶窗，如果你想让AI重绘成黑色的柜子，则很难实现。除非将重绘幅度继续调大，但随之而来的后果就是画面崩坏更严重。所以这时我们就需要用到局部重绘。蒙版重绘顾名思义，就是圈出图中需要AI重新生成的地方。它的作用是帮助我们在已经生成出合适的人或背景之后，固定某一区域，重新生成其他区域的内容。如图中所示，我们已经生成了相当完美的角色。手部和姿势都已经相当完美，所以这时候仅需更改背景即可。重绘的工具SD里面提供的比较简单，只有一个圆形画笔。大家可根据人物结构的不同，随时调整画笔大小。如果想要更严谨的区域，也可以上传原始图像和黑白蒙版，这样能够最大限度保证边缘结构的准确性。局部重绘除了框定选区范围之外，所有参数也要重新设置。毕竟它只是在原图的基础上刨除了一部分，仍然相当于重新作画。\n\n\n\n\n\n\n\n\n\n\n\n\n这里需要注意的是，在蒙版模式中要区分让AI绘制蒙版内或者反选区域的内容。另外如果需要生成完全不同的背景，在重绘幅度上可以调大参数。最后就是记得更改提示词，从标签页复制过来的提示词仅适用于原始图像，想大幅度改变背景，提示词需重新定制。图生图是SD重非常有用的一项功能，而且它相比文生图效果更直接。大家不妨找一些身边的朋友，把他们的照片变为AI风格，一定会让大家啧啧称奇。\n\n\n\n\n另外文中没有提及【ControlNet】，这是一个功能极强的插件，使用它可以时间自定义姿势、保障面部表情、手指准确性、给老照片上色、给线稿上色等等。不过相对应的使用起来也比较繁琐，如果大家想看更多关于AIGC的小技巧，下次我们可以单独来讲一期ControlNet插件。最后，AIGC生图永远不会按照我们大脑想的意志来，只能是无限接近。所以如果想达到最好的效果，还要结合自身的绘画功底来对图片进行完善。","kind":null,"is_publish_news":true,"is_publish_highlight":false,"is_publish_live":null,"is_publish_wemedia":null,"editions":null,"column":"","sentiment":"0","news_tag":"","news_rank":0,"symbols":[],"gpt_button":1},"commentList":[],"isCommentEnd":true,"newsSizeData":{"likeSize":0,"commentSize":0,"repostSize":0,"favoriteSize":0,"likeStatus":false,"favoriteStatus":false},"APP":{"userAgent":"Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)","isDev":false,"isTTM":false,"deviceId":"web-server-community-laohu8-v3","version":"4.25.1","shortVersion":"4.25.1","platform":"web","vendor":"web","appName":"laohu8","isIOS":false,"isAndroid":false,"isTiger":false,"isTHS":false,"isWeiXin":false,"isWeiXinMini":false,"isWeiBo":false,"isQQ":false,"isBaiduSwan":false,"isBaiduBox":false,"isDingTalk":false,"isToutiao":false,"isOnePlus":false,"isHuaWei":false,"isXiaomi":false,"isXiaomiWebView":false,"isOppo":false,"isVivo":false,"isSamsung":false,"isMobile":false},"href":"/m/news/2420796462"}

AIGC技巧：SD图生图 如何控制变量生成想要的效果？

精彩评论

AIGC技巧：SD图生图如何控制变量生成想要的效果？