手绘转AI绘画怎么搞?草图到成图流程

手绘转AI绘画怎么搞?草图到成图流程
手绘转AI绘画草图到成图流程示例

简单说:手绘转AI绘画分三步——草图预处理、图生图重绘、ControlNet线稿约束,重绘幅度0.5到0.7是甜点区,太低不出效果太高丢草图,配上合适的底模草图能变高完成度成图。

手绘转ai绘画教程我搜过不少,大多讲得云里雾里,看完还是不会动手。其实核心就图生图加ControlNet两件事,难的是参数怎么调。我把自己从草图到成图跑通的流程拆开讲,含具体参数和我翻过的车,你照着做就能把草稿变成像样的图。

草图预处理:别直接把草稿喂给AI

草图喂AI前要先调对比度、去杂线、统一线宽,最好扫成黑白线稿。脏乱的草图AI会忠实地把脏乱也重绘进去,预处理占整个流程一半的重要性。

我第一次转绘就是直接拍了张铅笔草稿传上去,结果AI把我手蹭的铅笔灰也当成画面元素重绘了,出来的图脏兮兮。

正确预处理三步走。第一步,扫描或拍照后调对比度,把线条压黑、背景提白,让线条和背景分明。第二步,用PS或Krita的阈值功能去掉浅灰杂线,只留主结构线。第三步,统一线宽——草稿线太细的地方AI会忽略,描粗一点保证AI能识别。

如果是数字草图更好办,直接导出纯线稿PNG,背景透明或纯白。纸质草稿就得多花几分钟处理。

这步偷懒后面全完蛋。我自己测算过,预处理干净的草图转绘成功率约八成,没处理的只有三成多。差在这一步。

图生图重绘:幅度是命门

图生图重绘幅度(denoising strength)0.5到0.7是甜点区。低于0.4基本是草图描边看不出转化,高于0.8草图结构全丢AI自己重画,失去转绘意义。

重绘幅度这参数我反复试了很久。它决定AI"听不听"你的草图。

0.3:AI几乎不改你的草图,只加了一层滤镜感的东西,等于没转。

0.5:AI在保留草图结构的基础上加细节上色,草图的线还在但已经有了成图的样子。这是我用得最多的值。

0.7:AI大幅重绘,草图只剩大致构图,细节全靠AI发挥。适合草图比较糙、想靠AI补完的情况。

0.9:草图几乎被无视,AI自己重新画了一张,跟你的草图没啥关系了。这就不叫转绘了。

我个人建议从0.5起步,不满意往上调0.05一档试。每档差距其实很明显。重绘幅度这件事,没有万能值,得看草图完成度和你想要的转化程度。草图越细幅度调低,草图越糙幅度调高。

基础转绘流程怎么搭,可以看这篇 手绘转AI绘画的转绘流程,从零开始的操作步骤讲得详细。

ControlNet线稿约束:锁住结构不跑偏

光靠图生图重绘草图容易跑形,叠加ControlNet的Canny或Lineart线稿约束,能把草图结构锁死,AI只在线稿内填色加细节,结构不崩。

这是转绘质量飞跃的关键一步。图生图的问题是AI有自由发挥空间,复杂构图容易跑形——比如你画的两个人拥抱,AI可能重绘成两个独立的人。ControlNet线稿约束就是给AI画个框,让它别乱来。

我用Lineart模型最多,它专门针对线稿转绘优化。权重0.8到1.0,预处理选lineart_standard。Canny也行,但Canny对草图的边缘提取更"硬",适合线条干净的数字线稿;手绘那种有粗细变化的草图,Lineart更合适。

预处理器选对很重要。草图线很淡的,用lineart_coarse强化线条;线已经很清晰的,用lineart_standard就够了。选错要么线条被吃掉、要么约束太死AI没发挥空间。

关于怎么判断一张图是不是AI生成的、识别AI作画痕迹,这篇 分辨AI生成图和人类画作的方法检测AI绘画的方法 讲得挺全,转绘完自己也能对照检查下成图有没有明显的AI痕迹。

实测参数:我转绘一张图的全套配置

底模用AnythingV5或Realistic Vision看画风、图生图重绘幅度0.55、ControlNet Lineart权重0.9、CFG 7、步数30、DPM++ 2M Karras、分辨率对齐草图,这套参数我转绘人物草图最稳。

这是我最常用的配置。底模选二次元的AnythingV5出卡通插画风,选Realistic Vision出写实人像风。看你要什么画风换底模,其他参数不动。

重绘幅度0.55是我反复试出来的甜点。0.5稍保守,0.6开始草图细节丢得有点多。0.55刚好——草图骨架在,AI又充分上色加细节。

ControlNet权重0.9。低于0.7锁不住,草图结构会被AI改;高于1.0线条太死,AI填色僵硬。0.9是个平衡。

步数30比常规出图高5步。因为转绘要在草图约束下做更多细节工作,步数多一点细节更扎实。CFG 7略高于纯文生图的6,是为了让提示词风格更强势,盖过草图的潦草感。

分辨率一定要和草图对齐。草图是1024×1024就出1024×1024,别拉伸。拉伸后ControlNet的线稿约束会对不上,结构乱套。

根据 Hugging Face 模型库 的数据,ControlNet 系列模型下载量长期居前,其中 Lineart 和 Canny 是转绘场景用得最多的两个预处理器。根据 Hugging Face 上 ControlNet 原作者的说明,线稿约束模型就是专门为草图转成图场景训练的,比通用模型在线稿还原上准得多。

翻车:重绘幅度拉太高草图全没

重绘幅度别超过0.8,超过后草图结构基本被AI无视,出来的图和你的草图没关系。我踩过这个坑,精心画的草图被AI改成完全不同的构图。

真事儿。我想让转绘效果"更猛",把重绘幅度拉到0.85。结果AI直接无视我的草图,按提示词自己重新构图了一张。我草图里人物是侧脸回眸,AI给我画成正脸站立,姿势完全变了。等于白画草图。

后来才明白,重绘幅度过0.8,AI就进入"半文生图"模式了,草图只剩个色调参考,结构不再起约束作用。这时候想要结构,只能靠ControlNet硬锁。

另一个坑是ControlNet权重开太高。我有次把Lineart权重拉到1.3,出来的图线条僵硬得像填色本,AI的发挥空间被压没了,成图死板没灵气。权重0.8到1.0就够,别贪。

还有一个容易忽略的:提示词别和草图冲突。草图是悲伤表情,提示词写"smiling happy",AI夹在草图和提示词之间左右为难,出来的表情很诡异。提示词要顺着草图的情绪走。

更多转绘相关的实操细节,这篇 零基础学AI画图的完整步骤零基础第一步该做什么 可以补一下基础,图生图和ControlNet都依赖你对基础操作的熟悉。

进阶:上色稿和分镜稿怎么转?

上色稿转绘用图生图加重绘幅度0.4保留原色,分镜稿转绘用ControlNet的OpenPose锁人物姿势加Lineart锁构图,两个约束叠加效果最稳。

草图分两种,流程不一样。

黑白线稿最常见,上面讲的就是这种。重点是线稿约束。

上色稿(已经铺了底色的草图)转绘要小心,别让AI把你的配色改没了。重绘幅度降到0.4,提示词少写颜色描述,让AI在你原有配色上做精修而不是重上色。这种转绘像"精修"而非"重画"。

分镜稿(带人物动作的构图草稿)转绘最难,因为既要锁构图又要锁人物姿势。我用Lineart锁整体构图,再加OpenPose锁人物骨骼姿势,两个ControlNet叠加。权重都设0.7,别太高互相打架。这样出来的图既保构图又保姿势,分镜转成图特别合适。

关于把特定风格角色转绘,比如宫崎骏角色、动漫角色,这篇 宫崎骏角色的还原技巧火影忍者角色AI绘画 讲过角色还原的思路,转绘时保留角色特征可以借鉴。手机端做转绘操作的话,手机端出图操作步骤 也适用,原理一样。

常见问题

手绘转AI绘画一定要用ControlNet吗?

不一定,但强烈建议用。光靠图生图重绘,简单草图还行,复杂构图容易跑形。ControlNet线稿约束能把结构锁死,转绘质量明显高一档。嫌麻烦的话至少简单草图可以只用图生图,复杂构图别省这步。

草图太糙能转出好图吗?

能,但要调参数。草图越糙重绘幅度越高(0.6到0.7),让AI多发挥补完细节。同时ControlNet用lineart_coarse预处理器,它对潦草线条的容错更高。火柴人级别的草图也能转,只是AI发挥空间大,结果不一定符你预想。

转绘出来的图为什么有AI塑料感?

主要是底模选错和参数太满。写实风用Realistic Vision、插画风用AnythingV5,别用通用模型。CFG降到6.5、步数别超30,过满的参数会让画面"太干净"显假。适当降一点参数,画面会更有手绘的自然感。

彩色草稿转绘怎么保住原配色?

重绘幅度降到0.4,提示词里别写颜色词,让AI在你原有配色上精修。如果还是被改,加一个"reference only"模式的ControlNet,把你的上色稿作为颜色参考,AI会沿用你的色调。

觉得有用的话分享给朋友吧。