大家好,我是每天分享AI应用的萤火君!
最近看到一种古画变真人的效果,就是将书上的古人画像重绘为真人,效果炸裂,不敢独享,特别分享给大家。
效果演示
废话不多说,还是先看效果。大家可以猜猜它们都是谁~
使用方法
这个方法在 Stable Diffusion WebUI 和 ComfyUI 中都能使用,不过为了方便分享,我这里将以 ComfyUI 工作流的方式进行介绍。
工作流的主要节点就是下边这几个部分:
上传画像:首先上传一张古人的画像图片。
模型和提示词:模型需要选择SDXL真实风格的模型,推荐 Realism Engine SDXL,大家可以去civitai或者liblib查找,也可以到我整理的模型仓库中下载(见文末)。
提示词支持手动填写,也支持根据图片反推生成。这里给出一个基础的提示词:Chinese ancient man, real, photo, portrait , 其它部分大家可以根据图片情况自行增加。
采样生成:为了平衡出图质量和效率,这里我对图像尺寸做了一个控制,最长边都是1024像素,宽高比保持和原图一致,你也可以根据自己的需求进行调整。CFG不要搞的太高,采样步数20-30,采样器选择DPM++ 2M,调度器选择 karras。
ControlNet:这里用到了两个ControlNet,一个是Canny(细致线),另一个是Tile(瓦片),它们都是用来约束图片画面的,联合起来可以起到不错的重绘效果;其中用到的ControlNet模型一个是xinsir的,权重0.4-0.6之间,另一个是TTPLANET的,权重0.1-0.2之间。
这两个模型可以在huggingface下载到,也可以到我整理的模型仓库中下载(见文末)。
资源下载
发消息“工作流”到公/众\号“萤火遛AI”即可领取古人画像变真人的工作流,另外还包括其它几十个免费的ComfyUI 工作流。
整理不易,相关模型包括各种高级版工作流目前仅发布在我的“SD全面实战”专栏中,点击链接访问:
用好ComfyUI
用好 ComfyUI:
- 首先需要对 Stable Diffusion 的基本概念有清晰的理解,熟悉 ComfyUI 的各种基础操作;
- 然后需要在实践过程中不断尝试、不断加深理解,提升综合运用各类节点进行创作的能力。
我将在后续文章中持续输出 ComfyUI 的相关知识和热门作品的工作流,帮助大家更快的掌握 ComfyUI,创作出满足自己需求的高质量作品。
很多同学本地都没有高性能的Nvidia显卡,安装模型插件也经常遇到问题,为了方便大家测试,我在云平台上创建了一个ComfyUI的镜像,已经内置好了常用的插件和模型,并会及时跟进最新的进展,欢迎大家使用:
新用户会赠送一定的额度,可免费使用若干小时,如没有收到,请留言或私信给我。
以上就是本文的主要内容,如有问题,欢迎留言交流。