以下是关于图生图的相关知识:
概念与功能说明:
图生图的作用: 允许用户上传一张图像,并基于该图像生成新的视觉内容。
如何使用图生图:
FLUX 之 PULID 换脸中的图生图: 如果无法科学上网,可以注册 bizyair 拿到 key,在 comfyui 中安装最新节点,没有独立显卡的笔记本也可体验。准备两张图,如神仙姐姐的图和要换脸的图,用 joy 反推,把文字贴到 pulid 工作流里,也可合在一个工作流里。相关工作流可通过网盘获取。
1.首页-模型\帖子\排行榜:发布了其他大手子炼成的模型、图片。不同的模型有checkpoint和lora两种不同的标签,有些模型的标签后面还有第二个XL的标签,这是属于SDXL这个新模型的意思。点击后可以看模型的详细信息。模型详情信息的下方,是用这个模型生成的图片,俗称返图区。1.基础模型:生图必需的,英文名Checkpoint。任何生图操作必须要选定一个checkpoint模型才能开始操作。注意,checkpoint区别于lora,这两个东西在模型广场都是混着展示的。checkpoint必选,lora可选可不选,任何主题的作图需求,都可以试着在模型广场上搜索或者浏览,然后收集到模型库中用于生图。1.lora:低阶自适应模型,你可以理解为checkpoint的小插件,生图的时候lora可有可无。但是lora的价值还是很明显的,基本上你看到一些精细的控制,如面部、材质、物品等等细节都常见于用相应的lora进行控制。旁边的数值是lora的权重。1.ControlNet:控制图片中一些特定的图像,可以用于控制人物姿态,或者是生成特定文字、艺术化二维码等等。也是高阶技能,后面再学不迟。1.VAE:是个编码器,功能类似于我们熟悉的滤镜,调整生图的饱和度。无脑选择右侧截图中840000这个即可。1.Prompt提示词:想要AI生成的内容(不绝对有效,需要多费功夫学习,哪怕从照抄别人开始)。2.负向提示词Negative Prompt:想要AI避免产生的内容(不绝对有效,也需要费功夫学,哪怕从照抄别人开始)。1.图生图:上传图片之后,sd将根据你的图片和你选择的模型以及输入的prompt等等信息进行重绘。重绘幅度越大,输出的图和输入的图差别就越大。
1.图生图的作用?图生图功能允许用户上传一张图像,并基于该图像生成新的视觉内容1.如何使用图生图?1.1.应用图生图1.1.1.prompt输入框下,点击“图生图”上传本地文件1.1.1.无限画布中下,图片功能区进行选择1.2.调整“图生图”功能区参数参考程度更像原图:小幅度修改基底图像,有限的增加元素更创意:大幅度修改基底图像,可搭配增强模型加入更多的元素自定义:可自定义修改重绘幅度增加参考纬度:点击添加按钮,会自动的应用并打开“生成器”的图片参考功能替换图像:鼠标滑动到图像,点击“选择参考图”即可重新选择图片转换提示词:反推参考图信息填入进提示词框中同步生图尺寸:同步参考图尺寸到“生成器”的生图尺寸中
如果没办法科学上网,还有个办法,就是我之前有在群里介绍过的bizyair,https://cloud.siliconflow.cn/i/juDv09Wj,注册,拿到key,在comfyui中安装bizyair最新的节点,里头直接支持了pulid,不需要再安装各种模型,直接可用。我把节点也打包放网盘里。没有独立显卡的笔记本也可以体验,下载这个包,链接:https://pan.baidu.com/s/1iUF1JXidizkHh0kKthcQ7g?pwd=w36m提取码:w36m解压即用,前提也是拿到key。目前flux-pulid只有文生图,如何图生图?说一下我的做法。还是拿上面的例子举例,准备两张图,一张是神仙姐姐的图,一张是要换脸的图。我用的这张。然后用joy反推,把文字再贴到pulid工作流里。也可以直接合在一个工作流里。附上flux-pulid工作流和flux-pulid加joy反推工作流通过网盘分享的文件:flux-pulid链接:https://pan.baidu.com/s/1NTMiaQdgu5y9iK_9v0jhTQ?pwd=rkqr提取码:rkqr--来自百度网盘超级会员v3的分享欢迎大家多测试。