1.选择自定义提示词(当然你也可以选之前预定义的话题,也就是黑色的按钮):PS:黑色的按钮会带着你做新手使用指引。然后左边会出现我们熟悉的chat界面,就不详细介绍这个界面。网站上提供的模型是Llama-3.1 8B Instruct:1.输入你的对话内容,等待左右两边的内容生成。如果这时右边的分析没刷新成上图的样子,在这两个按钮之间做做切换。由于它的归因聚类也是用了大模型,所以稍微等等,它也有个反应时间,过程中可能是这样的:最终你得到的结果可能和我不同,甚至可能是正确的答案,猜测是这个模型用的温度temprature不是最低,因此你会得到不同的结果。Activation Mode:你将获得整段的推理判断。Attribution Mode:你需要选中一个token,它会帮你分析对应的内容里最大的关联。1.从结果中,你会发现模型认知的9.11大概率是那个著名的时间,也可能是一个日期。这种情况下,模型就判断9月11日比9月3日大。而如果我们用一个显然不是日期的数字对比,比如9.31和9.4比,大概率答案是正确的:解释也回归到了数字范畴:它从侧面证明了LLM的基本原理:LLM是采用多头注意力机制预测下一个token的,因此训练数据中相关的语句如果越多,它们之间的相关性概率会越高。在这个案例里,9.11作为日期“概念”的权重显然比它是个数字“概念”的权重大。
C盘储存小的一定先做这一步,不然会跟我一样红温ollama默认的[模型保存](https://so.csdn.net/so/search?q=%E6%A8%A1%E5%9E%8B%E4%BF%9D%E5%AD%98&spm=1001.2101.3001.7020)路径如下:Windows:C:\Users\%username%\.ollama\models添加环境变量添加OLLAMA_MODELS环境变量[heading1]二、进入ollama官网下载[content]地址:https://ollama.com/[heading1]三、下载语言模型[content]模型地址:https://ollama.com/library[heading2]3.1、选择llama模型下载至本地[heading2]3.2、选择本地文件夹CMD后粘贴刚才复制的命令[heading2]3.3、开始下载[content]2.4.、下载完成并测试[heading1][heading1]四、下载图像模型[content]模型地址:https://ollama.com/library[heading2]4.1、选择llava模型下载至本地[heading2]4.2、选择本地文件夹CMD后粘贴刚才复制的命令[heading2]4.3、开始下载[heading2]4.3、下载成功[heading1]五、在Comfy中使用[heading2]5.1、下载并安装ollama节点[content]下载地址:下载完成后安装到节点目录[heading2]5.2、在Comfy中调用[heading1]六、效果[heading2]6.1、llama模型进行提示词生成[heading2]6.2、llava模型进行图像反推、描述的还是非常准确[heading1]七、工作流[content]本期所用到的节点和工作流下载地址:https://www.123pan.com/s/fOu4Td-nrjdd.html提取码:kakafile:使用本地大语言模型进行图像反推.json
仿照GPTs里的MJ prompt改了一版提示词,可以用在coze或者其他国内的agent里。因为MJ对节点没有要求,之后画插图可以不需要切节点。不是很挑模型,基本上都可以用。方便的地方在于如果提示词懒得写全,可以让agent直接帮助补全润色,黏贴就可以。[heading1]测试画面[content]一个巨大鲸鱼头部的特写,鲸鱼的眼睛显示疲惫的神情,一个小女孩站在鲸鱼的旁边抚摸鲸鱼的脸,小女孩占画面比例很小,体现鲸鱼的巨大,吉卜力工作室风格Prompt:A close-up of a huge whale's head with its tired eyes.A little girl in red dress stands beside the whale,gently touching its face.The girl takes up a small portion of the frame,emphasizing the whale's enormity.Created Using:soft colors,gentle lighting,wide-angle lens,Ghibli Studio style--ar 16:9--style raw--niji 6(画面需要改成了niji)一个乌克兰女孩的黑白写真照Prompt:A close-up of a Ukrainian young girl in black and white.Her eyes are full of emotion and she holds a flower.Created Using:monochrome palette,shallow depth of field,natural lighting,delicate features一个大型交响乐团在音乐厅里演奏A large symphony orchestra performing in a concert hall.The musicians are dressed in formal attire and playing with great passion.The hall is filled with a rich sound.Created Using:wide-angle shot,multiple cameras,orchestral lighting,realistic details--v 6.1--ar 16:9--style raw[heading1]更新准备[content]推理模型可能提升提示词的精准性,准备测试