如何在ComfyUI中使用大语言模型

引言

在现代用户界面设计中,用户体验的优化是一个不断追求的目标。ComyUI作为一个先进的用户界面,通过集成大型语言模型,可以帮助用户更高效地完成任务。本文将详细介绍如何在ComyUI上利用大语言模型来反推提示词,从而提升用户交互的流畅性和效率。

第一步:下载安装ollama

Ollama 是一个开源的大型语言模型服务工具,旨在让用户能够在本地设备上运行大型语言模型(LLMs)。

我们在ollama官网下载ollama:https://ollama.com/

选择你对应的系统下载安装即可

如何在ComfyUI中使用大语言模型插图

下载Ollama模型,你点击官网右上角的models可以看到很多模型,我这里以llava-phi3 模型为例,教大家如何安装模型。llava-phi3 是一款视觉模型,可以识别我们的图片生成提示词,非常好用。

如何在ComfyUI中使用大语言模型插图1

我们在llava-phi3 的主页复制ollama run llava-phi3:latest这段指令

如何在ComfyUI中使用大语言模型插图2

确保你的ollama已经安装并运行。

如何在ComfyUI中使用大语言模型插图3

然后我们打开CMD命令行窗口,把刚刚复制的指令黏贴,ollama就会自动帮我们下载模型并调用

如何在ComfyUI中使用大语言模型插图4

你可以发消息进行对话就代表安装成功

如何在ComfyUI中使用大语言模型插图5

第二步:下载ComfyUI ollama插件

我们在管理器中搜索ollama安装

也可以通用Git URL安装:https://github.com/stavsap/comfyui-ollama

如何在ComfyUI中使用大语言模型插图6

第三步:在comfyui中使用Ollama

安装成功后我们就可以使用ollama Vision节点为来根据我们提供的图片生成提示词

如何在ComfyUI中使用大语言模型插图7

示例:如果你用的是SD3 或者Kolors语义理解很强的模型,这款插件就非常好用。如果是SD1. 5 或者SDXL用WD1. 4 标签反推提示词就可以了

如何在ComfyUI中使用大语言模型插图8

结语

通过以上步骤,你可以有效地在ComyUI上利用大语言模型来反推提示词,提升用户体验。

© 版权声明
THE END
喜欢就支持一下吧
点赞14 分享