当前位置: 首页 > news >正文

【AI】MAC版本本地Stable Diffusion web ui安装

文章目录

  • 前言
  • 环境依赖
    • homebrew
    • python3
    • 下载stable-diffusion-webui
  • webui
    • 模型准备
      • 模型网站
    • 中文页面设置
    • 提示词转汉语转英文
    • controlnet安装
      • controlnet模型下载
  • 结尾

前言

目前,市面上已经出现了很多用Ai 绘图制作的作品,用于自媒体或者商业等。例如表情包头像、摄影更换背景和服装、数字人、插画、有声图文小说等。我们会发现很多之前需要设计师做三天三夜的作品,只需要十几分钟甚至不到一两分钟就能生成。
现在,我们也可以用现有的在线Ai工具进行创作。绝大工具包括这三种,文字生成、图片生成、视频生成。

  • 文字生成:

    • 国外的chatgpt(https://chatgpt.com/)
    • DeepSeek(https://chat.deepseek.com/)
    • 百度的文心一言(https://yiyan.baidu.com/)
    • 阿里的通义千问(https://tongyi.aliyun.com)
    • kimi(https://kimi.moonshot.cn/)
    • 腾讯的Effidit(https://effidit.qq.com)
    • 字节的豆包(https://www.doubao.com/chat/)
  • 图文生成:

    • 国外的MJ(https://www.midjourney.com/home)
      • 但是收费,一个月10$,不便宜
    • 国内比较火的liblib团队(https://www.liblib.art/sd)
      • 比较推荐,跟SD差不多,模型也丰富,也有comfy ui工作流
    • 阿里的通义万相(https://tongyi.aliyun.com/wanxiang/)
    • 百度的文心一格(https://yige.baidu.com/)
    • 字节的豆包(https://www.doubao.com/chat/)
  • 视频生成:

    • 国外的lumalabs(https://lumalabs.ai/dream-machine)
      • 现在也收费了,之前不收
    • 百度的度加剪辑(https://aigc.baidu.com/home)
    • 快手的可灵(https://klingai.kuaishou.com/)

但是相对于本地来说,就没那么灵活,比如模型的缺少,敏感词的限制等,但这最近其实随着时间技术的更新迭代也十分够用了。

环境依赖

其实像我电脑的配置mac m1 8+256就能跑一些相对画质低 512*512的图了,但是由于内存的限制,很多模型是跑不动的,会报错分配内存不足。

homebrew

官网

/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"

输入密码进行安装

国内镜像

/bin/bash -c "$(curl -fsSL https://gitee.com/cunkai/HomebrewCN/raw/master/Homebrew.sh)"

按提示进行操作

python3

SD是依赖于python的,所以我们这需要安装python,最好是python 3.10.9以上的,可以避免很多报错状况以及不兼容性。
官网下载

brew install cmake protobuf rust python@3.10 git wget

下载stable-diffusion-webui

代码clone

git clone https://github.com/AUTOMATIC1111/stable-diffusion

webui

模型准备

模型网站

  • civitai(https://civitai.com/)非常全的模型,下载需要有github账号等,申请一个就行
  • huggingface(https://huggingface.co/models?sort=trending)没有civitai全,建议用civitai

如果不知道需要什么模型,可以去liblib中查看

这里是我用的一些,因为配置比较低,所以大家电脑配置可以也可以安装最新的模型:

  • Anything v5:适用于卡通动漫
  • majicmixRealistic:麦橘写实,主要用于真人绘画
  • realisticVision:写实人像
  • rpg_v5:游戏角色专用

将下载到的包放到
/stable-diffusion-webui/models/Stable-diffusion路径下
在这里插入图片描述

启动stable-diffusion-webui
在webui最下面有个 webui.sh文件,我们在终端用./webui.sh命令就可以运行了
在这里插入图片描述

启动以后默认本地url为 http://127.0.0.1:7860
在这里插入图片描述

中文页面设置

默认我们第一次启动是英文的,我们可以将页面设置为中文
https://github.com/VinsonLaro/stable-diffusion-webui-chinese
这个里面有详细的中文页面配置

提示词转汉语转英文

在这里插入图片描述

打开扩展,在扩展插件中输入url安装就可以了

https://github.com/Physton/sd-webui-prompt-all-in-one

然后点击最下面一行的重新加载/Reload UI重新刷新就好

controlnet安装

有时候我们需要局部重绘、涂鸦、线稿等,那么就需要用到controlnet精确控制
还是一样的方式,打开扩展,在扩展插件中输入url安装就可以了
https://github.com/Mikubill/sd-webui-controlnet
然后点击最下面一行的重新加载/Reload UI重新刷新就好
在这里插入图片描述

controlnet模型下载

有了controlnet,我们还需要下载对应的模型

ControlNet 需要额外的预处理器和模型文件,需手动下载并放置到指定目录:
stable-diffusion-webui/extensions/sd-webui-controlnet/models
下载的模型可以通过 huggingface 模型网站获取

https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
这里是装了v1.1的模型包
在这里插入图片描述

装完以后重新加载/reload ui后,就可以看到模型已经存在,因为磁盘有限,下太多加载不过来,我就先装了一个
在这里插入图片描述

结尾

本地部署SD的优点总结有下面几条

  • 模型的多样性,可以下载自己喜欢的模型
  • 没有那么多的限制,比如提示词的限制,虽然说基本什么都能生成,但还请广大网友自重
  • 不存在生成图片数量限制,只要你磁盘大,时间够,基本你一天都可以随心所欲的生成
  • 可扩展性强,新出的插件可以随时用,进行SD的优化

缺点:

  • 稳定性差,出问题排查效率慢,可靠性没那么强
  • 生图效率决定cpu、内存
  • 社区只能看网上的,不能够及时交流,也就是平台的体验没有

好了,以下就是今天分享的内容,大家有什么兴趣啥的也可以互相交流!
在这里插入图片描述

相关文章:

  • 深度剖析:域名与DNS安全的全方位解读
  • UFS Explorer Technician:处理最具挑战性数据恢复及取证案例
  • 【0】数据结构的绪论章
  • DS足球监控【比分直播】监控,钉钉实现自动提醒
  • MySQL-存储过程
  • 05.AI搭建preparationの(transformers01)BertTokenizer实现分词编码
  • 命令模式(Command Pattern)★
  • Linux内核调试 - Hung_task机制分析上
  • 语言模型理论基础-持续更新-思路清晰
  • 无人机螺旋桨平衡标准
  • LangChain开发(二)LangChain提示词模板Template使用
  • 2.7 进度控制习题-2
  • 【JS】反转字符串中的单词
  • 计算机网络基础:WiFi 与蓝牙的原理与应用
  • JavaScript中的继承有哪些方式?各有什么优缺点
  • 强化学习与神经网络结合(以 DQN 展开)
  • STL之空间配置器
  • 【深度学习与实战】2.1、线性回归模型与梯度下降法先导
  • 数据结构:利用递推式计算next表
  • PostgreSQL详解
  • 打造多元文旅消费场景,第四届长三角城市戏剧节启幕
  • 印巴矛盾已达近年“最高点”:军政经文全面紧张,巴将向联合国通报局势
  • 马斯克的胜利?OpenAI迫于压力放弃营利性转型计划
  • 国际观察丨澳大利亚新一届政府面临系列挑战
  • 竞彩湃|拜仁冲冠战役或有冷门,大巴黎留力欧冠半决赛
  • 人形机器人,最重要的还是“脑子”