当前位置: 首页 > wzjs >正文

网站建设服务是什么意思做网站比较好的公司有哪些

网站建设服务是什么意思,做网站比较好的公司有哪些,网站模板图,重庆忠县网站建设0.如题,预期在Ubuntu上本地化部署DeepSeek,通过浏览器访问达到chatgpt的对话效果。 1.裸机,安装Ubuntu。 原有的系统盘采用大白菜,下载24.04.1的镜像,插到电脑上,无法识别,重新查到笔记本&…
0.如题,预期在Ubuntu上本地化部署DeepSeek,通过浏览器访问达到chatgpt的对话效果。
1.裸机,安装Ubuntu。

        原有的系统盘采用大白菜,下载24.04.1的镜像,插到电脑上,无法识别,重新查到笔记本,显示U盘损坏。重新下载大白菜,制作启动盘,但是被Windows自带的杀毒软件Windows Defender给干掉,后来查了一下,说是大白菜还有老毛桃有毒,没办法用软碟通(UltraISO)重新制作启动盘,重新安装镜像。

     避坑1:下载镜像用国内的源Index of /ubuntu-releases/24.04.1/ (ustc.edu.cn)

2.安装Ollama
Ollama是一个开源工具,用于在本地轻松运行和部署大型语言模型。

     避坑2:不要使用Linux自动安装工具,apt查不到ollama,用snap下载完成后,访问127.0.0.1:11434显示ollama is running,但是,但是,但是,会有莫名奇妙的错误,比如:llama runner process has terminated: exit status 127。查看ollama -v :0.0.0。

        老老实实按照官网指示下载。

                避坑3:老老实实下载,网速不给力,贼慢,尤其是linux环境下,没有科学上网,可以将install.sh下载下来,然后下载对应的ollama-linux-amd64.tgz,放在同一个目录下面,修改.sh文件当中关于下载的部分

#status "Downloading Linux ${ARCH} bundle"
#curl --fail --show-error --location --progress-bar \
#    "https://ollama.com/download/ollama-linux-${ARCH}.tgz${VER_PARAM}" | \
#    $SUDO tar -xzf - -C "$OLLAMA_INSTALL_DIR"# 添加的代码:
$SUDO tar -C "$OLLAMA_INSTALL_DIR" -xzf ./ollama-linux-amd64.tgz

然后安装

sudo chmod a+x  install.sh
./install.sh

        避坑4:很多文章都说接下来要用ollama serve启动服务,但运行这个指令会显示11434端口已经被占用。其实这个时候服务已经起来了,无须介意,直接用。

3.安装Deepseek
ollama run deepseek-r1:7b

        选择多少b全凭自己的实力。垃圾显卡跑7b都够呛。

        访问17.0.0.1:11434/api/tags可以看到已经安装的模型。

        这个时候就可以直接在终端与模型进行对话了,如果是测试,调接口之类的到这一步就OK。

4.安装open webui,前端显示,痛苦的开始

        4.1 安装Docker:确保你的机器上已安装Docker。
        4.2 运行Open Web UI:

docker run -d -p 3000:8080 \--add-host=host.docker.internal:host-gateway \-v open-webui:/app/backend/data \--name open-webui \--restart always \ghcr.io/open-webui/open-webui:main

        避坑5:open webui只是用来做界面交互的,与模型没什么关系,这里需要注意的是,配置是否要显卡支持,上面的指令是用的CPU,最终装成功CPU500%+。想用显卡支持的指令可以参照⏱️ Quick Start | Open WebUI官方指导操作,但是,但是,但是,自求多福吧。显卡驱动与控制器,一堆坑,可能是个裸机,还没装完必要的驱动。

        安装完成后,浏览器访问127.0.0.1:3000可以进入openwebUI登录界面,先注册一个管理员,随便写资料,然后就可以登录。大坑来了,找不到模型

明明终端测试可以,浏览器访问127.0.0.1:11434可以显示Ollama的模型数据,就是访问不了。

open-webui无法链接ollama 报错ERROR:apps.ollama.main:Connection error: Cannot connect 127.0.0.1无法访问。

就很迷,访问怎么都可以,但是docker就是访问不了,找了半天,原来是服务配置的问题。

     避坑6:默认ollama绑定在127.0.0.1的11434端口,修改/etc/systemd/system/ollama.service,在[Service]下添加如下内容,使ollama绑定到0.0.0.0的11434端口
Environment="OLLAMA_HOST=0.0.0.0"

udo systemctl daemon-reload

sudo systemctl restart ollama

至此,安装调试全部完成,进入测试阶段。

5.测试

        主机显卡不灵,4G显存,装7b模型,反应迟钝,一个问题从接受,到开始思考要好几分钟,思考也要好几分钟,最终答题显示思考了几秒。而且刷新很慢,一个字一个字的往外蹦,还在继续优化,看看能不能搞个50的显卡试试。

这个问题从敲回车到作答用了5分钟。

http://www.dtcms.com/wzjs/88102.html

相关文章:

  • 网站平台建设项目书广告投放渠道
  • 门户网站的特点和优势关键词优化步骤简短
  • 怎么创建自己的网站关键词优化技巧
  • 网站外链接如何做活动推广方案策划
  • 昌吉哥教做新疆菜网站世界球队最新排名
  • wordpress 建资源县好不好seo培训学院
  • 郑州网站建设搜q.479185700网站建设与管理主要学什么
  • 高端的网站建设公司itmc平台seo优化关键词个数
  • 做企业画册网站有网站开发用什么软件
  • 做有声小说网站金华网站建设
  • 做食品网站需要什么百度首页优化
  • wordpress留言页面郑州seo排名优化
  • 自己做网站服务器sem竞价推广是什么
  • 青建设厅官方网站海省职业培训机构
  • 自己做网站的各种代码如何去推广自己的产品
  • 自学网站免费西安外包公司排行
  • 淄博网站优化公司网推放单平台
  • 如何自己做网站 开直播佛山网站快速排名提升
  • 东莞网站运营知名乐云seo资源猫
  • wordpress做电商网站注册安全工程师
  • 布吉商城网站建设哪家公司靠谱网站制作的重要性及步骤详解
  • 聊城市 网站制作合肥网络推广有限公司
  • 营销型网站建设主要需要注意什么北京昨天出啥大事了
  • 什么网站可以做装修效果图的百度信息流投放技巧
  • 做团建活动网站优化分析
  • 网站开发招聘年薪竞价推广是什么意思
  • 支付网站开发费可以做无形资产十大跨境电商erp排名
  • 惠州市企业网站seo营销工具app拉新推广平台有哪些
  • 长沙3合1网站建设价格如何制作自己的网址
  • 男的和女的做那种短视频网站seo黑帽技术有哪些