当前位置: 首页 > news >正文

如何将AI大模型部署到本地电脑

所需工具:
Ollama
Docker
open-webui

  1. 下载并安装Ollama

  2. 下载AI模型(支持中文较好的模型qwen2)
    在这里插入图片描述
    Windows命令行输入:

ollama run qwen2

在这里插入图片描述
在这里插入图片描述

  1. 下载并安装Docker

  2. 通过Docker部署open-webui
    在这里插入图片描述
    Windows命令行输入:

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

安装完docker镜像,可以在Docker软件中看到:
在这里插入图片描述
点击自动在浏览器中打开网页:
在这里插入图片描述
然后便可以愉快的在浏览器网页上使用AI模型了


http://www.mrgr.cn/news/50621.html

相关文章:

  • Deeppaas 3.6版本发布,推动零代码开发新纪元
  • 怎样用python获取浏览器的背景颜色?怎样用python把浏览器背景颜色设置为dark?
  • 【jQuery】jQuery基本操作(样式操作 内容操作 节点操作 属性操作 节点遍历)
  • 关于Oracle透明数据加密(TDE)的两个概念
  • RLC串联谐振
  • 多元线性回归模型
  • 光伏电站的安装方式有哪些类型
  • 国际盲人节,看华为智能眼镜2是如何为视障用户开启便捷新体验的
  • 【工具推荐】Hikvision - 一款海康威视综合漏洞利用工具,适用于漏洞挖掘、SRC漏洞挖掘、护网红队、渗透测试,支持一键获取 shell。
  • 【工具分享】XSStrike是一款检测XSS漏洞的高级检测工具,XSS漏洞挖掘神器,渗透必备,SRC挖掘必备,多个SRC挖掘团队都在偷偷使用。
  • RTR-Chapter9上
  • TCP/UDP与网络调试助手通信
  • Cortex-A7:如何切换ARM和Thumb状态
  • k8s worker 节点关机 sts 管理的 pod 无法迁移
  • kubernetes--配置管理和持久化存储
  • CentOS 7上安装MySQL客户端并进行配置
  • 景区展览馆客流统计系统实时显示在场人数
  • 深度学习实战94-基于图卷积神经网络GCN模型的搭建以及在金融领域的场景
  • 人工智能AI与机器学习ML基础入门
  • Linux 内核中USB鼠标枚举失败问题总结