当前位置: 首页 > news >正文

部署一个本地的ChatGPT(Ollama)

一 下载Ollama

Ollama下载地址:https://ollama.com/download

下载完后

 

二 安装运行

双击下载好的OllamaSetup.exe开发 安装Ollama:

 

安装完成后,多了一个Ollama的菜单如下图 :

Ollama安装好默认是配置开机运行,如果没有运行可以在菜单上点击一下即可,正常情况要查看是否运行状态看一下任务栏这个图标即可。

在命令行运行

ollama

首次运行需要选择下载的模型 

ollama run gemma:7b

指定使用的模型gemma:7b,这里可以选择其它模型,第一次调用当本地不存在时会自动下载该模型,运行成功可直接在命令行模型上发问如下图:

模型

可以根据电脑配置和自己的爱好选择模型:

 注意:运行7B机型至少应该有8gb可用内存,运行13B机型至少应该有16gb可用内存,运行33B机型至少应该有32gb可用内存。

三 配置Chat Ollama 客户端

配置Chat Ollama 客户端,加一个壳用来调用的。

在github找到一个开源的web客户端 https://github.com/ivanfioravanti/chatbot-ollama

开发环境运行: 

 

配置好的Chat Ollama 客户端,运行效果,界面不够美的可以直接修改页面代码。

这里我们只需配置本地的服务配置即可,如下图: 

选好模型开始聊天:

 可以开始聊天了,如下图:

  帮助写代码如下图:

 这样跑起来方便很多

http://www.lryc.cn/news/319336.html

相关文章:

  • Vue 3中的reactive:响应式状态的全面管理
  • 【网络】详解HTTPS及探究加密过程
  • 【C语言】字符与字符串---从入门到入土级详解
  • Github Copilot 工具,无需账号,一键激活
  • node: -max-old-space-size=xxx is not allowed in NODE_OPTIONS
  • k8s编排系统
  • samba服务器的配置
  • H12-821_279
  • Stable Diffusion科普文章【附升级gpt4.0秘笈】
  • Lua 如何在Lua中调用C/C++函数
  • JVM学习-类加载
  • PyCharm中如何使用不同的虚拟环境
  • Unity Live Capture 中实现面部捕捉同步模型动画
  • Codeforces Round 932(div2)||ABD
  • 基于最小二乘法的太阳黑子活动模型参数辨识和预测matlab仿真
  • VSCode配置cuda C++编程代码提示的详细步骤
  • JUnit 面试题及答案整理,最新面试题
  • 使用Lua编写Wireshark解析ProtoBuf插件
  • ClickHouse副本节点数据损坏恢复
  • YOLOv9改进策略:注意力机制 | SimAM(无参Attention),效果秒杀CBAM、SE
  • 宝塔 安装对外服务Tomcat和JDK
  • rust最新版本安装-提高下载速度
  • 数据清洗与预处理:打造高质量数据分析基础
  • Linux服务器(Debian系)包含UOS安全相关巡检shell脚本
  • BS4网络提取selenium.chrome.WebDriver类的方法及属性
  • Prompt Engineering(提示工程)
  • 移远通信亮相AWE 2024,以科技力量推动智能家居产业加速发展
  • Java中上传数据的安全性探讨与实践
  • Leetcode 17. 电话号码的字母组合
  • 蓝桥杯单片机快速开发笔记——独立键盘