在 Linux 系统上部署 Deepseek AI 的全面指南
对于所有希望亲身体验 AI 魅力的玩家来说,本文将提供一个详尽的教程,指导你在 Linux 系统上部署 Deepseek AI。无论你是技术小白还是有一定基础的用户,都能轻松跟随本文完成部署。
一、关于 Ollama
Ollama 是一款功能强大的开源应用,它允许用户在 Windows、MacOS 和 Linux 系统上,通过命令行界面在本地运行、创建和共享大型语言模型。从最初支持 Llama2,到后来扩展至包括 Mistral 和 Phi-2 在内的多种模型,Ollama 一直致力于简化大型语言模型(LLM)在本地机器上的部署和运行过程。
Ollama 通过将模型权重、配置和数据打包为 Modelfile,极大地优化了 LLM 的设置和配置流程。这使得非专业用户也能轻松管理和运行这些复杂的模型。同时,Ollama 支持多种 LLM,并提供跨平台兼容性,用户只需通过简单的命令行操作或 API 调用,即可启动和运行模型。在文本生成、翻译、问答系统、代码生成等多个领域,Ollama 都展现出了广泛的应用价值。
二、下载并安装 Ollama
要获取 Ollama,请访问其官方网站:Ollama 官网链接。进入官网后,你会看到一个线条羊驼头像,正下方就是醒目的“Download”按钮。点击该按钮,你将进入下载页面。
在下载页面上,你可以直接复制提供的安装命令,并将其粘贴到你的 Linux 终端中执行。安装完成后,终端会显示相应的日志信息。如果你没有 GPU,日志中可能会出现一个 WARNING 提示;而拥有 GPU 的机器则会显示“>>> NVIDIA GPU installed.”的字样。
为了验证安装是否成功,你可以输入ollama --version命令。如果安装正确,终端将显示所安装的 Ollama 版本号。
2.1 安装报错的解决方法
如果在安装过程中遇到错误,你可以尝试以下步骤来解决:
使用 curl 下载 Ollama 的安装脚本:
$ curl -fsSL https://ollama.com/install.sh -o ollama_install.sh
为下载的脚本文件添加可执行权限:
$ chmod +x ollama_install.sh
修改脚本中的默认下载地址,指向 Github 上的最新版本(以 v0.5.11 为例,实际使用时请查询最新版本号):
$ sed -i ‘s|https://ollama.com/download/|https://github.com/ollama/ollama/releases/download/v0.5.11/|’ ollama_install.sh
执行修改后的脚本以完成安装。
三、配置模型存储位置
Ollama 在 Linux 上的默认模型存储位置通常为/usr/share/ollama/.ollama/models。但你也可以手动指定其他路径。为此,你需要修改OLLAMA_MODELS环境变量。
首先,确保 Ollama 服务已停止:
sudo systemctl stop ollama
sudo systemctl disable ollama.service
然后,创建你希望指定的目录,并确保该目录的所属权和权限设置正确。例如,你可以创建/usr/local/ollama/models目录,并为其设置权限:
sudo chown -R root:root /usr/local/ollama/models
sudo chmod -R 775 /usr/local/ollama/models
接下来,修改 Ollama 的 systemd 服务文件,将User和Group修改为root,并在[Service]项中添加一行Environment来指定模型存储路径。例如:
Environment=“OLLAMA_MODELS=/usr/local/ollama/models”
最后,重载 systemd 配置并重启 Ollama 服务:
sudo systemctl daemon-reload
sudo systemctl start ollama.service
sudo systemctl restart ollama.service
sudo systemctl enable ollama.service
你可以通过以下命令检查 Ollama 服务是否正常运行:
sudo systemctl status ollama.service
四、下载 Deepseek 模型
Ollama 拉取和使用模型的操作与 Docker 类似。要下载 Deepseek 模型,请访问 Ollama 官方的模型库,并找到 DeepSeek-R1。根据你的硬件条件(如是否有 GPU)选择一个合适的模型大小(如 7b)。点击右侧的复制按钮,复制拉取命令。
在 Linux 终端中,将复制的命令中的run修改为pull以支持断点续传。例如:
$ ollama pull deepseek-r1:7b
等待下载完成后,你可以通过$ ollama list命令查看当前已下载的模型列表。
五、体验 Deepseek
现在,你可以通过以下命令进入命令行提问模式来体验 Deepseek AI:
$ ollama run deepseek-r1:7b
在提示符下输入你的问题,看看 Deepseek AI 会给出怎样的回答吧!
六、安装 Chatbox AI
除了 Ollama 和 Deepseek 外,你还可以尝试安装 Chatbox AI 来获得更多与 AI 对话的乐趣。请访问 Chatbox AI 的官方网站:Chatbox AI 官网链接。
在 Linux 上下载 Chatbox AI 后,你会得到一个.AppImage文件。你需要为其添加可执行权限,并尝试运行它。但请注意,由于依赖关系和系统权限等问题,你可能会遇到一些错误。例如,缺少libfuse2库文件或沙箱配置错误等。
针对这些问题,你可以尝试安装缺失的库文件(如sudo apt install libfuse2),并修改沙箱文件的权限和所有权来解决。在某些情况下,你可能还需要在运行 Chatbox AI 时添加–no-sandbox参数来绕过沙箱限制。
成功运行 Chatbox AI 后,你可以配置它使用本地模型,并开始与 AI 进行对话。你还可以尝试将网页链接丢给 Chatbox AI,看看它能否对网页内容进行简单解析。
七、安装 AnythingLLM
AnythingLLM 是一个功能强大的语言模型应用框架,它支持多种本地部署的大模型,并提供用户友好的界面。作为 Ollama 的搭配工具,AnythingLLM 可以作为本地知识库使用。
要安装 AnythingLLM,请访问其官方网站:AnythingLLM 官网链接。在网站上找到 Linux 版本的下载链接,并执行提供的安装脚本。
安装完成后,你可能会遇到与 Chatbox AI 类似的沙箱配置错误。同样地,你可以通过修改沙箱文件的权限和所有权来解决这个问题。成功启动 AnythingLLM 后,你可以填写邮箱并选择相应选项进入使用界面。在设置中,你可以选择上传本地知识库来扩展模型的能力。
八、总结
恭喜你!到现在为止,你已经成功在 Linux 系统上部署了 Deepseek AI 以及相关的配套工具。现在你可以开始享受与 AI 对话的乐趣了!无论是进行文本生成、翻译、问答还是代码生成等操作,这些工具都能为你提供强大的支持。希望本文对你有所帮助!
相关文章:
在 Linux 系统上部署 Deepseek AI 的全面指南
对于所有希望亲身体验 AI 魅力的玩家来说,本文将提供一个详尽的教程,指导你在 Linux 系统上部署 Deepseek AI。无论你是技术小白还是有一定基础的用户,都能轻松跟随本文完成部署。 一、关于 Ollama Ollama 是一款功能强大的开源应用&am…...
Docker下载,包含Win、Mac
介绍 Docker 是一种开源的容器化平台,通过操作系统级虚拟化技术实现应用的快速开发、部署和运行。以下从多个维度对 Docker 进行详细介绍: 一、Docker 的核心概念与功能 容器化技术 Docker 利用 Linux 内核的容器隔离技术(如 Cgroups 和 Nam…...
算法|2025最强优化算法
根据2025年的最新研究进展,以下是被广泛认可的几种“最强优化算法”,它们在理论创新、性能表现和应用范围上均有显著突破: 一、植物根茎生长优化算法(PRGO) 1 - 核心原理:灵感来源于植物根系结构…...
Prime: 1靶场渗透测试
Prime: 1 来自 <Prime: 1 ~ VulnHub> 1,将两台虚拟机网络连接都改为NAT模式 2,攻击机上做namp局域网扫描发现靶机 nmap -sn 192.168.23.0/24 那么攻击机IP为192.168.23.182,靶场IP192.168.23.207 3,对靶机进行端口服务探测…...
html相关常用语法
html相关常用语法 HTML(HyperText Markup Language)即超文本标记语言,是用于创建网页的标准标记语言 HTML使用标记语言描述Web页面的结构 HTML元素是HTML页面的建构快 HTML元素通过标签tag来表示 HTML标签是“标题”、”段落“、”表格“等内…...
2025年R1 快开门式压力容器操作证考试题目及答案解析
R1 快开门式压力容器操作证考试题目及答案: 单选题 1、快开门式压力容器的快开门(盖)应设计安全联锁装置并应具有( )功能。 A. 当快开门达到预定关闭部位方能升压运行的安全联锁功能 B. 当压力容器的内部压力完全释…...
《傲慢与偏见》(Pride and Prejudice)简介
学习《傲慢与偏见》 本文缘于阅读床头灯3000词英文版《傲慢与偏见》。读完之后,想要了解的更深一点。 英语学习记录:床头灯3000词:《傲慢与偏见》(Pride and Prejudice)阅读记录 故事梗概 《傲慢与偏见》(…...
绿盟科技春招面试
《网安面试指南》https://mp.weixin.qq.com/s/RIVYDmxI9g_TgGrpbdDKtA?token1860256701&langzh_CN 5000篇网安资料库https://mp.weixin.qq.com/s?__bizMzkwNjY1Mzc0Nw&mid2247486065&idx2&snb30ade8200e842743339d428f414475e&chksmc0e4732df793fa3bf39…...
dpkg-architecture命令详解
dpkg-architecture 是 Debian 系系统中用于处理软件包架构相关操作的工具,尤其在软件包构建和交叉编译环境中至关重要。以下是其核心功能及用法的详细说明: 一、核心功能 架构查询与验证 显示或验证当前系统(DEB_HOST_ARCHÿ…...
阿里的MNN源码如何编译成so文件,供Android调用
在Ubtuntu下面的编译,先整理编译环境 1、安装环境依赖 # 安装必要工具 sudo apt update sudo apt install -y cmake ninja-build git wget # 安装Android NDK(建议使用r21版本或更高) wget https://dl.google.com/android/repository/a…...
【高项】信息系统项目管理师(九)项目资源管理【4分】
项目资源管理包括识别、获取和管理所需资源以成功完成项目的各个过程,这些过程有助于确保项目经理和项目团队在正确的时间和地点使用正确的资源。项目资源是指对于项目来说,一切具有使用价值,可为项目接受和利用,且属于项目发展过程所需的客观存在的资源,包括实物资源和团…...
hive 数据简介
Hive介绍 1)Hive简介 Hive是基于Hadoop的一个数据仓库工具,用于结构化数据的查询、分析和汇总。Hive提供类SQL查询功能,它将SQL转换为MapReduce程序。 Hive不支持OLTP,Hive无法提供实时查询。 2)Hive在大数据生态环境…...
SpringBoot的启动原理?
大家好,我是锋哥。今天分享关于【SpringBoot的启动原理?】面试题。希望对大家有帮助; SpringBoot的启动原理? 1000道 互联网大厂Java工程师 精选面试题-Java资源分享网 Spring Boot的启动原理主要是通过 SpringApplication 类来…...
蓝桥杯2023年第十四届省赛真题-子矩阵
题目来自DOTCPP: 暴力思路(两个测试点超时): 题目要求我们求出子矩阵的最大值和最小值的乘积,我们可以枚举矩阵中的所有点,以这个点为其子矩阵的左上顶点,然后判断一下能不能构成子矩阵。如果可…...
hackmyvm-connection
connection(利用445端口smb) ubuntu:192.168.89.225(这里使用ubuntu代替centos7) connection:192.168.89.47 kali:192.168.89.149 arp-scan -l nmap -sS -v 192.168.36.47 nmap 192.168.89.47 --script vuln 使用nmap vuln扫描192.168.111.80靶机,观察可能存在的…...
JVM——Java虚拟机
JVM——Java虚拟机 一. 内存区域划分二. 类加载机制2.1 双亲委派模型(类加载环节) 三. 垃圾回收机制(GC)3.1 识别垃圾3.2 释放内存空间 一. 内存区域划分 JVM本身也是一个进程,会向系统申请内存,然后根据实…...
2024年数维杯数学建模A题多源机会信号建模与导航分析解题全过程论文及程序
2024年数维杯数学建模 A题 多源机会信号建模与导航分析 原题再现: (一)问题背景 尽管全球卫星定位系统下的定位导航技术已成熟,但考虑到室内、隧道、建筑密集区等复杂环境或全球卫星定位系统被毁失灵等突发场景,…...
解释 TypeScript 中的类型保护(type guards),如何使用类型保护进行类型检查?
TypeScript类型保护深度解析 核心概念解析 类型保护是TypeScript用于在条件分支中缩小变量类型范围的机制,通过特定的语法结构让编译器能够推导出更精确的类型信息。其核心价值在于提升代码类型安全性,同时保持开发效率。 五大实现方式及实战案例 1.…...
【时时三省】(C语言基础)习题:分析一个程序
( 1 )运行时会输出什么信息?为什么? ( 2 )如果将程序第4,5行改为 c1 197; c2 198; 运行时会输出什么信息?为什么? ( 3 )如果将程序第3行改为 int cl , c2 ; 运行时会输出什么信息?为什么? ( 1 )输出结果…...
基于springboot的旅游网站(013)
摘 要 随着科学技术的飞速发展,各行各业都在努力与现代先进技术接轨,通过科技手段提高自身的优势,旅游网站当然也不能排除在外,随着旅游网站的不断成熟,它彻底改变了过去传统的旅游网站方式,不仅使旅游管理…...
vscode查看文件历史git commit记录
方案一:GitLens 在vscode扩展商店下载GitLens 选中要查看的文件,vscode界面右上角点击GitLens的图标,选择Toggle File Blame 界面显示当前打开文件的所有修改历史记录 鼠标放到某条记录上,可以看到记录详情,选中O…...
基于Wasm的边缘计算Pandas:突破端侧AI的最后一公里——让数据分析在手机、IoT设备上飞驰
引言:边缘计算的算力觉醒 在智能家居设备每秒产生数万条传感器数据、手机App需要实时分析用户行为的今天,传统云计算模式面临高延迟、隐私风险、带宽成本三大挑战。本文将揭示如何通过WebAssembly(Wasm)Pandas的技术组合…...
负载均衡的在线OJ项目
负载均衡的在线OJ项目 所用技术与开发环境项目的宏观结构我们的项目要实现的最重要的功能:我们项目的整体结构:项目编写思路 compile_server模块compiler模块设计与编写Runner模块设计与编写细节setrlimit系统调用函数程序流程图 Compile_and_run模块设计…...
CPP从入门到入土之类和对象Ⅱ
一、六大默认成员函数 默认成员函数是用户没有显式实现,编译器自动生成的成员函数。 一个类,我们在不写的情况下,编译器会默认生成六个默认成员函数 本文详细介绍构造函数和析构函数 二、构造函数 构造函数虽名为构造函数,但是…...
2025年 cocosCreator 1.8 定制 JavaScript 引擎
参考文档:https://docs.cocos.com/creator/1.9/manual/zh/advanced-topics/engine-customization.html PS: 1.8的文档已经没了,只能看1.9的,所幸这两个版本差别不大 获取 JS 引擎 原文中github上的分支已经找不到了,这里直接从c…...
「JavaScript深入」Socket.IO:基于 WebSocket 的实时通信库
Socket.IO Socket.IO 的核心特性Socket.IO 的架构解析Socket.IO 的工作流程Socket.IO 示例:使用 Node.js 搭建实时聊天服务器1. 安装 Socket.IO2. 服务器端代码(Node.js)3. 客户端代码(HTML JavaScript)4. 房间功能 高…...
turnjs图册翻书效果
npm install https://github.com/igghera/turn.js.git //或者 npm install turn.js //import $ from "jquery"; //记得引入jquery import turn.js; // 引入 Turn.jsimport turn from "/utils/turn.min.js";// 引入 Turn.jsinitBook(length) {var that thi…...
大语言模型的训练数据清洗策略
目录 大语言模型的训练数据清洗策略 1. 数据去重与标准化 问题 解决方案 示例代码(Python 实现数据去重): 2. 过滤有害内容 问题 解决方案 示例代码(基于关键词过滤有害内容): 3. 纠正数据不均衡 …...
在 Vue 项目中调用 DeepSeek API(示例篇)
在 Vue 项目中调用 DeepSeek(假设 DeepSeek 是一个提供 API 服务的第三方工具,例如用于搜索、数据分析等),通常需要通过 HTTP 请求与 DeepSeek 的 API 进行交互。以下是一个简单的示例,展示如何在 Vue 项目中调用 DeepSeek API。 实例如下: 安装依赖 首先,确保你的项目中…...
对接股票金融数据源API
StockTV 股票市场API StockTV 提供全面的实时和历史股市数据 API,涵盖全球股票、外汇、期货及市场新闻数据,助力投资者精准把握市场动态。 主要功能 实时和历史股市数据 API 获取全球股票市场的实时行情、历史数据及深度分析,支持多语言查询…...
蓝桥杯关于栈这个数据结构的一个算法题目
文章目录 1.题目概述解释2.思路分析3.代码解析 1.题目概述解释 找出来这个字符串里面重复出现的字符,类似于这个消消乐的游戏; 示例一里面的这个bb是连续的并且是一样的这个字符,因此删除bb,删除之后发现这个aa有一次相邻了&…...
SpringBoot配置文件加载优先级
在Spring Boot项目中,配置属性的优先级是一个重要的概念,它决定了当存在多个配置源时,哪个配置源的属性将被应用。以下是SpringBoot中配置属性的优先级,从最高到最低: 命令行参数: 命令行参数具有最高的优先…...
企业数据治理解决方案(46页PPT)(文末有下载方式)
资料解读:企业数据治理解决方案 详细资料请看本解读文章的最后内容。 在当今数字化时代,数据已成为企业的核心资产,对企业的发展起着至关重要的作用。然而,许多企业在数据管理方面面临诸多挑战,如数据不全、样式繁多、…...
版本控制器Git ,Gitee如何连接Linux Gitee和Github区别
📖 示例场景 假设你和朋友在开发一个「在线笔记网站」,代码需要频繁修改和协作: 只用本地文件管理 每次修改后手动复制文件,命名为 v1.html、v2.html 问题:无法追踪具体改动内容;多人修改易冲突࿱…...
[网安工具] 网安工具库 —— 工具管理手册
0x00:工具管理类 — Tools Management 0x01:信息收集类 — Information Gathering 自动化综合信息收集工具 — ARL 灯塔 0x02:漏洞探测类 — Vulnerability Identification 浏览器渗透辅助插件 —— HackBar 0x03:漏洞利用类…...
在LwIP中,`tcp_recved()`、`tcp_sndbuf()` 和 `tcp_write()`三个函数详细用法及示例
在LwIP中,tcp_recved()、tcp_sndbuf() 和 tcp_write() 是TCP协议栈的核心函数,用于管理接收和发送数据流。以下是它们的详细用法及示例: 1. tcp_recved() 功能 通知协议栈已处理接收数据:当应用层从接收缓冲区读取数据后&#x…...
外卖避雷方案 改进型(个人使用版)
昨天怒花100请教了双尾彗星对外卖避雷的计划。 总结下来是行不通。 1.很容易被水军冲击数据真实性, 1.这种方案是从末端来解决问题,食品卫生问题,最好还是从解决分成方面的问题。 2.这种方案没有解决人们对食品安全的焦虑。 既然这样那只能先弄个只给自己用的避雷程序,打造…...
深度学习与传统算法在人脸识别领域的演进:从Eigenfaces到ArcFace
一、传统人脸识别方法的发展与局限 1.1 Eigenfaces:主成分分析的经典实践 算法原理 Eigenfaces是基于主成分分析(PCA)的里程碑式方法。其核心思想是将人脸图像视为高维向量,通过协方差矩阵计算特征向量(即特征脸&…...
druid开启防火墙之后的bug
bug以及解决方案 不允许执行多个语句不允许有注释部分数据有误识别,抛出异常,导致原本正常执行的语句被中断 解决方案 application.yaml中对于druid配置如下: wall:enabled: true # 开启防火墙config:multi-statement-allow: true # 允许多个…...
代码随想录_动态规划
代码随想录 动态规划 509.斐波那契数 509. 斐波那契数 斐波那契数 (通常用 F(n) 表示)形成的序列称为 斐波那契数列 。该数列由 0 和 1 开始,后面的每一项数字都是前面两项数字的和。也就是: F(0) 0,F(1) 1 F(n…...
指令系统3(算数运算指令)
一.加法指令(ADD): 用于执行 16 位或 32 位的加法运算。 指令格式及功能: ADD Rd, Rm:将寄存器Rd和Rm的值相加,结果存回Rd,即Rd Rd Rm。ADD Rd, Rn, Rm:把寄存器Rn和Rm的值相加&…...
VLLM专题(三十一)—架构概述
本文档提供了vLLM架构的概述。 1. 入口点 vLLM 提供了多个与系统交互的入口点。下图展示了它们之间的关系。 1.1 LLM 类 LLM 类提供了用于进行离线推理的主要 Python 接口,即在不使用单独的模型推理服务器的情况下与模型进行交互。 以下是 LLM 类的使用示例: from vll…...
【操作系统】进程间通信方式
进程间通信方式 前言 / 概述一、管道管道命名管道 二、消息队列三、共享内存四、信号量信号量概述互斥访问条件同步信号 五、socket总结 前言 / 概述 每个进程的用户地址空间都是独立的,⼀般而言是不能互相访问的,但内核空间是每个进程都共享的ÿ…...
Flutter 打包 ipa出现错误问题 exportArchive
一、错误信息: Encountered error while creating the IPA: error: exportArchive: "Runner.app" requires a provisioning profile with the Push Notifications feature. Try distributing the app in Xcode: open /project/your_app/build/ios/archive/Runner.…...
Ubutu20.04安装docker与docker-compose
系统:20.04.6 LTS (Focal Fossa)" 1.配置apt源(在/etc/apt/sources.list中输入以下内容) # deb cdrom:[Ubuntu 20.04.6 LTS _Focal Fossa_ - Release amd64 (20230316)]/ focal main restricted deb http://mirrors.aliyun.com/ubuntu/ focal main restricted …...
Java 反射机制
Java 反射机制 Java 反射机制1. 反射机制简介2. 反射的核心类3. 反射的基本步骤3.1 加载类,获取类的字节码:Class 对象3.2 获取类的构造器:Constructor 对象3.3 获取类的成员变量:Field 对象3.4 获取类的成员方法:Meth…...
前端流式输出实现详解:从原理到实践
前端流式输出实现详解:从原理到实践 前言一、流式输出核心原理1.1 什么是流式输出?1.2 技术优势对比1.3 关键技术支撑 二、原生JavaScript实现方案2.1 使用Fetch API流式处理关键点解析: 2.2 处理SSE(Server-Sent Eventsÿ…...
CTF题目《easy_tornado》(护网杯 2018)Write Up
题目背景与信息收集 初始访问 题目提供三个文件链接: /flag.txt:提示flag位于/fllllllllllllag文件/welcome.txt:关键词render,暗示模板渲染漏洞(SSTI)/hints.txt:提示签名算法md5(cookie_secre…...
暗光增强技术研究进展与产品落地综合分析(2023-2025)
一、引言 暗光增强技术作为计算机视觉与移动影像领域的核心研究方向之一,近年来在算法创新、硬件适配及产品落地方面取得了显著进展。本文从技术研究与产业应用两个维度,系统梳理近三年(2023-2025)该领域的关键突破,并对比分析主流手机厂商的影像技术优劣势。 二、暗光增…...
CAM350-14.6学习笔记-1:导入Gerber文件
CAM350-14.6学习笔记-1:导入Gerber文件 使用自动导入器导入Gerber1:导航栏Home下面的Import——Automatic Import——选择文件路径——Next2:设置每层的类型:3:设置叠层4:弹出层别显示框及Gerber显示 按照Allegro输出的…...