讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么安装Ollama大模型_Linux本地运行AI大模型方法教程【实战】

夏辰小哥_2809

夏辰小哥_2809

发布时间:2026-03-29 20:31:02

|

467人浏览过

|

来源于php中文网

原创

Ollama可在Linux通过三种方式安装:官方脚本、包管理器或手动二进制部署;安装后拉取llama3等模型,启动服务并支持GPU加速与远程访问配置。

linux怎么安装ollama大模型_linux本地运行ai大模型方法教程【实战】

如果您希望在Linux系统上部署并运行Ollama大模型,需通过命令行完成安装、模型拉取与本地服务启动。以下是实现该目标的具体步骤:

一、通过官方脚本安装Ollama

此方法使用Ollama官方提供的curl脚本,自动检测系统架构并下载对应二进制文件,完成安装与服务注册。

1、打开终端,执行以下命令下载并运行安装脚本:
curl -fsSL https://ollama.com/install.sh | sh

2、验证安装是否成功:
ollama --version

3、检查Ollama服务状态:
systemctl --user status ollama

4、如服务未启用,手动启用并启动:
systemctl --user enable ollama && systemctl --user start ollama

二、使用包管理器安装(适用于Debian/Ubuntu)

该方式利用系统包管理工具安装预编译deb包,便于版本管理和依赖解析。

1、下载最新版.deb安装包(以v0.4.12为例):
wget https://github.com/ollama/ollama/releases/download/v0.4.12/ollama-debian-bookworm-amd64.deb

2、安装deb包:
sudo dpkg -i ollama-debian-bookworm-amd64.deb

3、修复可能缺失的依赖:
sudo apt-get install -f

4、重启用户级服务:
systemctl --user restart ollama

三、手动下载二进制文件安装

适用于无root权限或受限环境,通过直接获取静态链接二进制文件实现免依赖部署。

1、创建安装目录:
mkdir -p ~/bin && cd ~/bin

2、下载对应架构的二进制文件(如Linux x86_64):
curl -L https://github.com/ollama/ollama/releases/download/v0.4.12/ollama-linux-amd64 -o ollama

3、赋予可执行权限:
chmod +x ollama

4、将二进制文件加入PATH:
echo 'export PATH="$HOME/bin:$PATH"' >> ~/.bashrc && source ~/.bashrc

5、启动Ollama服务(前台运行,用于调试):
ollama serve

四、拉取并运行大模型

Ollama支持从其模型仓库快速拉取多种开源大模型,所有模型均以容器化方式本地加载并提供API接口。

1、拉取Llama 3 8B模型:
ollama pull llama3

2、拉取Phi-3-mini模型:
ollama pull phi3

3、启动交互式会话:
ollama run llama3

4、在另一终端中调用API测试:
curl http://localhost:11434/api/chat -d '{"model":"llama3","messages":[{"role":"user","content":"你好"}]}'

五、配置Ollama服务监听地址与GPU加速

默认Ollama仅绑定127.0.0.1,若需远程访问或启用CUDA/NVIDIA GPU推理,须修改环境变量与启动参数。

1、设置监听所有网络接口:
echo 'export OLLAMA_HOST=0.0.0.0:11434' >> ~/.bashrc && source ~/.bashrc

2、启用NVIDIA GPU支持(需已安装nvidia-container-toolkit):
echo 'export OLLAMA_NUM_GPU=1' >> ~/.bashrc && source ~/.bashrc

3、重启服务使配置生效:
systemctl --user restart ollama

4、确认GPU设备被识别:
ollama list 命令输出中应显示 "cuda" 或 "nvidia" 字样

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

相关专题

更多
curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

3483

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

775

2023.10.30

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

3088

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

4589

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3729

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

426

2026.01.19

github中文官网入口 github中文版官网网页进入
github中文官网入口 github中文版官网网页进入

github中文官网入口https://docs.github.com/zh/get-started,GitHub 是一种基于云的平台,可在其中存储、共享并与他人一起编写代码。 通过将代码存储在GitHub 上的“存储库”中,你可以: “展示或共享”你的工作。 持续“跟踪和管理”对代码的更改。

8405

2026.01.21

GitHub官网入口版本汇总
GitHub官网入口版本汇总

本专题整合了GitHub入口版本地址汇总,阅读专题下面的文章了解更多详细内容。

838

2026.04.02

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

0

2026.10.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn