news 2026/7/10 10:15:28

使用docker安装ollama及ollama拉取模型的总结

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
使用docker安装ollama及ollama拉取模型的总结

文章目录

  • 创建ollama容器
  • 查看ollama容器是否已UP
  • 进入容器内,拉取模型

创建ollama容器

docker run -d\--name ollama\--restart always\-p11434:11434\-v ollama:/root/.ollama\ollama/ollama

查看ollama容器是否已UP

[root@localserver models]# docker ps | grep ollama257d3ct479ee ollama/ollama"/bin/ollama serve"40minutes ago Up40minutes0.0.0.0:11434->11434/tcp, :::11434->11434/tcp ollama

进入容器内,拉取模型

#进入容器内dockerexec-it ollama /bin/bash#拉取模型(若没有此模型则会自动拉取),并以打开与模型的交互模型ollama run tinyllama:latest#拉取模型(不会自动进入和模型的交互模型)ollama pull tinyllama:latest

如下演示:

注意:ollama run tinyllama:latest 只是打开了一个和模型的交互式模式,并不是说启动了模型。


只要ollama serve进程服务还在运行,ollama pull 下来的模型,都会在被调用时按需加载指定的大模型,并提供服务,并不是像传统服务那样后台一直到在启用监听的模式。所以这里的大模型 没有启动或停止一说。

ollama pull 或 ollama run 时当模型不存在时都会主动去指定的官方仓库里下载模型,所以最好使用没有代理的网络,不然会出现各种奇奇怪怪的问题。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/10 12:36:37

39_Spring AI 干货笔记之 Ollama 嵌入

一、Ollama 嵌入 使用 Ollama,您可以在本地运行各种 AI 模型 并从中生成嵌入。嵌入是一个浮点数向量(列表)。两个向量之间的距离衡量它们的相关性。距离小表示相关性高,距离大表示相关性低。 OllamaEmbeddingModel 实现利用了 O…

作者头像 李华
网站建设 2026/7/10 11:24:35

终极指南:解锁Quansheng对讲机隐藏功能的完整方案

终极指南:解锁Quansheng对讲机隐藏功能的完整方案 【免费下载链接】uv-k5-firmware-custom This is a fork of Egzumer https://github.com/egzumer/uv-k5-firmware-custom 项目地址: https://gitcode.com/gh_mirrors/uvk/uv-k5-firmware-custom 还在为对讲机…

作者头像 李华
网站建设 2026/7/10 11:24:48

AI大模型之Agent,RAG,LangChain(二)

这一期我来详细分析一下RAG的基础理论知识.RAG作为LLM重要的一种思想,在工作中的应用是相当广泛的.一.为什么使用RAG1.传统LLM在传统LLM中,有四个重要的缺陷有待解决.LLM的数据不是实时的.在这里我举个例子,比如说,不使用LLM工具,直接询问当下热点事件,大模型会回答你他不知道,…

作者头像 李华
网站建设 2026/7/10 11:26:29

CLI形态的智能编程

CLI形态的智能编程,是指把AI编程能力做成“命令行工具(Command-Line Interface)”,让开发者在终端里直接敲自然语言指令,就能完成写代码、改Bug、跑测试、部署等任务,而不必打开图形界面或IDE。它的核心特点…

作者头像 李华
网站建设 2026/7/10 11:26:56

说说Redis的单线程架构

回答框架建议 一句话概括核心:先给出精准的定义,纠正常见误解。详细阐述“单线程”的含义:具体是哪里单线程。深入分析为什么采用单线程还能如此高效:这是回答的精华部分。客观讨论单线程模型的优缺点:体现你的辩证思考…

作者头像 李华
网站建设 2026/7/10 10:09:21

MSF的基础使用

以两个windows主机层面的漏洞,简单演示一下msf框架的使用。 MS08-067 简介 影响范围:MS08-067漏洞会影响Windows 2000/XP/Server 2003/Vista/Server 2008的各个版本,甚至还包括测试阶段的Windows 7 Pro-Beta。 漏洞产生的原因及攻击效果&…

作者头像 李华