
如果你不是程序员,不懂代码,不想配置复杂的环境,但想在自己的电脑上免费、私密地运行像 ChatGPT 一样的大模型,那么这篇教程就是为你准备的。
我们将使用 Ollama,它就像是一个“AI 应用商店” + “播放器”,让你能一键下载并运行各种聪明的 AI 模型。
Ollama 支持 Windows、Mac 和 Linux。以下是傻瓜式安装步骤:
.zip 文件解压,把 Ollama 图标拖入“应用程序”文件夹。打开终端,复制粘贴以下一行命令并回车(需要输入密码):
curl -fsSL https://ollama.com/install.sh | sh
安装好后,我们不需要打开复杂的软件,只需要用系统自带的“终端”(Windows 叫 CMD 或 PowerShell,Mac 叫 终端/Terminal)来操作。
Win 键,搜索 cmd 或 PowerShell,点击打开。Command + 空格,搜索 终端,点击打开。在黑色的窗口中,输入以下命令并回车(以目前最流行的全能模型 Qwen2.5 为例,这是阿里巴巴开发的优秀模型,中文能力极强):
ollama run qwen2.5
发生了什么?
>>> 提示符。直接在 >>> 后面输入你想问的问题,例如:
“请帮我写一份周末去杭州旅行的攻略,包含美食推荐。” “如何用简单的语言向孩子解释什么是重力?” “帮我把这段话润色得更专业一点:[粘贴你的文字]”
按回车,AI 就会立刻生成回答。

Ollama 的魅力在于它可以运行各种专长的模型。你不需要卸载旧的,随时可以切换。
在终端里输入 Ctrl + C 退出当前对话,然后尝试以下命令:
你想做什么? | 推荐模型 | 运行命令 | 特点 |
|---|---|---|---|
日常聊天/写文章 | Qwen2.5 (通义千问) | ollama run qwen2.5 | 中文理解极好,逻辑清晰,全能型选手。 |
快速问答/老电脑 | Llama3.2 | ollama run llama3.2 | 速度极快,对电脑配置要求低,适合简单任务。 |
写代码/编程助手 | DeepSeek-Coder | ollama run deepseek-coder | 专门针对代码优化,能写 Python, JS 等多种语言。 |
角色扮演/创意写作 | Mistral | ollama run mistral | 风格比较活泼,适合创意类任务。 |
注:输入命令后,如果本地没有该模型,它会自动下载。
你不需要记复杂的代码,只要记住这几个“魔法指令”:
想知道电脑里存了哪些 AI,输入:
ollama list
它会列出名字、大小和修改时间。
如果某个模型占地方太大又不常用,可以删掉它。 格式:ollama rm 模型名字例如删除 Mistral:
ollama rm mistral
你可以直接告诉它:“从现在开始,你是一位严厉的英语老师,请纠正我的语法错误。” 或者,如果你想让它一直记住这个设定,可以在运行模型时加参数(稍微进阶一点点):
ollama run qwen2.5 "你是一位专业的心理咨询师,请用温暖、共情的语气回答我的问题。"
(注:不同版本的 Ollama 对直接传参的支持略有不同,如果不行,直接在对话开始后第一句话告诉它即可)
在任何时候,按下键盘上的 Ctrl + C (Mac 是 Control + C) 就可以退出当前的 AI 对话,回到普通命令行状态。
Q: 我的电脑配置不高,能运行吗?A: Ollama 非常智能,它会自动检测你的硬件。
qwen2.5:0.5b 或 llama3.2:1b),虽然反应稍慢,但依然能用。:1b 或 :0.5b 通常代表更小的版本,例如 ollama run qwen2.5:0.5b。Q: 它联网吗?我知道现在的新闻吗?A: 默认情况下,Ollama 运行的模型是“离线”的,它的知识截止于训练结束的时间(通常是几个月前),它无法实时获取今天的新闻或股票价格。
Q: 怎么让它帮我读 PDF 或长文档?A: 目前的命令行模式主要处理文字输入。最简单的办法是:打开你的 PDF,复制里面的文字,粘贴到对话框里,然后说“请总结以上内容”。对于几十万字以内的文本,现在的模型都能处理得很好。
现在,你已经拥有了一个运行在自己电脑上的、私密的、免费的超级大脑。
不需要成为开发者,只要打开终端,输入 ollama run,AI 世界就为你敞开了大门。快去试试吧!