部署DeepSeek模型,进群交流最in玩法!
立即加群
发布
社区首页 >专栏 >本地大模型deepseek搭建——训练自己的ai助手(新手也能看懂的简易教学)

本地大模型deepseek搭建——训练自己的ai助手(新手也能看懂的简易教学)

作者头像
网e渗透安全部
发布2025-02-10 15:22:54
发布2025-02-10 15:22:54
23.9K20
代码可运行
举报
文章被收录于专栏:白安全组
运行总次数:0
代码可运行

最近也是一直没有学习,但是奈何deepseek实在是太霸屏了,不在本地训练一个玩玩,属实有点可惜,实测小白可轻易上手。文章稍微有点长,比较详细。

一、下载ollama

先从官网下载本地安装

https://ollama.com/

安装默认只能安装C盘,后面会写如何移动到其他盘中

二、下载大模型

模型下载我们可以直接基于ollama官网提供的内容进行下载

https://ollama.com/search

这里建议下载使用deepseek或者千问(Qwen)

下载的方式也很简单,首先打开cmd

输入ollama验证软件是否安装成功

之后我们输入命令ollama run 大模型名称即可

需要注意的是我们选择模型的大小,比如deepseek

代码语言:javascript
代码运行次数:0
复制
ollama run deepseek-r1:1.5b

需要在后面用冒号+模型大小,这个大小根据大家电脑容量来选择即可,越大模型越精确

安装好之后可以使用命令ollama list查看下载好的大模型

三、移动其他盘储存

因为该软件和模型都是默认安装C盘,无法更改,我们的C盘正常来说,也很难承受几十个g的模型,所以我们就需要进行一定的修改。

1、移动ollama本身

首先我们需要更改ollama软件的储存位置,默认安装位置是

C:\Users\XX\AppData\Local\Programs\Ollama

我们只需要把整个ollama文件夹剪切到其他的盘即可

移动之后我们需要到环境变量中修改一下参数

将你的ollama路径指定到你新的硬盘路径即可

打开cmd输入ollama正常出来即可。

2、移动模型

其实这里最关键的是大模型,这个我们可以用一个简单的方式来搞定。首先大模型的位置一般保存在

C:\Users\你的用户名\.ollama\models

这个目录下

我们移动就将.ollama整个剪切走,然后关键的一步就是软链接,也就是相当于建立了一个快捷方式留在原来的地方,但是实际本体被我们移动到了其他硬盘。

用cmd命令就可以简单实现。

mklink /J "C:\Users\你的用户名\.ollama" "D:\ollama\.ollama"

记住,要先删除原本的.ollama才可以创建软连接

最后通过ollama list查看大模型是否还在来检验移动后是否出错即可。

四、运行

运行我们需要指定好具体的模型名称和大小

ollama run deepseek-r1:14b

这样运行等待片刻即可

五、工具下载

首先我们需要部署好ollama,还有我们需要的大模型,这些在可以参考之前的文章。

然后我们需要部署两个东西,一个是使用ollama部署omic-embed-text嵌入式模型

这个使用ollama就可以

代码语言:javascript
代码运行次数:0
复制
ollama pull nomic-embed-text

其次我们需要下载AnythingLLM,直接在官网下载安装即可

https://anythingllm.com/desktop

六、使用

安装好AnythingLLM之后,我们打开

然后一直点箭头下一步,中间有一个个人信息询问可以跳过,直到我们看到创建工作区名称这一步,创建你自己的工作区名称

然后在设置中可以设置中文模式

软件设置

我们需要到设置中设置ollama和指定模型

这里llm提供商就是ollama,下面大模型,根据你本地下载了哪些大模型,他会自己读取到。

然后我们要设置一下上传文件训练大模型的首选项

这里引擎还是ollama,但是下面的模型就是用到我们一开始下载的用于训练的模型了。

设置工作区模型

然后我们返回主页面,找到我们创建的工作区

点击设置,然后选择好箭头所指,然后下拉到最下面保存。

投喂数据

首先点击工作区旁边的上传

然后我们可以上传常规的文件,貌似一个文件超过五十mb就会上传失败,这个不清楚是不是我自己的问题。

上传好之后我们需要选择上传的文件,才会出现移动到工作区的选项,不然文件就仅仅是上传到本地库中

然后点击move to这个

最后点击

即可保存训练ai

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2025-02-08,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 白安全组 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 最近也是一直没有学习,但是奈何deepseek实在是太霸屏了,不在本地训练一个玩玩,属实有点可惜,实测小白可轻易上手。文章稍微有点长,比较详细。
  • 一、下载ollama
  • 二、下载大模型
  • 三、移动其他盘储存
    • 1、移动ollama本身
    • 2、移动模型
  • 四、运行
  • 五、工具下载
  • 六、使用
    • 软件设置
    • 设置工作区模型
    • 投喂数据
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档