原文链接:https://mp.weixin.qq.com/s/1lG277EUayQ7bobV7LRyOA?mpshare=1&scene=1&srcid=0311H1srygHay2hojaCnKc19&sharer_shareinfo=82660934bb34b389526c1352749933a4&sharer_shareinfo_first=82660934bb34b389526c1352749933a4&version=4.1.33.99589&platform=mac#rd
大模型微调
Llama-Factory极简教程
无需编写代码也能微调百亿参数大模型?Llama-Factory通过可视化界面实现零门槛模型定制。本文手把手教你用5个步骤完成大模型专属训练,让AI精准适配你的业务场景。
为什么选择LLMF?
传统大模型微调需要编写训练脚本、调试超参数、管理分布式训练,技术门槛高且耗时费力。Llama-Factory通过封装底层技术细节,提供可视化Web界面和配置文件驱动模式,让普通人都能快速上手。
环境搭建五步到位
一、注册并实名腾讯云cs云空间
https://ide.cloud.tencent.com/
二、创建一个GPU模板
三、拉取Llama-Factory
git clone --depth 1 https://github.com/hiyouga/LLaMA-Factory.gitcd LLaMA-Factorypip install -e ".[torch,metrics]"
四、启动Llama-Factory可视化界面
llamafactory-cli webui
开始微调
六、下载数据集(GitHub、飞桨、魔搭社区均可)
https://github.com/KMnO4-zx/xlab-huanhuan/blob/master/data/huanhuan.jsonhttps://aistudio.baidu.com/datasetoverviewhttps://www.modelscope.cn/datasets
七、导入并配置数据集
/LLaMA-Factory/data
八、训练大模型(改语言+设置预训练模型+添加数据集)
九、实时查看训练情况
OR
十、与模型进行对话
本文系转载,前往查看
如有侵权,请联系 cloudcommunity@tencent.com 删除。
本文系转载,前往查看
如有侵权,请联系 cloudcommunity@tencent.com 删除。