前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >ChatGPT 太贵?一键部署自己的私有大模型

ChatGPT 太贵?一键部署自己的私有大模型

作者头像
Lenis
发布2023-09-18 08:23:11
5530
发布2023-09-18 08:23:11
举报
文章被收录于专栏:有关SQL有关SQL

部署你的私有化对话机器人,只需要三步:

  • 克隆 github 中文版 LLaMa repo
  • 下载 HuggingFace 13B 16K 完整模型
  • 启动对话窗口

没错,就是这么简单

我把这份操作指南,做成了一份 Jupyter Notebook 分享给大家,以下是链接:

https://colab.research.google.com/drive/1AQkWnz_dpcnOTHjcZOQBbWZNFak1-N1k?usp=sharing

这份笔记,支持中文 LLaMa 2 ,采用 13B-16K 的大模型,上下文可以达到 16K Token

它可以做哪些事情呢?

第一,声讨日本:

第二,擅长写校园爱情小说

你可以把它当 ChatGPT 的平替,大家发挥脑洞吧

好久不写文了,但其实我一直在写。

每当大趋势来的时候,大家总是很热地在讨论一件事情。但我已经倾向于先弄脏自己的手,即下场干活

当下生成式 AI 大热,写代码在我看来是比写文章,要好玩的多。比如:

我写了个编程小程序,用 ChatGPT 来辅助我学习 SQL 数据库知识:

8 年 SQL 人,撑不过前 6 题 <-- 戳我直达

我写了个视频转录工具,专门收拾那些没有字幕的油管视频

【免费】油管无字幕视频如何转录成文本 <-- 戳我直达

之前,大家也看到”樱木“的表现了,现在它依然在飞书发挥着余热。

接入飞书的 ChatGPT 对话机器人,SAM 来了

但这些,都建立在 ChatGPT/Claude.ai 的基础上,他们都是闭源的系统。对于我们想要进一步挖掘信息,完成智能问答等,都还有一定的难度与成本。

LLaMa 2 出来以后,事情发生了极大的变化。再一次让大众看到了开源的力量。让我们一起 “脏手” 吧

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2023-09-09 16:48,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 有关SQL 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
对话机器人
对话机器人(Conversation Robot,ICR),是基于人工智能技术,面向企业场景的 AI 服务,可应用于智能客服、服务咨询、业务办理等场景。本产品旨在帮助企业快速构建,满足自身业务诉求的对话机器人,从而减少企业人力成本或解决服务不及时问题。用户可通过对话机器人用户端引擎,实现高准确率的对话服务。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档