tokenize - 标签 - 腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

首页标签tokenize

#tokenize

9.9 和 9.11 哪个大?内在原因是tokenizer的问题

算法一只狗

腾讯 · 后台策略工程师 (已认证)

4天前2024-07-18 20:51:05

再看看Claude 3.5 Sonnet，给出了自己的推理，但是一看答案又开始犯困了，直接认为9.11更大。

38610

Llama2.c 学习笔记5： custom tokenizer

cerence · 研究员 (已认证)

2023-08-182023-08-18 16:29:08

Follow新兴热门Github repo最让人兴奋的是：看着它从幼稚朝着成熟（神奇）发展，这个发展很快肉眼可见，神奇如昙花开放，但又在你理解范围之内（当前的知...

5.5K41

热门专栏

热门标签