腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
使用
Tensorflow
中
的
Hugging
Transformers
库
对
自定义
数据
进行
文本
分类
?
python
、
tensorflow
、
text-classification
、
huggingface-transformers
我正在尝试
使用
Hugging
'
Transformers
‘
库
提供
的
不同transformer架构
对
自定义
数据
( csv格式)
进行
二进制
文本
分类
。我正在
使用
这个
Tensorflow
blog post作为参考。我
使用
以下代码将
自定义
数据
集加载为'tf.data.Dataset‘格式: def
浏览 12
提问于2020-01-30
得票数 12
2
回答
如何
将标记器输出转换为Huggingface
Transformers
中
Trainer所需
的
train_dataset?
python
、
huggingface-transformers
我尝试
使用
huggingface
transformers
的
文档
进行
标记化。from
transformers
import AutoTokenizerencoded_input= tokenizer(batch_of_sequences) 预训练
的
标记器给出了包含以下三个关键字
的
字典输出: encoded_input = {
浏览 107
提问于2020-08-21
得票数 3
1
回答
AttributeError:“”
tensorflow
.python.framework.ops.EagerTensor“”对象没有属性“”to_tensor“”
python
、
tensorflow
、
google-colaboratory
、
huggingface-transformers
、
huggingface-tokenizers
我正在
使用
Hugging
,Keras,
Tensorflow
库
对
BERT模型
进行
微调。 从昨天开始,我在Google Colab
中
运行我
的
代码时遇到了这个错误。奇怪
的
是,代码过去运行时没有任何问题,然后突然开始抛出这个错误。更可疑
的
是,代码在我
的
苹果M1
tensorflow
配置
中
运行时没有任何问题。再说一次,我没有
对
我
的
代码做任
浏览 50
提问于2021-10-14
得票数 1
3
回答
使用
自定义
X和Y
数据
训练TFBertForSequenceClassification
nlp
、
pytorch
、
tensorflow2.0
、
huggingface-transformers
、
bert-language-model
我正在研究一个TextClassification问题,我试图在huggingface-
transformers
库
中
给出
的
TFBertForSequenceClassification上训练我
的
模型。我遵循了他们
的
页面上给出
的
示例,我能够
使用
tensorflow
_datasets.load('glue/mrpc')
对
给定
的
示例
数据
运行示例代码。但是,我
浏览 6
提问于2020-02-29
得票数 9
2
回答
实现Python代码,其中
使用
Tensorflow
库
到HTML?
javascript
、
python
、
html
、
tensorflow
、
keras
这里是机器学习
的
初学者。我一直在关注
tensorflow
文本
分类
教程。我有代码,它
使用
一个训练有素
的
keras模型来
分类
电影评论基于用户输入
的
文本
。我
的
主要问题是:
如何
将这些代码集成到html
中
,以便创建一个可以接收用户
文本
并
使用
python代码
对
其
进行
分类
的
网站? 我不熟悉
浏览 33
提问于2019-10-03
得票数 2
回答已采纳
1
回答
如何
混合
tensorflow
keras模型和转换器
python
、
tensorflow
、
keras
、
nlp
、
huggingface-transformers
我正在尝试从Huggingface
的
transformers
库
中导入一个预训练
的
模型,并
使用
tensorflow
keras
对
其
进行
几层扩展以
进行
分类
。当我直接
使用
transformers
模型(方法1)时,该模型训练良好,在1个时期后达到0.93
的
验证精度。但是,当尝试将该模型用作tf.keras模型
中
的
层时(方法2),该模型无
浏览 29
提问于2020-12-05
得票数 2
2
回答
计算机视觉变压器: ViT没有解码器吗?
computer-vision
、
transformer
、
attention-mechanism
v=TrdevFK_am4
的
一篇题为“图像值16X16字:用于图像识别的变形金刚”
的
论文那么ViT有一个更简单
的
体系结构?似乎编码器
的
输出是MLP
的
输入,用于
分类
任务。 此外,为了学习
的
目的,我也被推荐到这个回购https://githu
浏览 0
提问于2023-05-06
得票数 0
回答已采纳
2
回答
如何
获得一般类别的
文本
使用
NLP喜欢快速
文本
?
nlp
、
wikipedia
、
fasttext
、
categorization
、
google-natural-language
我正在做一个应用程序,我想从
使用
自然语言处理
的
文本
中
推断出一般
的
类别。我是自然语言处理(NLP)
的
新手。
使用
了一组合理
的
高级内容类别,如"/Arts & Entertainment“、"/Hobbies &休闲”等: 我希望
使用
开放源码来实现这一点,并希望
使用
一些一般类别,如Wikipedia高级
分类
:快速
文本
似乎是一个不错
浏览 4
提问于2020-11-03
得票数 1
回答已采纳
1
回答
我们
如何
提取有关主题
的
部分
文本
?
python-3.x
、
nlp
、
stanford-nlp
、
spacy
、
topic-modeling
我想做一个主题建模,但在我
的
例子
中
:一篇文章可能包含许多主题:我有一篇包含多个主题
的
文章(word文件),每个主题都与一个公司相关联(参见下面的示例)。我有一个
文本
作为输入: Google : ['Google is a search en
浏览 0
提问于2020-10-08
得票数 0
1
回答
BERT域自适应
python
、
nlp
、
pytorch
、
huggingface-transformers
、
bert-language-model
我正在
使用
transformers
.BertForMaskedLM
对
我
的
自定义
数据
集上
的
伯特模型
进行
进一步
的
预训练.首先,通过用空格分隔单词,将所有
文本
序列化为.txt文件。然后,我
使用
BertForMaskedLM.from_pretrained()加载经过预先训练
的
模型(这是
transformers
库
提供
的
)。然后,我<em
浏览 4
提问于2021-12-02
得票数 1
回答已采纳
1
回答
对
自定义
数据
集
进行
多类
分类
的
微调huggingface DistilBERT在预测时产生奇怪
的
输出形状
tensorflow2.0
、
predict
、
huggingface-transformers
、
distilbert
根据
的
教程,我正在尝试
对
huggingface
的
distilbert实现
进行
微调,以便在
自定义
数据
集上
进行
多类
分类
(100类)。为此,我
使用
Tensorflow
,并在原生
tensorflow
中
进行
微调,也就是说,我
使用
教程
的
以下部分来创建
数据
集:train_da
浏览 1
提问于2020-10-23
得票数 0
2
回答
用于特定句子抽取
的
模型/技术是什么?
python
、
tensorflow
、
nlp
、
pytorch
、
huggingface-transformers
我有一个数以万计
的
客户和客户支持之间
的
对话/对话
数据
集。这些对话,可以是论坛帖子,也可以是冗长
的
电子邮件对话,已经被手工注释,突出了包含客户问题
的
句子。
数据
集
的
领域是广泛
的
,但在硬件空间,所以它可以是电器,小工具,机械等。 这类问题叫什么?我认为这可能被称为“意图识别”,但大多数指南似乎都提到了多类
分类
。这句话要么是顾客
的
问题,要么不是顾客
的
问题。我考虑过分析每个句子并执行二进制<em
浏览 12
提问于2022-02-04
得票数 3
回答已采纳
1
回答
将保存
的
NER重新加载到HuggingFace管道?
nlp
、
named-entity-recognition
、
huggingface-transformers
、
huggingface-tokenizers
我正在研究HuggingFace
的
迁移学习功能(特别是命名实体识别)。首先,我
对
变压器架构有点陌生。我简要介绍了他们网站上
的
例子: sequence = "
Hugging
Face Inc在他们
的
文档
中
,我看到可以
使用
"pipeline.save_pretrained()“函数将管道保存到本地文件夹
浏览 0
提问于2020-09-28
得票数 3
回答已采纳
2
回答
如何
获取单词/短语
的
语义
python
、
nlp
大家好,我需要一件事上
的
帮助,目前我正在做一个项目,我必须找到一个单词/phrase
的
语义含义。例如,嗨,你好,早上好应该回问候等…有什么建议吗?提前感谢
浏览 0
提问于2020-10-08
得票数 0
1
回答
用RNN
对
变长
文本
进行
分类
python
、
machine-learning
、
tensorflow
、
deep-learning
在最近
的
tensorflow
中
,
使用
tf.contrib.layers.embed_sequence()
对
固定长度
的
文本
进行
分类
.谢谢!
浏览 1
提问于2016-11-29
得票数 0
回答已采纳
1
回答
如何
在给定.pb文件
的
情况下评估
TensorFlow
模型?
tensorflow
我已经
使用
以下命令下载了
Tensorflow
的
Inception_v3模型: curl http://download.
tensorflow
.org/models/image/imagenet/inception我
的
问题是,
如何
根据ImageNet 2012
数据
评估此模型?有没有什么脚本,或者我需要写一些python代码?
浏览 0
提问于2016-07-21
得票数 1
1
回答
基于机器学习
的
恶意网页检测
security
、
web
、
deep-learning
、
malware-detection
虽然这看起来足够好了,但我找不到源代码
的
链接。
如何
获取研究论文
的
源代码? 有没有其他这样有前途
的
论文和源代码可以供我
使用
?
浏览 14
提问于2018-06-24
得票数 0
3
回答
文本
分类
的
Tensorflow
模型
python
、
python-3.x
、
tensorflow
、
text-classification
、
tensorflow-lite
我正在用OCR和
Tensorflow
构建一个Android应用程序。它扫描超市
的
价格标签,并将扫描后
的
数据
放到不同
的
领域。我已经完成了OCR部分,因此图像->
文本
识别工作正常,而
Tensorflow
只需要处理
文本
输入。 总的来说,我
对
Tensorflow
和机器学习很陌生。是否可以
使用
Tensorflow
完成以下工作?如果可以,您能分享一些关于
如何
这样做<em
浏览 1
提问于2018-06-20
得票数 3
回答已采纳
2
回答
检测到错误
的
模型:模型需要
的
内存超过了允许
的
内存
google-cloud-platform
、
gcloud
、
google-cloud-ml
两天前,我上传了多个ML模型(
使用
自定义
预测例程),没有任何问题。 昨天晚上,我开始收到预测响应错误:“预测服务器内存不足,可能是因为模型太大了。”我今天尝试上传完全相同
的
模型和
自定义
预测例程,现在收到错误消息“创建版本失败。检测到错误
的
错误模型:模型需要超过允许
的
内存。请尝试减小模型大小并重新部署。如果您仍然有错误,请联系Cloud ML。”是不是有什么我没注意到
的
变化?
浏览 31
提问于2019-10-13
得票数 0
1
回答
在TF中
进行
额外
的
预培训
python
、
tensorflow
、
keras
、
deep-learning
、
huggingface-transformers
我目前正在开发一个涉及序列多标签
分类
的
项目。由于我
使用
的
是一个高度技术性
的
数据
集,我认为在为
分类
部分
进行
微调之前
对
伯特
进行
额外
的
预培训将是有益
的
。但我找不到任何指南来
使用
Huiggingface和Keras一起
对
模型
进行
预培训。我
的
想法是在我
的
数据
集上预先训练模型,然后保存它
浏览 5
提问于2021-11-14
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何将transformer算法嵌入到产品研发里,比如说怎么在聊天框里预测客户对购买的产品评价度高或者带有情绪?
如何基于 TensorFlow 2.0 用十行代码实现性能最佳的 NLP 模型?
5个流行的自然语言处理库及入门用法
OpenAI 和谷歌最怕的,是一张「开源笑脸」
OpenAI 和谷歌最怕的,是一张「开源笑脸」
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券