我想要实现的是用以下元素[0, 0]填充序列。 如果这个问题看起来令人困惑，请让我知道，这样我就可以包含更多的信息，或者以更清晰的方式表达自己。
浏览 15提问于2019-01-09得票数 2
回答已采纳
在TensorFlow的新输入管道函数集中，可以使用"group_by_window“函数将记录集分组在一起。
浏览 13提问于2017-07-25得票数 13
回答已采纳
2回答
https://huggingface.co/docs/transformers/pad_截断
在下面的例子中，我们有5个不同长度的句子，它们都被填充到最大长度设置为1024。我问题的第一部分是关于GPU内存的使用和pad，当我们训练带有填充输入的批数据的模型时，填充的令牌会占用GPU RAM吗？即使模型不计算它们，因为它们将返回零，这仍然是相当浪费的。还是PyTorch / Tensorflow或其他低级张量库重新优化批处理，使pads不占用内
浏览 0提问于2023-04-07得票数 2
我试图解决的问题是一个具有4个并行输入批次的序列的分类问题。为此，我需要4个RNN/LSTM并行合并到一个完全连接的层中。问题是，在每个并行批处理中，序列的长度是可变的。我不能使用填充到最大序列长度，因为它使用了太多的RAM。实际上，有些序列真的很长。我不能使用减少长度的填充，因为模型不能预测输出。我需要完整的序列，我不能提前知道序列中有趣的部分在哪里。我不能使用
浏览 2提问于2016-11-15得票数 1
1回答
零填充物没有正确地执行我想
、、、、
我似乎在使用提供的实现时遇到了一些问题。我的情况有点类似的家伙张贴，在其中，我试图映射和输入到一个输出。输入是音频文件的样本，输出是长度为14的特征向量(长度是静态的)。序列长度是可变的，因为音频文件的长度不同，使得包含样本的向量也变得不同长度。import tensorflow as tffrom tensorflow.models.r
浏览 7提问于2016-10-24得票数 0
回答已采纳
2回答
现在我看到了许多解决方案：
当使用像K-NN这样的模型时，距离可以手动计算，从而避开科学工具包的“序列还是数组？”所有的支票。
浏览 7提问于2020-07-14得票数 0
我想在tensorflow中训练一个双向LSTM来执行序列分类问题(情感分类)。如何使用双向LSTM来管理这个问题？"sequence_length“参数是否自动从后向序列中的高级位置开始工作？
谢谢
浏览 4提问于2017-03-21得票数 7
2回答
我有一个DataFrame，我正在尝试partitionBy一个列，按该列对其排序，并使用以下命令将其保存为parquet格式： .partitionByreason: User class threw exception: org.apache.spark.sql.AnalysisException: 'save' does not support bucketingright now;
不允许使用save(...)吗？
浏览 2提问于2018-10-14得票数 5
1回答
这是一个关于在深度学习中使用不同长度的时间序列的概念性问题：xxxx(T=2)xxxx(T=4)xxxx(T=5)xxxx(T=3)然后用零填充结束我的问题是，是否可以假定神经网络能够独立地区分这个时间序列
浏览 3提问于2017-03-24得票数 3
回答已采纳
在处理小批中不同长度的序列时，我们使用pad序列，使批处理中的所有序列都具有相同的长度。
假设数据集中的大多数序列都是<500个元素长，但是有一些非常长的序列可以是1000s的元素长。如果我想在不截断的情况下处理那些非常长的序列，那么即使输入批次不包含任何长序列，多头自我关注层的大小也必须根据最长的序列量身定做吗？
浏览 0提问于2022-09-08得票数 0
回答已采纳
1回答
如何做品牌和月份的功能交叉
、、、、
根据我在网上看到的，只有Tensorflow使用bucketing/binning是唯一的选择，但是有没有更简单的方法来做到这一点(比如使用pandas，因为我们正在处理数据帧)？
浏览 9提问于2021-11-30得票数 0
1回答
我正在尝试使用LSTM cell和Tensorflow创建一个文本生成神经网络。我正在用时间为主的格式time_steps，batch_size，input_size来训练网络上的句子，我希望每个时间步都能预测序列中的下一个单词。序列被填充空值直到时间步长，并且单独的占位符包含批次中每个序列的长度。
关于时间反向传播的概念有很多信息，但是我找不到任何关于tensorflow中用于可变长度序列成本计算的实际实现的信息。由于序列的末尾是<
浏览 19提问于2017-12-31得票数 1
回答已采纳
对于训练，RNN教程文本被划分为相同长度的字符序列：text = open(path_to_file, 'rb').read()只要我不能在不同长度的序列上训练RNN (如果我错了，请告诉我)，我需要把我所有的名字都用空格填充到一个最长的名字，也就是26。我最长的名字是lisboasaurusliubangosaurus，因此，例如，aardonyx应该被填充为：
"lisboasaurusliubangosaurus&
浏览 0提问于2020-05-26得票数 0
回答已采纳
我想在tensorflow中创建一个LSTM来预测时间序列数据。我的训练数据是一组不同长度的输入/输出序列。我可以在同一批训练中包含多个不同长度的序列吗？或者我需要将它们填充成相同的长度？另外:如果展开的RNN比输入序列长，tensorflow会做什么？rnn()方法包含一个可选的sequence_length参数，该参数似乎旨在处理这种情况，但我不清楚它是做什么的。
浏览 2提问于2016-05-11得票数 1
我正在尝试使用Tensorflow来实现聊天机器人及其seq2seq的实现。在阅读了不同的教程(、、)和原始论文之后，我无法解释为什么Tensorflow seq2seq实现会将所有序列(输入和输出)都存储到相同的固定长度中。示例：x = [[5, 7, 8], [6, 3], [3], [1]]
RNN需要一个不同的布局。序列短于最长的序列在结尾处填充零。这个布局称为time-major。
浏览 2提问于2018-01-19得票数 1
我想在填充序列上执行反向LSTM，这需要在没有填充的情况下颠倒输入序列。对于这样的批处理(其中_代表填充)： a b c _ _ _h i j k l m 如果想要获得： c b a _ _ _m l k j i h TensorFlow有一个函数tf.reverse_sequence，它接受批处理中序列的输入张量和长度，并返回相反的批处理。
浏览 31提问于2019-04-29得票数 2
回答已采纳
2回答
我希望设计一个LSTM模型使用Tensorflow，其中的句子是不同的长度。我遇到了一个关于PTB数据集()的教程。这个模型如何捕捉不同长度的实例？该示例没有讨论任何有关填充或其他处理可变大小序列的技术。
如果我使用填充，展开尺寸应该是什么？
浏览 3提问于2016-07-18得票数 1
回答已采纳
我正尝试在一个AWS实例'g2.2xlarge‘上训练我的模型，但在尝试向我的序列添加填充时得到了一个'MemoryError’。"trainer.py", line 52, in train File "/usr/local/lib/python2.7/dist-packages/tensorflow
浏览 4提问于2018-08-10得票数 0
我想使用tensorflow将序列数据训练到具有一些零填充的Rnn基本模型。我需要设置参数才能做到这一点吗？或者模型会自动忽略零吗？
谢谢，
浏览 2提问于2021-05-20得票数 0
1回答
我正在尝试在tensorflow上实现drqa模型，在那里我将预测answer子串的开始和结束位置。所以有概率的batch_size，max_time输出，相应的上下文序列。现在我想应用softmax交叉enthropy损失，但是序列是零填充的。所以我不希望填充被计入损失。有没有一些关于如何实现这一点的建议？谢谢。
浏览 12提问于2018-05-16得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
