腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用
带有
函数
(
tensorflow
或
numpy
)
的
tf.data.Dataset.from_generator
()
作为
生成
源
(
而
不是
文件
)
、
、
该脚本试图
使用
一个
函数
(在本例中为np.sin())
作为
生成
器,最终被设计成用于训练
的
模型(因此称为tf.Session())。不幸
的
是,我一直收到这样
的
错误: "ValueError:generator
生成
了shape ()元素,
而
shape (1,)元素应为shape。“ 我过去曾
使用
生成
器从.hdf5
文件
中提取数据,但这里我要做
的
是从callabl
浏览 16
提问于2019-05-22
得票数 2
回答已采纳
1
回答
使用
tf.data.Dataset.map
的
正确方法是什么?
、
、
我有音频
文件
,我想从它们
的
音频内容
生成
一个tf.DataSet (即,数据集中
的
每个音频
文件
都应该表示为浮点值
的
向量) 这是我
的
代码 def convert_audio_file_to_
numpy
_arraytf.data.Dataset.from_tensor_slices(input_filepaths) waveforms_ds = filenames_ds.map(convert_audio_file_to_
numpy
_arr
浏览 118
提问于2021-02-12
得票数 0
回答已采纳
3
回答
如何使发电机可调用?
我正在尝试从CSV
文件
中创建一个包含784位长行
的
数据集。这是我
的
密码:csvreader = csv.reader(f) ~/Documents/Programming/ANN/labs/lib/pyt
浏览 1
提问于2018-03-14
得票数 15
回答已采纳
1
回答
TensorFlow
数据集如何处理无法装入服务器内存
的
大型数据?
问题Spark可以处理具有多个节点
的
大型数据。对于中
的
问题,答案是
使用
Tensorflow
变换,它
使用
Apache,它需要分布式计算集群(如Spark )。如果我们有较大
的
数据集,比如一个50 do
的
CSV
文件
,那么如何计算平均值
或
其他类似的统计数据。因此,我认为
TensorFlow
需要一个多节点集群,但不清楚<e
浏览 3
提问于2020-08-09
得票数 1
2
回答
从两个TFRecords中获取所有记录组合
、
、
因此,在训练
或
测试期间,我希望只有当所有组合都已耗尽时,周期信号才会结束,之后该过程应恢复到下一个周期。 当然,在执行此操作时,我希望指定一个batchsize。我已经浏览了tf.data.Dataset
的
文档,但没有找到这样
的
功能。 当然,如果我要写一个python
生成
器,这是可以实现
的
。但不幸
的
是,这是没有用
的
,因为根据文档,python
生成
器将受GIL即global interpreter lock
的
约束。因此,假设, A包含{
浏览 27
提问于2019-10-07
得票数 1
1
回答
在
numpy
而
不是
tensorflow
中计算keras度量
、
、
、
、
我正在尝试用
NumPy
而
不是
TensorFlow
来计算Keras指标。 因为您通常不需要通过纯指标的梯度流,所以在
NumPy
中计算指标就可以了。在那里,我将y_true和y_pred
作为
带有
shape (None, 64, 64, 64, 6)
的
tensorflow
.python.framework.ops.Tensor类型 不幸
的
是,我不能将张量转换为我尝试
使用
y_true.eval(),y_tr
浏览 5
提问于2021-07-08
得票数 0
2
回答
提供给`
tf.data.Dataset.from_generator
(.)`
的
映射
函数
能解析张量对象吗?
、
、
我想将以前数据集
的
一个属性传递给
生成
器,如下所示: map_func=lambda x:
tf.data.Dataset.from_generator
,比如gen知道如何访问
的
文件
名)。这是因为gen接收
的
是张量对象,
而
不是
python/
numpy
值。 有办法将张量对象解析为gen(...)中
的
值吗?交织
生成
器
的</
浏览 2
提问于2018-01-19
得票数 1
回答已采纳
1
回答
在tf.keras.applications.resnet50.preprocess_input中
使用
tf.data.Dataset.map时出错
、
、
我对来自
tensorflow
.compat.v1.keras.applications.resnet50
的
函数
tensorflow
.compat.v1.keras.applications.resnet50:0”,shape=(),dtype=variant) 如果我
使用
另一个preprocess_input,如mobilenet,
而
不更改其他任何内容,那么就没有问题了。通过挖掘代码,我发现这些
函数
都在调用,但是移动网
使用
&
浏览 8
提问于2020-04-08
得票数 0
2
回答
使用
InvalidArgumentError时
tensorflow
.data.Dataset.from_generator
、
我试图在单个GPU上
生成
自己
的
图像数据集,
使用
Tensorflow
dataset API来度量推理性能 (2048, 1080) generator=input_generator_fn, output_types=(tf.float32/lib/python3.5/site-packag
浏览 0
提问于2018-04-06
得票数 3
1
回答
如何在
Tensorflow
中实现存储在磁盘上
的
numpy
数组
的
多线程导入
、
、
我
的
数据集
的
输入和标签分别存储在10000个.npy
文件
中。虽然每个
文件
可以独立地存储在内存中,但20k数组
的
整个数据集不能存储在内存中。我希望实现多线程CPU管道,将数据集
作为
批处理(比如batch_size=8 )导入。我试图实现新
的
Tensorflow
数据API中提到
的
函数
,但没有找到任何用于我
的
需求
的
示例。所有示例似乎都适用于可以将整个数据集加载到RAM中
的</em
浏览 0
提问于2018-05-07
得票数 1
回答已采纳
1
回答
带有
生成
器
的
tf.data api
的
多个输入
、
、
、
、
当我尝试为LSTM提供多个输入时,我有点挣扎于tf.data.dataset API,也就是说,对于每个特性,都有一个长度为n
的
向量( time中
的
步骤),并且,让我们一天一天地
使用
5个特性。例如,我有一个
生成
器,它在每一步都
生成
具有以下结构
的
数据: array( [5.00000000e-01, 5.00000000e-[ [13, 13, 13]
浏览 3
提问于2020-02-13
得票数 0
回答已采纳
1
回答
我不能创建一个
使用
pandas Dataframe
作为
参数
的
生成
器
的
Dataset.from_generator()
、
、
、
我想从一个
生成
器创建一个dataframe管道,该
生成
器
使用
pandas数据帧在磁盘上查找图像路径并将它们加载到管道中。在将
生成
器传递给
tf.data.Dataset.from_generator
时,我尝试在args参数中
使用
.values,但我必须重写我
使用
数据帧编写
的
所有代码,以找到指向正确图像
的
路径。下面是
生成
数据集
的
命令: train_dataset =
tf.data.Datase
浏览 33
提问于2019-06-14
得票数 2
2
回答
将大型数据加载到
TensorFlow
2.0中,
而
不将其加载到内存中
、
、
、
我已经处理并保存了一个大型
的
视频和音频
文件
数据集(大约8到9GB
的
数据),数据被保存为2个
numpy
数组,每个
文件
的
模态形状都有一个(number_of_examples、maximum_time_length我想
使用
这些数据训练我
的
神经网络进行分类任务,我
使用
的
是
TensorFlow
2.0 Beta版本,我在Google上运行所有代码(在安装TF-2.0beta之后),每次我在tf.data中加
浏览 1
提问于2019-06-13
得票数 5
1
回答
如何将Python数据
生成
器转换为
Tensorflow
张量?
、
、
、
、
我有一个数据
生成
器,我可以从中
生成
训练图像。我想
使用
这个Python数据
生成
器将数据提供给
Tensorflow
模型,但我不知道如何将
生成
器转换为
Tensorflow
张量。我正在寻找类似于Keras
的
fit_generator()
函数
的
东西。 谢谢!
浏览 13
提问于2017-12-23
得票数 4
回答已采纳
1
回答
印刷张量时
的
"args_0:0“
、
、
、
、
我有一个正在映射到
生成
器中
的
增强
函数
;但是,由于某种原因,tfa.image.rotate
函数
导致了一个错误。X_train_paths, dims, "png"]) 我查看了其他人
使用
过
的
'> 当我在image
函数
中打印augment时,我希望它是打印
的
。augment<
浏览 1
提问于2020-08-29
得票数 3
回答已采纳
1
回答
TensorFlow
适合
使用
具有多个输出
的
生成
器中
的
数据集:无法正确定义形状?
、
、
、
我试图
使用
生成
器将一个项目转换为具有多个输出
的
单个网络,但当
使用
生成
器时,我似乎无法想出如何使多个输出正常工作。下面是一堆可验证
的
最小代码:import
tensorflow
as tffrom
tensorflow
.kerasnp.array(x).astype(np.float32),[np.array(y).as
浏览 1
提问于2021-02-01
得票数 3
回答已采纳
1
回答
未能将
NumPy
数组转换为张量(不支持对象类型int)。在实现广域深网
的
同时
、
、
、
我想用keras实现宽深度
的
神经网络,我
使用
的
是keras官方代码实现,但我想将
numpy
数组
作为
数据集来传递,
而
不是
csv
文件
。TARGET_FEATURE_NAME, header=True,)用于代码实现
的
以下链接: 上面的
函数
用于
使用
tensorfl
浏览 1
提问于2022-02-10
得票数 -2
1
回答
在
Tensorflow
张量上调用参数
的
特殊
函数
?
、
、
、
当以
Tensorflow
张量为参数调用any /
numpy
特殊
函数
时,是否存在性能成本?
而
不是
使用
tensorflow
.math提供
的
函数
我之所以问这个问题,是因为有些特殊
的
功能可以在not上
使用
,而在
Tensorflow
(例如scipy.special.erfcx)上则没有。我认为
Tensorflow
提供了
tensorflow
.m
浏览 7
提问于2020-01-06
得票数 1
1
回答
如何为
tensorflow
和Py手电筒编写跨框架机器学习代码?
、
除其他外,机器学习框架包括以下功能: 这些
函数
是张量
的
简单转换,似乎是框架独立
的
。但是,例如,
使用
一些特定于
tensorflow
的
函数
,如tf.convert_to_tensor()
或
tf.cast()。因此,它不能很容易地
使用
在火把。另外,
tensorflow
非常喜欢
使用
tensorflow
张量,
而
不是
<e
浏览 4
提问于2022-04-01
得票数 1
1
回答
如何
使用
生成
器训练
TensorFlow
网络以产生输入?
、
TensorFlow
描述了一系列
使用
TFRecordReader、TextLineReader、QueueRunner等和队列读取数据方法。我想要做
的
事情要简单得多:我有一个python
生成
器
函数
,它
生成
一个无限序列
的
训练数据
作为
(X,y)元组(两者都是
numpy
数组,第一维是批量大小)。我只想用这些数据
作为
输入来训练一个网络。有没有
使用
生成
数据
的
生成<
浏览 2
提问于2016-09-05
得票数 25
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
小菜与老鸟之机器学习07
TensorFlow线性回归与逻辑回归实战
TensorFlow 的简单例子 Linux 中国
Python学习一
Python 太糟糕了?开发者总结了 8 大原因
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券