腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(2911)
视频
沙龙
1
回答
Jupyter
Notebook
GPU
内存
训练
后
发布
模型
、
、
、
、
在使用
Jupyter
notebook
完成深度学习
模型
训练
后
,我们如何清理
GPU
内存
。问题是,无论我使用哪种框架(tensorflow,pytorch),存储在
GPU
中的
内存
都不会被释放,除非我手动终止进程或终止内核并重新启动
Jupyter
。
浏览 28
提问于2021-05-09
得票数 2
2
回答
如何在Google Cloud AI平台的
Jupyter
笔记本上使用
GPU
、
我在Google Cloud AI平台上使用的是支持
GPU
的
Jupyter
笔记本电脑。有谁知道我怎么让它用
GPU
代替吗?在此之前,我一直在使用Google Colab
notebook
,您可以在笔记本顶部的菜单中简单地更改运行时以使用
GPU
。但在
Jupyter
笔记本中看起来并没有这样的选项。感谢任何关于如何让它使用
GPU
的建议! 谢谢。
浏览 1
提问于2021-01-28
得票数 0
2
回答
Keras:完成
训练
过程
后
释放
内存
、
我使用Keras构建了一个基于CNN结构的自动编码器
模型
,在完成
训练
过程
后
,我的笔记本电脑有64
GPU
的
内存
,但我注意到至少1/3的
内存
仍然被占用,
GPU
内存
也是如此。我没有找到释放
内存
的好方法,我只能通过关闭Anaconda提示符命令窗口和
jupyter
笔记本来释放
内存
。我不确定是否有人有好的建议。谢谢!
浏览 3
提问于2018-06-24
得票数 20
1
回答
如何在
训练
XGBoost
模型
时使用图形处理器?
、
、
我一直在尝试在
Jupyter
Notebook
中
训练
一个XGBoost
模型
。我通过以下命令安装了XGboost(
GPU
): git clone — recursive https://github.com/dmlc/xgboostmkdir build-DUSE_CUDA=ON make -j 但是每当我尝试
训练
模型
而不是model.fit时,内核都会在几分钟
后
重新启动。reg_alpha
浏览 23
提问于2020-01-23
得票数 3
1
回答
深度学习虚拟机:如何释放
内存
?
、
、
、
、
我得到它是为了
训练
一些深度学习
模型
。当在google cloud
jupyter
笔记本上
训练
时,它崩溃了,因为它无法将输入张量从
GPU
复制到CPU:具体如下: InternalError: Failed copying input tensorfrom /job:localhost/replica:0/task:0/device:
GPU
:0 to /job:localhost/replica:0/task:0/
浏览 166
提问于2021-07-19
得票数 1
1
回答
如何在tensorflow中释放
GPU
内存
?( `allow_growth`→`allow_shrink`?)
、
、
、
我用
GPU
训练
了很多
模型
。我想调优网络的架构,所以我对不同的
模型
进行了顺序的
训练
,以比较它们的性能(我使用的是keras-tuner)。 问题是有些
模型
非常小,而另一些则非常大。我不想把所有的
GPU
内存
分配给我的培训,而只是我需要的数量。我有TF_FORCE_
GPU
_ALLOW_GROWTH到true,这意味着当一个
模型
需要大量
内存
时,
GPU
就会分配它。然而,一旦大
模型</
浏览 7
提问于2022-10-25
得票数 1
2
回答
运行神经网络需要更长的时间
、
、
、
、
我正在运行一系列神经网络(使用Tensorflow后端的Keras库),在
Jupyter
Notebook
中
训练
每个神经网络所花费的时间,我有以下结果:234 该程序由一个函数组成,该函数在它们各自的数据集上
训练
一个单独的神经网络
模型
,并且只输出它们的最终
训练</em
浏览 16
提问于2018-03-05
得票数 0
1
回答
有办法释放更多的
内存
吗?
、
、
、
在本例中,我在VM上使用
jupyter
notebook
来
训练
一些CNN
模型
。虚拟机具有16v CPU和60 VM
内存
。为了获得更好的性能,我刚刚安装了一台NVIDIA TESLA P4。Tried to allocate 196.00 MiB (
GPU
0; 7.43 GiB total capacity; 2.20 GiB already allocated; 180.44 MiB我想知道为什么我只有这么少的空闲
内存
?我认为
GPU
设置正确无误 +-
浏览 114
提问于2019-12-11
得票数 3
1
回答
我怎么知道Pytorch中的函数是否分配了新的
内存
?
最近,我遇到了一种情况,在我的
模型
中,输入数据确实消耗了大量
内存
。当我在我的网络层中操作数据时,这会导致大量的
内存
使用。我真的想知道这些操作是否会分配新的
内存
块。例如,像view(),permute()或contiguous()这样的函数会不会分配新的
内存
块,你是怎么知道的。它真的吸引了我,谢谢你的帮助。
浏览 0
提问于2020-01-04
得票数 0
1
回答
如何检查我是否在AWS上使用
GPU
?
、
、
我正在AWS的深度学习AMI (ubuntu 12)中使用keras
训练
NN。 如何确保
Jupyter
Notebook
中的脚本使用
GPU
?
浏览 16
提问于2018-08-20
得票数 0
回答已采纳
1
回答
SampleRNN - Pytorch实现初学者
、
、
、
我尝试这样开始工作:我已经通过蟒蛇控制台安装了所有的库依赖项,但是我不确定如何运行python
训练
脚本。 我想我只是需要一般的帮助来让一个git RNN在python中工作?我已经找到了很多教程,这些教程展示了在
Jupyter
中使用笔记本,甚至从头开始工作,但就是找不到使用python代码文件的教程?
浏览 3
提问于2019-12-08
得票数 1
1
回答
非交互运行
Jupyter
Notebook
、
、
、
、
我在这个虚拟机上运行一台
Jupyter
笔记本电脑来
训练
Keras序列
模型
。该
模型
需要大约24小时才能完全
训练
。有没有一种不用浏览器就能运行笔记本的方法?那么,让
Jupyter
服务器和
notebook
在后台运行,但所有的结果/输出/绘图都显示在
Jupyter
notebook
中吗?当我尝试通过浏览器以交互方式启动
Jupyter
notebook
,然后关闭浏览器,但让
Jupy
浏览 55
提问于2020-05-01
得票数 0
1
回答
如何停止
模型
训练
并恢复
模型
训练
?
、
、
、
、
我想用10000个
训练
图像,2000个测试图像,2000个验证图像来
训练
我的
模型
。我将使用对象检测tensorflow lite model maker。项目链接: tensorflow.org/lite/tutorials/model_maker_object_detection 设置批处理大小32
后
,
训练
需要50个时期并持续2天(步骤3).I无法让我的计算机保持开机两天我在
jupyter
notebook
中运行该项目 如何停止
模
浏览 136
提问于2021-08-05
得票数 0
2
回答
在slurm上
训练
DL
模型
的速度越来越慢
、
、
、
、
我们学校开始让他们的学生使用
GPU
服务器。所以我通过slurm
训练
DL
模型
。我用这条线启动了我的
jupyter
课程在第一阶段,
训练
只需45分钟。当我
训练
下一个时代时,我经常会出现断线错误(我指的是划
浏览 15
提问于2022-09-05
得票数 0
7
回答
每当
训练
模型
时,内核在重新启动时就会死掉
、
、
validation_data = test_set, validation_steps = 2000)但是,如果我卸载tensorflow-
gpu
,程序就能完美地运行...除了每个时期需要5000秒。
浏览 1
提问于2017-05-22
得票数 9
1
回答
在CPU和
GPU
上的两个单独的juypter笔记本中
训练
Keras
模型
、
、
、
我正在为
Jupyter
Notebook
上的两个不同的应用程序
训练
Keras CNN
模型
。考虑到我想充分利用PC的资源,我可以在一台笔记本电脑和另一台使用CPU的笔记本电脑中使用Keras-
GPU
吗?我了解到Keras默认使用
GPU
--如果有的话--我可以强制Keras使用CPU,就像在中一样。
浏览 15
提问于2019-11-06
得票数 1
回答已采纳
2
回答
在
jupyter
笔记本中运行经过
训练
的kaggle
模型
、
我已经在kaggle中构建和
训练
了
模型
,并下载了它的输出。现在如何在
jupyter
notebook
中本地运行经过
训练
的
模型
来进行预测?
浏览 1
提问于2019-05-06
得票数 0
2
回答
使用AWS Lambda在AWS Sagemaker上执行
jupyter
笔记本
、
、
我已经将
模型
上传到亚马逊S3作为泡菜(我的 _ model.pkl)。我想知道是否可以使用Lambda在亚马逊网络服务SageMaker中执行
Jupyter
Notebook
。这样,我就不必担心依赖关系,通常会使分类更直接。那么,有没有办法使用AWS Lambda来执行
Jupyter
Notebook
呢?
浏览 112
提问于2020-10-18
得票数 0
回答已采纳
2
回答
为什么通用
GPU
的
内存
如此有限?
、
我们经常发现,神经网络的
训练
过程可能受到
GPU
内存
大小的高度限制,比如在目标检测
模型
中,
训练
批次的大小可能被限制在1或2以内,这使得那些在这样的任务中工作很长时间的人不得不面对这样有限的
内存
/批处理大小的场景而提出了一些技巧那么,为什么
GPU
内存
仅限于普通P 100/V 100上的16
GPU
内存
,而在高性能工作站上的CPU
内存
仅为256
GPU
?Nvidia<
浏览 0
提问于2018-12-14
得票数 2
1
回答
Mac无法打开从Linux Ubuntu创建的h5 keras
模型
、
、
、
、
我用图形处理器从Linux
训练
了一个
模型
,并用model.save('my_model.h5')保存了它。model = load_model('my_model.h5')OSError: Unable to open file (una
浏览 39
提问于2019-08-11
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
腾讯发布超大预训练系统派大星,聚焦解决BERT等超大模型训练时的“GPU内存墙”问题
AMD 发布10亿开源 AI 模型 OLMo,用Instinct MI250 GPU集群训练
不能更详细的PyTorch环境安装与配置
又有免费GPU资源了:可直接跑Jupyter Notebook,还支持断点续命
微软推出开源自动驾驶仿真平台 AirSim 教程,机器学习新手也能快速上手自动驾驶
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券