腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
有没有
关于
如何
使用
自定义
算法
以
分布式
方式
进行
训练
的
SageMaker
资源
?
我已经看到
SageMaker
内置
的
算法
支持
分布式
训练
。然而,我还没有找到任何
关于
如何
组织我
的
数据和/或包含
自定义
算法
的
图像
的
文档,以便
以
分布式
方式
完成
训练
。这里
的
任何帮助都将不胜感激。
浏览 7
提问于2019-01-11
得票数 0
1
回答
AWS
Sagemaker
自定义
用户
算法
:
如何
利用额外
的
实例
这是一个基本
的
AWS
Sagemaker
问题。当我
使用
Sagemaker
的
内置
算法
之一
进行
训练
时,我可以通过增加
训练
算法
的
instance_count参数来利用将作业分配给许多实例所带来
的
巨大加速。我怀疑当我打包自己
的
算法
时,我需要做一些特殊
的
事情来控制它
如何
在我
的
自定义
tr
浏览 10
提问于2018-01-30
得票数 2
回答已采纳
3
回答
亚马逊网络服务
SageMaker
超大数据集
、
我有一个500 TB
的
csv文件和一个1.5 TB
的
mysql数据库,我想在上面运行aws
sagemaker
分类和回归
算法
以及随机森林。 aws
sagemaker
可以支持它吗?模型可以批量或分块读取和
训练
吗?它
的
任何示例
浏览 1
提问于2018-03-20
得票数 5
1
回答
AWS
Sagemaker
|为什么多实例
训练
要花费时间乘以实例数量
、
、
我正在
使用
AWS
Sagemaker
进行
模型
训练
和部署,这是模型
训练
的
示例 from
sagemaker
.estimator import Estimator hyperparameters=hyperparameters) estimator.fit(data_location) 这里提到
的
docker假设
训练
模型需
浏览 15
提问于2019-01-04
得票数 0
回答已采纳
1
回答
什么
sagemaker
算法
可以通过最小实例来
训练
?
、
、
、
我正在跟随学习
如何
在Amazon-
sagemaker
中
训练
机器学习模型。问题是ml.t2中
的
实例不能满足K-means
算法
的
约束条件。我不能
使用
满足
算法
约束
的
实例(我将请求支持分配此
资源
)。我
的
问题是,
sagemaker
有什么
算法
可以用最小实例在MNIST数据集上
进行
训练
吗?
浏览 0
提问于2020-07-19
得票数 0
1
回答
如何
在amazon上运行自己
的
python代码
、
我有一个python代码,它
使用
了keras和tensorflow后端。由于内存空间低,我
的
系统不支持这个模型
的
训练
。我想利用亚马逊
的
萨吉克。有办法这样做吗? 编辑:也可以用我
的
python代码编写一个脚本并在AWS上运行吗?
浏览 3
提问于2020-10-22
得票数 0
2
回答
AWS多目标检测在图像识别/分类中
的
应用
、
、
、
、
有没有
人知道是否有任何
SageMaker
内置
算法
支持图像识别中
的
多目标检测?我在想一些像多标签图像
训练
和检测/推理之类
的
东西。因此,我们能否:和/或 b)从图像中推断多个对象(类似于AWS,但带有
自定义
标签和培训/传输学习)。另外,我知道
SageMaker
图像分类
算法
的
文档中说“将图像作为输入并将其分类为多个输出类别的on
浏览 1
提问于2018-07-05
得票数 0
回答已采纳
1
回答
在amazon中对
自定义
代码
进行
增量培训
、
、
我要在amazon
sagemaker
中迈出我
的
第一步。我正在
使用
脚本模式来
训练
分类
算法
。
训练
是可以
的
,但是我不能做增量
训练
。我想用新
的
数据再次
训练
同样
的
模型。这就是我所做
的
。output_location) tf_estimat
浏览 3
提问于2019-11-28
得票数 1
回答已采纳
3
回答
无法理解逻辑回归模型中
的
Sagemaker
代码
、
、
我最近开始从事
sagemaker
的
工作,我试图理解每一行代码在
sagemaker
示例中
的
作用。我被以下代码卡住了。我正在研究银行数据
的
逻辑回归。from
sagemaker
.amazon.amazon_estimator import get_image_uri 有人能解释一下get_image_uri是做什么
的
吗?任何人也可以分享一个链接或一些东西,其中每一行代码都与
sagemaker
相关。
浏览 0
提问于2019-09-19
得票数 1
4
回答
如何
在AWS
Sagemaker
中
训练
自己
的
模型?
、
、
、
、
我刚刚开始
使用
AWS,我想用自己
的
数据集
训练
自己
的
模型。我
使用
Python中
的
tensorflow后端将我
的
模型作为keras模型。我看了一些文档,他们说我需要一个Docker镜像来加载我
的
模型。那么,
如何
将keras模型转换为Docker镜像呢?我在互联网上搜索,但没有找到任何清楚地解释这一过程
的
东西。
如何
制作keras模型
的
docker镜像,
如何
将其加载到<e
浏览 1
提问于2018-12-25
得票数 0
2
回答
如何
将在
SageMaker
上
训练
的
ML模型部署到本地计算机
以
运行predict?
、
、
我看了很多
关于
在本地部署
SageMaker
模型
的
帖子,但它们必须绑定到一个亚马逊网络服务笔记本实例,才能在本地运行预测/服务(亚马逊网络服务
SageMaker
Python SDK)。这违背了完全脱机运行
Sagemaker
训练
模型
的
实际意图。还有一些人尝试在S3上取消对tar.gz文件
的
筛选,然后包装要在本地部署
的
内容。然而,该过程似乎非常局限于某些类型
的
模型,如XGBoost和MXnet。因此,
有
浏览 4
提问于2020-02-20
得票数 2
3
回答
使用
aws
Sagemaker
运行培训作业时出错
我试图
使用
SageMaker
使用
自己
的
病态学习ML模型,并
使用
github示例。# Define IAM role import boto3 import os import pandas as pd ~/anaconda3/envs/python3/lib/
浏览 1
提问于2018-04-24
得票数 1
回答已采纳
3
回答
如何
快速调试
SageMaker
培训脚本?
、
、
、
当在亚马逊
SageMaker
中运行ML
训练
作业时,
训练
脚本被“部署”并提供一个ML
训练
实例,这需要大约10分钟
的
时间来启动并获得所需
的
数据。我只能从
训练
任务中得到一条错误消息,然后它就会死掉,实例也会随之终止。 在我更改了
训练
脚本以修复它之后,我需要部署和运行它,这需要大约10分钟
的
时间。
如何
更快地完成此任务,或者让
训练
实例保持运行?
浏览 29
提问于2019-01-24
得票数 3
回答已采纳
1
回答
如何
将spark.ml管道拟合和超参数优化集成在AWS中?
、
、
下面是我正在努力实现
的
目标的高级图片:我想用spark作为一个计算来
训练
一个模型,所有这些都是在
SageMaker
中
使用
他们
的
训练
Job。我希望
使用
SageMaker
培训作业设置,这样我就可以
使用
SM超参数优化工作来为LightGBM找到最佳
的
超级参数。现在,我知道了在SM中运行
自定义
培训
的
一般方法:
以
某种
方式
构建一个容器,然后从ECR中提取它,
浏览 3
提问于2022-01-24
得票数 2
回答已采纳
1
回答
AWS和
sagemaker
_pyspark有什么区别?
、
、
、
、
目前,我正在用
SageMaker
在AWS上运行一个概念
的
快速机器学习示例,我遇到了两个库:
sagemaker
和
sagemaker
_pyspark。我想处理
分布式
数据。我
的
问题是:
使用
sagemaker
是否等同于在不利用AWS
的
分布式
计算能力
的
情况下运行培训任务?如果不是,我想如果不是,他们为什么要实现
sagemaker
_pyspark?我看到它下面所做
的
是<
浏览 2
提问于2021-03-26
得票数 1
回答已采纳
1
回答
如何
利用在AWS
SageMaker
上
训练
的
模型,利用内置
算法
进行
语义分割,在本地PC机上
进行
推理?
、
、
类似于
的
问题。 我用内置
算法
SageMaker
训练
了一个AWS 模型.这个名为model.tar.gz
的
经过
训练
的
模型存储在S3上。所以我想从S3下载这个文件,然后用它在我
的
本地PC上
进行
推理,而不再
使用
AWS
SageMaker
。由于内置
算法
的
语义分割是用实现
的
,所以我尝试参考和
的
文档,在本地PC上
进行
推理。
浏览 2
提问于2020-02-26
得票数 0
回答已采纳
1
回答
控制AWS
Sagemaker
成本
、
Sagemaker
非常灵活,可以启动按需集群
进行
培训。然而,我
的
部门希望得到保证,我们不会在AWS预算上超支。
有没有
办法在不
使用
专用机器
的
情况下“限制”成本?
浏览 3
提问于2020-06-15
得票数 1
1
回答
tensorflow (keras)模型
、
、
、
、
我在笔记本上看到了 )此外,在基于tensorflow
的
keras环境中水平分配培训是否有意义?
浏览 0
提问于2019-12-22
得票数 0
回答已采纳
1
回答
如何
在
SageMaker
托管端点中实现波束搜索解码器?
、
我已经为Seq2Seq神经网络创建了一个
SageMaker
模型,然后启动了一个
SageMaker
端点: create_endpoint_config_response = sage.create_endpoint_config创建支持波束搜索
的
SageMaker
端点
的
最佳方法是什么?
浏览 9
提问于2018-07-31
得票数 0
1
回答
AWS
Sagemaker
自定义
训练
作业容器发射损失度量
、
、
、
、
:1.15.2-gpu-py36-cu100-ubuntu18.04 在容器中,我从docker
SAGEMAKER
_PROGRAM运行一个
自定义
keras (
使用
TF后端)
训练
作业。
Sagemaker
训练
作业会发出cpu和gpu负载等系统指标,您可以在
Sagemaker
训练
作业控制台上方便地实时查看这些指标。但我找不到一种方法来发布
关于
培训工作进度
的
指标。实际上,理想情况下我希望
使用
Tensorb
浏览 19
提问于2020-04-05
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券