腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用TensorFlow的
SageMaker
基础知识
python
、
tensorflow
、
amazon-sagemaker
、
labeling
我见过使用
SageMaker
Ground Truth标记数据,然后使用这些数据训练现成的
SageMaker
模型的例子。但是,我可以在TensorFlow
脚本
模式
中使用相同的注释格式吗?更具体地说,我有一个正在使用TF
脚本
模式
训练的tensorflow.keras模型,我想将标记为Ground Truth的数据从文件
模式
转换为
管道
模式
。
浏览 17
提问于2019-01-31
得票数 2
回答已采纳
1
回答
SageMaker
脚本
模式
+
管道
模式
python
、
tensorflow
、
streaming
、
amazon-sagemaker
我正在使用TensorFlow +
脚本
模式
进行
SageMaker
培训,目前正在对我的数据使用“文件”输入
模式
。 有没有人知道如何在
脚本
模式
训练中使用‘
管道
’数据格式来流式传输数据?
浏览 29
提问于2019-02-12
得票数 3
回答已采纳
2
回答
如何用手电筒在起泡器中建立
管道
python
、
scikit-learn
、
pytorch
、
amazon-sagemaker
我正在处理一个在
sagemaker
中使用文本数据进行分类的问题。如何创建一个
管道
,在萨吉梅克与滑雪板的TFIDF和火把模型。
浏览 0
提问于2019-09-03
得票数 0
1
回答
如何在
Sagemaker
脚本
模式
下恢复培训工作?
amazon-web-services
、
tensorflow
、
machine-learning
、
amazon-sagemaker
在使用Tensorflow进行
Sagemaker
训练作业的非
脚本
模式
下,我可以使用checkpoint_path在S3中指定检查点路径。 但是,在
脚本
模式
下,此参数被禁用。如何在
脚本
模式
下从
Sagemaker
Tensorflow培训作业的最新检查点开始?
浏览 14
提问于2020-02-24
得票数 0
1
回答
tensorflow 2不保存模型的救世主
tensorflow
、
keras
、
amazon-sagemaker
我正在和Keras一起工作,我正在尝试用
Sagemaker
来训练一个模型。For details of how to construct your training script see:import tensorflow a
浏览 2
提问于2020-02-12
得票数 2
回答已采纳
1
回答
SageMaker
: PipelineModel与超参数整定
python
、
pipeline
、
amazon-sagemaker
、
hyperparameters
我们希望使用一个
SageMaker
来调优一个 (或类似的东西),其中
管道
的几个组件都有相关的超参数。在我们的例子中,两个组件都是通过ML算法的
SageMaker
容器来实现的。当然,在调优过程中,如何将tune_parameters分发到
管道
步骤是一个问题。 在scikit中,学习通过专门命名调优参数<StepName>__<ParameterName>来实现这一点。不过,我看不出有什么方法可以用
SageMaker
实现类似的目标。另外,搜索这两个关键字会引出相同的问题,但这并不是我
浏览 17
提问于2022-03-04
得票数 1
回答已采纳
2
回答
SageMaker
脚本
模式
服务
python-3.x
、
amazon-web-services
、
tensorflow-serving
、
amazon-sagemaker
我使用tensorflow.keras
脚本
模式
训练了一个
SageMaker
模型,如下所示:from
sagemaker
.tensorflow importtrain_instance_count=1, role=
sagemaker
.get_execution_role还有使用
浏览 0
提问于2019-01-27
得票数 2
回答已采纳
1
回答
SageMaker
模型中的自定义特征工程
python
、
amazon-web-services
、
amazon-sagemaker
我在
SageMaker
中使用批处理转换来调用存储的XGBoost模型,并对存储在S3中的数据进行评分。但是,在调用模型之前,我必须对列进行几次转换。= 'DEMO-xgboost-churn-call-batch'+ strftime("%Y-%m-%d-%H-%M-%S", gmtime()) client = boto3.client('
sagemaker
浏览 3
提问于2020-10-30
得票数 0
3
回答
如何解决在aws中部署模型时出现的错误?
amazon-web-services
、
amazon-sagemaker
我必须在AWS
Sagemaker
中部署一个定制的keras模型。培训是正确的,但是在部署时我会遇到以下错误:文件"/usr/local/bin/serve",第8行,在"/usr/local/lib/python2.7/dist->packages/
sag
浏览 10
提问于2019-11-12
得票数 1
回答已采纳
1
回答
用于处理
sagemaker
批处理流水线的数据的是SKlearnEstimator还是SKlearnProcessor
python
、
machine-learning
、
scikit-learn
、
amazon-sagemaker
、
data-processing
我正在构建一个
Sagemaker
批处理推理
管道
,对使用
sagemaker
.sklearn.processing.SKLearnProcessor和
sagemaker
.sklearn.estimator.SKLearn因此,当推理请求输入时,整个
管道
位于要调用的单个端点后面。详细内容来自: 我不知道具体的缺点,这是第一个问题(1).但是,如果它仅用于数据处理,我也可以使用
sagemaker
.sklearn.processing.SKLearnProcessor创建用于处理特性的
Sa
浏览 13
提问于2022-09-25
得票数 -1
回答已采纳
1
回答
AWS
Sagemaker
BlazingText多个训练文件
machine-learning
、
amazon-sagemaker
尝试找出您是否可以在Amazon
Sagemaker
BlazingText中为您的数据集使用多个文件。 我正尝试在文本分类
模式
中使用它。看起来这是不可能的,当然在文件
模式
下是不可能的,但是想知道
管道
模式
是否支持它。我不想将我所有的训练数据都放在一个文件中,因为如果它是由EMR集群生成的,我需要在之后将其组合起来,这是很笨拙的。
浏览 3
提问于2019-06-13
得票数 3
1
回答
如何在一个端点中以顺序顺序集成两个模型?
python
、
machine-learning
、
amazon-sagemaker
是否可以使用
SageMaker
实现?根据我的理解,model_fn,prediction_fn,output_fn一次只能使用一个模型。
浏览 2
提问于2022-11-03
得票数 1
回答已采纳
1
回答
使用
SageMaker
时使用Keras提前停止和回调
keras
、
amazon-sagemaker
我正在使用
sagemaker
来训练keras模型。在训练模型时,我需要实现早期停止方法。 callbacks=[tboard, checkpointer, early_stopping, history]) 但是,如果使用
SageMaker
,我们需要调用
SageMaker
的fit函数,该函数不支持回调。from
sagemaker
.tensorflow import Ten
浏览 27
提问于2018-11-27
得票数 3
1
回答
在AWS上培训YoloV5时遇到的麻烦: AlgorithmError:,退出代码:1
python
、
docker
、
object-detection
、
amazon-sagemaker
、
yolov5
FROM 763104351884.dkr.ecr.eu-west-3.amazonaws.com/pytorch-training:1.11.0-gpu-py38-cu113-ubuntu20.04-
sagemaker
WORKDIR /opt/ml/code ENV
SAGEMAKER
_SU
浏览 3
提问于2022-05-24
得票数 0
3
回答
如何快速调试
SageMaker
培训
脚本
?
amazon-web-services
、
tensorflow
、
machine-learning
、
amazon-sagemaker
当在亚马逊
SageMaker
中运行ML训练作业时,训练
脚本
被“部署”并提供一个ML训练实例,这需要大约10分钟的时间来启动并获得所需的数据。在我更改了训练
脚本
以修复它之后,我需要部署和运行它,这需要大约10分钟的时间。 如何更快地完成此任务,或者让训练实例保持运行?
浏览 29
提问于2019-01-24
得票数 3
回答已采纳
1
回答
是否有一种方法可以列出与AWS TrainingJobs Notebook/ Studio项目关联的所有资源/组件(模型、端点、
SageMaker
等)?
amazon-web-services
、
amazon-ec2
、
amazon-sagemaker
如果我编写了一个
脚本
来在AWS
SageMaker
笔记本上训练和部署机器学习模型,或者使用AWS
SageMaker
Studio创建一个项目,当我试图列出使用boto3使用的所有资源时,所提取的信息没有
模式
将资源信息链接到笔记本是否有方法将这些信息(模型、端点、TrainingJobs、ProcessingJobs等)链接到在其中创建的
Sagemaker
/ Studio项目?
浏览 5
提问于2022-05-14
得票数 -1
1
回答
在
SageMaker
上将AWS Glue输出文件读取到TensorFlow批处理转换中的正确方法是什么
python
、
tensorflow
、
tensorflow-serving
、
amazon-sagemaker
这个文件的格式对于在
SageMaker
上训练TensorFlow模型(使用
脚本
模式
)来说很好,但是在运行批处理转换时,我很难解析这些数据。我按照推荐的首选inference.py
脚本
方法使用input_handler和output_handler函数,但我不确定是否应该将.out文件视为应用程序/json、文本/csv或其他完全不同的东西inference.py文件示例:https://github.com/awslabs/amazon-
sagemaker
浏览 17
提问于2020-04-07
得票数 0
1
回答
在不更新配置的情况下将新模型部署到
sagemaker
端点?
python
、
amazon-web-services
、
boto3
、
amazon-sagemaker
、
mlops
我想将一个新模型部署到现有的AWS
SageMaker
端点。该模型由不同的
管道
训练,并以mode.tar.gz形式存储在S3中。
sagemaker
端点配置指向此作为模型数据URL。我想将一个新模型部署到AWS
SageMaker
端点。该模型由不同的
管道
训练,并以mode.tar.gz形式存储在S3中。我使用AWS提供了
Sagemaker
。模型被上传到S3位置,而
sagemaker
端点配置作为model_data_url使用。因此,它应该使用新的
模式
。但
浏览 5
提问于2022-11-24
得票数 2
2
回答
AWS是否对
管道
模式
下的S3流数据收费(用于模型培训)?
amazon-web-services
、
tensorflow
、
amazon-s3
、
amazon-sagemaker
在用于
Sagemaker
的AWS开发人员文档中,他们建议我们使用
管道
模式
直接将大型数据集从S3流到模型培训容器(因为它更快,使用更少的磁盘存储,减少了培训时间等)。因此,我想问是否有人知道这种
管道
模式
下的数据传输是否收费,因为如果是的话,我不知道如何为大型数据集推荐这种传输方式,因为对于大型数据集来说,为每一个模型迭代流几个时代可能会变得非常昂贵(例如,我的数据集在
浏览 0
提问于2019-08-04
得票数 1
回答已采纳
1
回答
如何在aws
sagemaker
上训练和部署YOLOv5
amazon-web-services
、
amazon-sagemaker
、
yolov5
我想在亚马逊网络服务
sagemaker
上训练YOLOv5,也可以在
sagemaker
上部署模型,还需要了解入口点python
脚本
。我怎么才能为这个建立
管道
呢?
浏览 85
提问于2021-09-26
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
亚马逊正在重塑MLOps
PowerShell之管道脚本的创建
十分钟入门shell脚本
如何在生产中为机器学习模型提供服务?
利用 AWS SageMaker BlazingText 对不均衡文本进行多分类
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券