腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
SageMaker
批处理
转换
失败
,
ID
列
、
、
、
我正在使用
SageMaker
管道来对测试数据进行推断。管道使用SKLearn预处理器和XGBoost模型。管道可以很好地处理没有
ID
列
的数据。但是,当我尝试包含一个
ID
列
来跟踪预测时,它
失败
了。import
sagemaker
from
sagemaker
.predictor import json_serializer, csv_serializer, json_deserializerinput-data/validation_data.
浏览 17
提问于2020-11-16
得票数 1
回答已采纳
1
回答
SageMaker
批处理
输入滤波器
、
我正在尝试使用
SageMaker
批处理
转换
来运行推理。我的预测数据输入有两
列
:基本上,根据测试数据做一些预测。但是,我不需要
ID
字段进入预测。我试着使用input_filter="1:",工作一直
失败
。content_type="text/csv", logs=True, input_filter="
浏览 4
提问于2022-11-18
得票数 1
1
回答
如何使用带有标头的csv进行
sagemaker
批处理
转换
?
、
、
、
、
我正在使用xgboost估值器创建的
转换
器来执行一个
sagemaker
批处理
转换
。用于预测/
批处理
转换
的csv输入包含一个
ID
列
和一个标题(
列
的名称)。在创建作业时,我们可以使用InputFilter参数排除索引(即第0
列
)
列
,如下所示: "InputFilter": "$[1:]"} 我的问题是如
浏览 3
提问于2022-05-25
得票数 0
1
回答
如何处理
Sagemaker
批处理
转换
,丢弃模型请求
失败
的文件
我想使用
Sagemaker
的
批处理
转换
特性来处理所有这些请求(我已经使用少量数据进行了几次测试运行,
转换
工作成功)。我的主要问题是这里(),特别是: 如果
批处理
转换
作业由于数据集出现问题而无法处理输入文件,
SageMaker
将作业标记为
失败
。这并不可取,主要是因为如果有大量请求的文件中有一个请求
失败
(无论是短暂错误、格式错误的请求,还是模型容器中的错误),那么所有这些请求都会被丢弃(即使所有请求都成功了,最后一个请求也
失败<
浏览 12
提问于2022-01-27
得票数 1
回答已采纳
1
回答
传递多行输入以进行
SageMaker
预测
、
、
、
我已经构建了一个组合使用自定义
转换
器(使用SKLearn
转换
器和XGBoost模型)的
SageMaker
管道。示例管道如下所示: from
sagemaker
.model import Modelimport boto3但是,
SageMaker
预测的所有示例仅指向一行输入,如下所示: from
sagemaker
.predictor import json_serializer,
浏览 15
提问于2020-11-02
得票数 0
1
回答
用于处理
sagemaker
批处理
流水线的数据的是SKlearnEstimator还是SKlearnProcessor
、
、
、
、
我正在构建一个
Sagemaker
批处理
推理管道,对使用
sagemaker
.sklearn.processing.SKLearnProcessor和
sagemaker
.sklearn.estimator.SKLearn处理特性的选项(在推断之前)感到困惑--我对这两个选项的理解是: aws中有一些文档使用
sagemaker
.sklearn.estimator.SKLearn进行
批处理
转换
来处理数据。但是,如果它仅用于数据处理,我也可以使用
sagemaker</em
浏览 13
提问于2022-09-25
得票数 -1
回答已采纳
1
回答
AWS EventBridge规则不会触发:错误。NotAuthorizedForSourceException。未获授权的来源
、
、
、
、
我正在创建一个规则,每当
SageMaker
批处理
转换
作业的状态发生变化时,都会触发该规则。detail-type: Name:
sagemaker
-transform-status-to-CWLState: ENABLED -
Id
: XXX arn:aws:logs:u
浏览 19
提问于2022-11-24
得票数 0
回答已采纳
1
回答
使用AWS Lambda运行
Sagemaker
批处理
转换
作业
、
、
我想把一个csv文件放在一个S3桶中,并自动使用
批处理
转换
作业从一个
Sagemaker
模型中得到预测。我想通过使用s3事件通知(在csv上传时)触发Lambda函数来实现这一点,该函数将执行
批处理
转换
工作。到目前为止,我编写的lambda函数如下:
sagemaker
= boto3.client('
sagemaker
') input_data_path = 's3://yeex=
sa
浏览 1
提问于2022-03-27
得票数 1
1
回答
使用ML的QuickSight
、
、
我想在我的QuickSight报告中使用我在AWS中创建的ML模型。
浏览 0
提问于2018-08-07
得票数 0
回答已采纳
2
回答
“batchStrategy:MultiRecord”的
Sagemaker
批处理
作业
失败
及数据处理
、
、
、
我们正在使用
SageMaker
批处理
转换
作业,并将尽可能多的记录放入一个小型
批处理
中,以适应MaxPayloadInMB限制,我们将BatchStrategy设置为MultiRecord,将SplitType
SageMaker
批处理
转换
作业的输入是: {"requestBody": {"data": {"Age": 90, "Experience": 26, "Income&quo
浏览 1
提问于2022-01-28
得票数 0
回答已采纳
1
回答
AWS: ClientError:调用CreateTransformJob操作时发生错误(ValidationException):无法找到模型
、
我正在尝试实现一个DeepAR模型,但可能是由于
sagemaker
的更新,它找不到正确的路径,就像在示例中那样。有人能告诉我为什么会发生这样的事吗?错误:"arn:aws:
sagemaker
:eu-central-1:900386373554:model/forecasting-deepar-2022-06-21-14-12-51-560".:ClientError:调用CreateTransformJob操作时发生错误(ValidationException):无法找到模型CreateTransformJob 这是我正在尝试实
浏览 8
提问于2022-06-21
得票数 0
1
回答
用
SageMaker
模型预测成批图像
、
、
、
www.tensorflow.org/programmers_guide/andand https://docs.aws.amazon.com/
sagemaker
/latest/dg/ tf-tra
浏览 3
提问于2018-02-06
得票数 2
1
回答
Sagemaker
批量
转换
作业-输入数据位置
、
我在AWS
Sagemaker
中使用自定义算法,并使用boto3 "create_training_job“API来训练模型。训练数据的S3Uri位置将传递给此接口。
Sagemaker
反过来将这些数据复制到docker镜像中的文件夹" /opt/ml/input/ data /“,我已经根据这个位置配置了训练逻辑-/opt/ml/input/data/。
浏览 1
提问于2020-01-03
得票数 0
2
回答
如何使用
批处理
作业将更大的.csv文件传递给amazon以进行预测
、
我创建了一个自定义模型,并将其部署在
sagemaker
上。我正在使用
批处理
转换
作业调用端点。如果输入文件很小,即csv文件中的行数较少,它就能工作。这是我用来创建
转换
作业的
转换
函数。='s3://2-n2m-
sagemaker
-json-output/out_files/' input_location = 's3://1-n2m-n2g-csv-input/smal_
sag
浏览 0
提问于2018-11-21
得票数 1
回答已采纳
1
回答
如何在我的python笔记本中打印出
Sagemaker
Batch Transform Job状态?
、
、
我正在运行一台python笔记本电脑,它在
Sagemaker
中启动了一个
批处理
转换
作业。但是,一旦作业完成运行,我还想打印“
失败
”、“进行中”和“已完成”状态。到目前为止,我只能启动
批处理
转换
作业(rf=random林),但我不确定如何获得作业状态打印输出。根据我下面的脚本,有人能帮上忙吗? ?
浏览 12
提问于2020-07-05
得票数 0
回答已采纳
2
回答
使用AWS Lambda在AWS
Sagemaker
上执行jupyter笔记本
、
、
我想知道是否可以使用Lambda在亚马逊网络服务
SageMaker
中执行Jupyter Notebook。这样,我就不必担心依赖关系,通常会使分类更直接。
浏览 112
提问于2020-10-18
得票数 0
回答已采纳
1
回答
从
SageMaker
批处理
预测作业输出多个csv文件
、
、
、
我正在处理一个AWS
SageMaker
(SKlearn)
批处理
转换
作业,其中的预测数据很大,因此我需要使用小型
批处理
(输入.csv被分成更小的.csv文件)。但是,我试图实现这样一种方式,即我可以从
批处理
转换
作业中总共获得三个输出文件--它们是不同的.csv文件,每个文件以一种稍微不同的方式聚合。我的问题是,我不知道如何指示
SageMaker
输出多个文件。由于额外的输出是对总体预测的聚合,但是
SageMaker
将分别处理每一小批(我假设?)我可以简
浏览 0
提问于2019-08-29
得票数 0
1
回答
我可以像Google Colab一样使用AWS
Sagemaker
吗?
、
、
我知道
Sagemaker
是一项付费服务,但Colab有时并不适合我:我需要让我的笔记本电脑保持运行,只有有限的配额和会话超时的可能性。
浏览 111
提问于2021-09-28
得票数 1
1
回答
如何在本地运行PipelineModel
SageMaker
我们可以创建一个PipelineModel并在本地运行
批处理
转换
吗?我没看到任何关于这件事的文件。我试过了,但发现了错误
sagemaker
_session.config = {'local': {'local_code': Trueself.
sagemaker
_client.create_model(**create_model_request) TypeError: create_model(
浏览 0
提问于2021-11-03
得票数 0
1
回答
用于批量
转换
的亚马逊网络服务
SageMaker
部署
、
、
、
、
我正在尝试使用Sage Maker中的XGBoost模型,并使用它通过
批处理
转换
对存储在S3中的大型数据进行评分。我使用现有的
Sagemaker
容器构建模型,如下所示: estimator =
sagemaker
.estimator.Estimator(image_name=container,hyperparameters=hyperparameters, role=
sagemaker
.get_execution_rol
浏览 7
提问于2020-10-29
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券