腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用
lambda
(
python
)
在
s3
中
解析
/
编码
csv
中
的
字符串
的
问题
python
、
csv
、
parsing
、
lambda
、
encoding
我
在
Lambda
中用
python
编写了一个程序,从
S3
中
读取
CSV
,然后添加一些信息并将其存储到
S3
中
的
另一个
CSV
中
。原始
CSV
中
的
初始行如下所示: 2020-04-23 00:00:00,pass,7481.15000000,7480.12000000 当我尝试读取,添加一些信息,并将其存储到
S3
的
第二个<
浏览 16
提问于2020-04-24
得票数 0
1
回答
AWS
Lambda
:
使用
Python
从
s3
存储桶
中
读取
csv
文件尺寸,无需
使用
Pandas或
CSV
包。
python
、
pandas
、
amazon-web-services
、
amazon-s3
、
aws-lambda
我希望有人能帮助我解决这个
问题
。 我
在
一个
s3
文件夹中有多个
CSV
文件。我想
使用
不带Pandas
的
python
和
csv
包(因为aws
lambda
提供
的
包非常有限,而且有大小限制),遍历
s3
存储桶
中
的
文件,读取
csv
维度(行
的
长度和列
的
长度)。例如,我
的
s3
文件夹包含两个<e
浏览 41
提问于2019-03-07
得票数 1
回答已采纳
2
回答
如何从
S3
存储桶
中
读取
CSV
文件?
python
、
csv
、
amazon-s3
在
S3
存储桶中有一个
CSV
文件,我想
解析
它并将其转换为
Python
语言
的
字典。
在
我
的
python
文件
中
,我添加了import
csv
和我在网上看到
的
有关如何读取
csv
文件
的
示例,您可以传递如下文件名:rea
浏览 1
提问于2017-10-26
得票数 7
回答已采纳
6
回答
使用
Boto3将
S3
对象作为
字符串
打开
python
、
amazon-s3
、
boto
、
boto3
我知道
使用
Boto2可以
使用
:将
S3
对象作为
字符串
打开
在
boto3
中
有没有等价
的
函数?
浏览 0
提问于2015-08-13
得票数 188
1
回答
Json2
csv
解析
器
在
解析
过程
中
花费
的
时间太长。
node.js
、
amazon-s3
、
aws-lambda
、
json2csv
我有一个API,它连接到AWS
lambda
,它执行以下操作:
浏览 4
提问于2020-04-03
得票数 0
1
回答
使用
lambda
或
s3
或api网关
的
AWS无服务器重置缓存
amazon-web-services
、
amazon-s3
、
aws-lambda
我有一个无服务器
的
python
函数(
lambda
1),它与api网关和
s3
集成在一起。因此,当用户
在
api网关上访问GET /names时,
lambda
读取
S3
中
的
CSV
文件并返回响应。
CSV
文件很大,因此
lambda
需要大量时间来响应。因此,
在
python
中
添加了一个List来在内存
中
缓存
C
浏览 1
提问于2017-11-22
得票数 2
回答已采纳
1
回答
在
AWS
S3
中
新文件到达时触发AWS
Lambda
python
、
amazon-web-services
、
amazon-s3
、
aws-lambda
、
amazon-cloudwatch
我有一个用
Python
编写
的
Lambda
函数,它
的
代码可以从位于AWS
S3
中
的
3个文件
中
运行3个表
的
Redshift复制命令。我有A,B和C桌。"
s3
://bucket/abc/B.
csv
"' 'copy to redshift C from "
s3
://buc
浏览 0
提问于2019-04-22
得票数 1
回答已采纳
1
回答
Python
函数根据文件名对不同
的
CSV
文件执行一些操作
python
、
amazon-s3
、
aws-lambda
我必须打开并执行三个不同
的
CSV
文件
的
逻辑,我要上传到
S3
。位置:我
的
桶/配置/我试图
使用
python
纠正
lambda
函数,以便在上传这些文件时触发
lambda
函数伪码看起来类似于: 如果something...If是上传到
S3
do
S3
浏览 2
提问于2020-02-04
得票数 0
回答已采纳
5
回答
使用
.format()时
Python
读取字典
字符串
的
错误
python
、
python-3.x
我正在用
Python
3.6.6创建一个字典
字符串
(稍后添加到.txt文件
中
)。当我硬
编码
字典
的
字符串
时,我没有遇到任何
问题
:print(my_string) {“源”:“
S3
:&
浏览 4
提问于2020-02-07
得票数 0
回答已采纳
1
回答
是否可以查询与前缀匹配
的
所有文件
的
S3
目录?
amazon-web-services
、
amazon-s3
、
boto3
我可能没有提出正确
的
问题
。我试图
使用
boto3将与给定前缀匹配
的
所有文件从一个桶复制到另一个桶。文件
的
数量可能相当大,所以我认为
使用
库存特性来创建批处理作业清单是可行
的
,但我正在查找文档.缺乏。我看不出有什么方法可以从一个基于前缀
的
目录
中
得到一个文件名列表--它似乎是全部
的
,或者是没有的。我是否误解了批次作业和库存?
浏览 3
提问于2021-12-28
得票数 0
回答已采纳
1
回答
在
AWS
中
,如何
使用
to_
csv
将我
的
Parquet文件转换为
CSV
,我希望
使用
PYTHON
将
csv
文件插入到postgresql
中
pandas
、
postgresql
、
amazon-web-services
、
csv
、
aws-lambda
现在,我可以从AWS
s3
中
获取拼花文件,并在
lambda
中
对该拼花文件做了一些修改。
在
将此数据插入到来自同一个
lambda
的
postgreql数据库时,我面临
问题
。我找到了将这个数据转换为
csv
文件并插入到我
的
本地系统
中
的
解决方案,但是我无法
在
lambda
中
实现代码。我
的
lambda
代码如下
浏览 5
提问于2022-05-29
得票数 0
4
回答
如何
使用
API网关上传xls/xlsx文件并将文件数据发送到
lambda
函数?
node.js
、
aws-lambda
、
aws-api-gateway
我对
lambda
和API网关很陌生。我
使用
这个服务做了一些简单
的
事情,但是现在我有一个用户可以上传excel文件
的
要求。上传过程只是触发一个API网关端点,该端点与
lambda
函数集成。我不想保存文件,我只想将文件数据以
CSV
/JSON格式发送到
lambda
函数(nodejs代码),然后处理/转换/持久化数据。有人知道怎么做吗?我试了几次,但我真的迷路了。
浏览 2
提问于2018-04-04
得票数 3
回答已采纳
1
回答
AWS
Lambda
、
S3
和pandas -将
CSV
加载到
S3
中
,触发
Lambda
,加载到熊猫
中
,放回桶
中
?
python
、
pandas
、
amazon-web-services
、
amazon-s3
、
aws-lambda
我是AWS和
lambda
的
新手,所以如果这是一个愚蠢
的
问题
,我道歉。我希望能够做
的
是将电子表格加载到
s3
存储桶
中
,基于上传触发
lambda
,让
lambda
将
csv
加载到
s3
中
并
使用
它进行操作,然后将数据帧写回
csv
到第二个
csv
存储桶
中
。我读了很多关于压缩
python
脚本以及所有的库和依赖项并
浏览 2
提问于2018-01-17
得票数 5
1
回答
使用
AWS启动EC2实例+提供要处理
的
文件
的
路径
amazon-web-services
、
amazon-s3
、
amazon-ec2
、
aws-lambda
我想编写一个启动EC2实例
的
Lambda
函数。因此,这一实例应: 如何使我
的
EC2实例从
S3
下载正确
的
文件?文件名是从事件对象
中
解析
出来
的
,每次运行时都会有所不同。
浏览 2
提问于2021-01-08
得票数 0
回答已采纳
1
回答
使用
React
解析
文件(无服务器)
design
、
web-development
、
web-applications
、
aws
、
react
我有一个设计
问题
,我希望得到一些验证。我想要创建一个“无服务器”web应用程序,它将
解析
一个
csv
文件并返回一个XML文件。我将有一个托管
在
AWS
S3
中
的
单一页面react应用程序,用户可以在其中拖放一个文件,并对其进行
解析
,并将
csv
文件
的
内容发送到
lambda
,然后由
lambda
将其转换为XML文件并将其返回给用户。我希望不必
使用
S3
来存储
浏览 0
提问于2020-01-06
得票数 -4
回答已采纳
2
回答
如何
解析
s3
存储桶
中
的
CSV
以
在
javascript AWS
Lambda
函数中
使用
node.js
、
aws-lambda
、
csvtojson
我正在尝试
使用
AWS
Lambda
中
的
csvtojson库从
s3
存储桶
中
读取
CSV
,但它不能正常工作。
在
本地,我
的
代码可以工作。但当我将其上传到
Lambda
时,它不会返回任何内容。
Lambda
控制台中没有错误,所以我很难进行调试。我
的
代码如下。const AWS = require('aws-sdk'); const csvtojson = require(
浏览 34
提问于2019-09-23
得票数 3
2
回答
无法用
Python
解析
.
csv
amazon-web-services
、
amazon-s3
、
aws-lambda
、
amazon-dynamodb
、
boto3
课程名称是
使用
Lambda
、
Python
和Boto3自动化AWS,而我遇到困难
的
具体实验室是:将
CSV
导入到DynamoDB
中
。在这个实验室
中
,我们将一个.
csv
文件上传到
S3
中
,
在
指定
的
桶中生成一个
S3
事件,然后启动如下所示
的
Lambda
函数。该函数
解析
.
csv
,然后将内容上载到Dynamo
浏览 1
提问于2019-12-23
得票数 0
2
回答
有没有办法合并多个
CSV
文件上传到亚马逊网络服务
S3
存储桶
使用
Python
?
python
、
amazon-web-services
、
amazon-s3
我需要设置一个AWS
Lambda
函数,该函数
在
新
的
CSV
文件上传到
S3
存储桶时触发,以将
CSV
文件合并为一个主文件(它们将具有相同
的
列数和列名),然后将新
的
主文件上传到另一个
S3
存储桶。我
使用
Python
实现
Lambda
函数。我用我
的
Lambda
函数和我
使用
的
依赖项(Pandas和Numpy)创建了一个zip
浏览 1
提问于2019-07-02
得票数 1
4
回答
从
s3
到雪花自动加载文件
python
、
amazon-s3
、
snowflake-cloud-data-platform
在
每天都有新JSON文件转储
的
s3
桶
中
,我必须创建解决方案,
在
它到达时选择最新
的
文件,
解析
JSON并将其加载到雪花数据仓库。请有人分享你
的
想法,我们怎样才能实现?
浏览 2
提问于2019-01-15
得票数 2
回答已采纳
1
回答
使用
创建
CSV
并保存到
S3
(
Python
)
python
、
csv
、
amazon-web-services
、
amazon-s3
、
aws-lambda
我有一些
Python
代码,这些代码指向URL,
解析
HTML表,并将结果保存到
CSV
。对表
的
更改经常发生,我希望看到这些更改
的
趋势视图。为了实现这一点,我希望我
的
代码
在
Lambda
中
作为一个函数运行,并每隔12小时将表
的
快照保存到
S3
。我创建了
Lambda
,
使用
CloudWatch根据时间触发函数,并赋予它访问相关
的
S3
桶
浏览 2
提问于2017-12-22
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python普通文件读取问题汇总
最全攻略:数据分析师必备Python编程基础知识
致Python初学者的六点建议
爬虫实战:爬取当当网所有 Python 书籍
我是如何在AWS Lambda中用几分钟处理50万个事务的?
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券