腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如
何在
Python
中
加速
gzip
文件
的
处理
python
、
python-3.x
、
gzip
我需要从
文件
gzip
创建一个uniq values([0]-position, delimeter '|')
的
列表,它加权了1.5 GB。但
处理
时间超过2,5小时,请帮助加快
处理
速度。import
gzip
uniqSub = [] for i in
浏览 41
提问于2019-10-09
得票数 0
回答已采纳
1
回答
soappy上
的
压缩xml
python
、
compression
、
web-services
、
soappy
我正在开发一个使用
python
的
can服务
的
应用程序,两端(服务器和客户端)都是用
Python
开发
的
,并使用SOAPpy进行can服务,但是,你知道,xml太冗长了,我想压缩它,但据我在google上搜索,我找不到任何有用
的
东西。
浏览 0
提问于2010-03-06
得票数 0
回答已采纳
5
回答
Python
Perl:读取gzipped
文件
的
性能
python
、
performance
、
perl
处理
此
文件
的
Perl脚本如下所示:use strict; last; }# read_million.py import
gzip
例如,在Perl
中
,我使用sub
浏览 10
提问于2016-04-11
得票数 10
回答已采纳
1
回答
如何使用
gzip
模块打开csv
文件
python
、
pandas
、
gzip
我希望读入一个与我
的
python
脚本位于同一目录
中
的
.csv.gz
文件
,只使用
gzip
和pandas模块。到目前为止,import pandas as pd如
何在
不使用csv模块
的
情况下将此
文件
转换/读取为数据帧,
如
类似回答
的
浏览 1
提问于2021-03-16
得票数 2
1
回答
Python
md5与bash md5sum相比输出和速度慢吗?
python
、
python-3.x
、
bioinformatics
1)当我运行hashlib md5时,我得到
的
输出与在bash
中
运行md5sum时不同。2)在
python
中
运行程序所花费
的
时间比bash长得多。另外,我有一个md5sum值表,我想要匹配这个测试
文件
和其他测试
文件
。测试用例
中
的
bash输出与表中提供
的
值相匹配。因此,理想情况下,我希望使
python
输出与之匹配。到目前为止,我尝试过
的
是:import hash
浏览 3
提问于2020-06-20
得票数 1
回答已采纳
6
回答
如何判断
文件
是否是
gzip
压缩
的
?
python
、
compression
、
gzip
我有一个
Python
程序,它将接受文本
文件
作为输入。但是,其中一些
文件
可能是
gzip
压缩
的
。
gzip
.GzipFile(filename,
浏览 12
提问于2010-09-14
得票数 31
回答已采纳
3
回答
是否有C或C++
的
跨平台
gzip
处理
器库?
c++
、
c
、
open-source
、
gzip
(一句话,
处理
)
gzip
文件
。有任何开源
的
跨平台
的
C或C++吗?
浏览 7
提问于2011-06-16
得票数 13
回答已采纳
2
回答
在
Python
3
中
对多个
文件
使用
gzip
python
、
python-3.x
、
character-encoding
、
gzip
、
compression
所以基本上我有一个这样
的
文件
系统: main_archive.tar actual_file.xml这个档案里有上百个
文件
..。所以基本上,在
Python
3
中
,
gzip
包可以与多个
文件
一起使用吗?我只使用了一个压缩
的
文件
,所以我不知道如何通过多个
文件
或多个级别的“压缩”。我常用
的
解压方法是: wit
浏览 158
提问于2018-06-04
得票数 1
回答已采纳
1
回答
如何跳过电火花损坏
的
gzip
?
apache-spark
、
pyspark
我需要从hdfs
中
读取很多
gzip
,比如: sc.textFile('*.gz'),而其中一些
gzip
已经损坏,引发 停止整个进程
的
运行我读过辩论,其中有人有同样
的
需要,但没有得到明确
的
解决方案。由于这是不适当
的
实现这个功能内火花(根据链接),有什么办法只是野蛮地跳过损坏
的
文件
?对于scala用户似乎有一些提示,不知道如
浏览 5
提问于2016-04-25
得票数 0
1
回答
GzipFile
中
的
缓冲化
python
、
buffer
、
gzip
、
buffering
in stream:writer(stream)另外,我没有为
gzip
.GzipFile调用找到任何缓冲参数。从代码
中
,它是基于某个缓冲类
的
,但我没有
浏览 2
提问于2014-04-15
得票数 3
2
回答
迭代csv
文件
python
、
csv
嗨,我试图迭代一个csv
文件
,但我无法让它以某种方式工作。我跟踪了
python
文档,但仍然无法遍历它。我有一个压缩
的
csv
文件
,我使用这种格式:
如
您所见,它是用';‘分隔
的
。下面是我要运行
的
代码,尽管它(简化) cs
浏览 3
提问于2021-04-21
得票数 0
1
回答
Gzip
框架在Swift
中
的
安装过程
installation
、
swift3
、
gzip
如
何在
swift 3.0.1
中
安装
Gzip
框架,以及如
何在
swift 3和iOS 10
中
使用它。1.构建
Gzip
框架。2.在构建阶段,将
Gzip
.framework库添加到项目中。4.在您
的
代码中使用。提前谢谢。
浏览 3
提问于2016-11-22
得票数 0
4
回答
Python
:有没有一种从字符串
中
解压缩
的
方法?
python
、
gzip
我正在尝试解压缩来自URL
的
.gz
文件
。url_file_handle=StringIO( gz_data )decompressed_data=
gzip
_file_handle.read()..。(fh,'r') File "/usr/lib/
p
浏览 9
提问于2009-10-09
得票数 36
回答已采纳
4
回答
使用
python
解压.gz
文件
的
一部分
python
、
gzip
、
zlib
我有大约60KB大小
的
sample.gz
文件
。我想解压缩这个
文件
的
前2000个字节。我遇到CRC检查失败
的
错误,我猜是因为
gzip
CRC字段出现在
文件
的
末尾,并且它需要整个
gzip
压缩
文件
来解压缩。即使我无法解压,因为错误
的
CRC,这是可以
的
。有没有办法解决这个问题并解压缩部分.gz
文件
?data = f.read() File "/usr&
浏览 2
提问于2009-11-14
得票数 8
回答已采纳
1
回答
如何检查两个管道子进程
中
是否有一个在
python
中
失败?
python
、
exception
、
pipe
、
subprocess
以这段代码为例(tar可以被-z -J -j压缩,并且有一个tarfile特定
的
模块,我知道,但它表示一个长时间运行
的
进程) tarcmd = Popen(['tar', '-cvf', '-', '/home'], stdout=PIPE)
浏览 1
提问于2016-06-07
得票数 0
2
回答
C# HttpWebRequest -使用
Gzip
压缩
c#
、
.net
、
httpwebrequest
、
compression
、
gzip
我有一个制作大量HttpWebRequests
的
程序,我读过关于使用
gzip
压缩来
加速
响应数据下载
的
文章。我知道
gzip
是什么,它是如何工作
的
,但我不知道它在C#
中
是如何工作
的
。假设我有一个简单
的
GET请求:request.Metho
浏览 1
提问于2013-09-25
得票数 2
回答已采纳
2
回答
用
Python
2.7将.csv.gz转换为.csv
python
、
python-2.7
、
csv
、
dictionary
、
gzip
我已经阅读了有关SO和其他各种地方
的
文档和一些额外
的
文章,但我不太明白这个概念:我正在尝试将一个results.csv.gz转换成一个results.csv
浏览 5
提问于2018-06-29
得票数 0
回答已采纳
1
回答
使用
gzip
从子流程Popen调用解压缩stdout
python
、
gzip
、
subprocess
、
pipe
、
iostream
可以使用
gzip
直接解压缩通过subprocess.Popen触发
的
命令
的
stdout吗?我试过了,但它不起作用:pipe = subprocess.Popen(["cat tmp.txt |
gzip
--stdout"], stdout=subprocess.PIPE) output =
gzip
.open(pipe.stdout) while output.readline().rstrip():
浏览 0
提问于2011-12-21
得票数 2
回答已采纳
4
回答
如何
处理
包含额外数据
的
Gzip
文件
?
python
、
gzip
我正在编写一个脚本,它将以
gzip
流
的
形式
处理
来自仪表
的
数据。在大约90%
的
情况下,
gzip
模块工作得很好,但是一些流会导致它生成IOError: Not a gzipped file。令我感到奇怪
的
是,
Python
无法
处理
这些
文件
有两个原因:
Gzip
和7zip都可以在没有问题
的
情况下打开这些“填充”
文件
。
Gzip
和
Python</
浏览 2
提问于2011-02-08
得票数 15
回答已采纳
1
回答
如何从warc.wet.gz中提取每个有效载荷?
python
、
common-crawl
、
warc
我一直试图从公共爬虫
的
湿
文件
中提取文本数据。我目前使用
的
是因特网存档
的
warc解析器w = warc.open(fileName) text = record.payload.read() 但是,这种方法提供
的
有效载荷不到一半
的
数据。是否有其他更好
的
方法可以提供
文件
中
每个有效负载
中
的
所有数据。
浏览 8
提问于2016-01-05
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何在Spark中处理结构化流式数据,如日志文件或传感器数据?
CSV文件在Python中的几种处理方式
每日一模块:gzip
优化页面访问速度(四)——前端优化
如何在PYNQ和ZYNQ上用FPGA加速神经网络
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券