3回答
我正在尝试打开一个4605227行(305MB)的txt文件data = np.loadtxt('file.txt', delimiter='\t', dtype=str, skiprows有没有更快的方法来读取这个txt文件并创建一个pandas数据帧？编辑:现在解决，谢谢。为什么np.loadtxtx()这么慢？
浏览 28提问于2019-11-14得票数 0
回答已采纳
2回答
假设我有一个python程序，我想执行以下操作 grep "username" accounts.txt 在1行中 accounts.txt和我的py文件在同一个文件夹中。我知道在C中有一些像System(grep "username“accounts.txt)这样的函数，我想知道在python<e
浏览 22提问于2019-09-08得票数 0
回答已采纳
我想搜索并替换文本文件中的一些文件路径。平均而言，我的文件大小在2GB以上。"D:\LargeFilesFolder\large_file
浏览 3提问于2016-06-01得票数 0
回答已采纳
1回答
用Pandas读取大文本文件
、、、、
我一直试图用Pandas读取几个大的文本文件(大小约为1.4GB-2GB)，使用read_csv函数，但没有效果。下面是我使用的版本：
df = pd.read_csv(data.txt')
它用一条消息：Ker
浏览 2提问于2014-05-01得票数 7
我有一个文件夹，里面有50个大的.asc类型的文件，每个文件的大小约为2.5 50。这些文件包含来自CAN信号的数据，如何使用python读取这些文件。我尝试使用numpy genfromtxt读取文件，但有与内存相关的问题.What是将文件夹中的所有.asc文件</
浏览 16提问于2020-12-30得票数 0
1回答
我正在尝试将值从一个文件读取到C++向量。该文件如下所示：1.,2.5.,6.9.,10.我在python 3中有代码来读取文件并将值存储在列表中。我看了几个C++示例，但无法获得像python代码那样有效(简短和简单)的方法。有人能提出在C++中实现这一
浏览 0提问于2018-01-28得票数 0
我有一个非常大的文件，我想打开它并从它中读取特定的行，我总是知道我想要的数据是什么行号，但是我不想每次读取整个文件只是为了读取那个特定的行。
是否有一种方法只能读取Python中的特定行？或者什么是最有效的方法来做到这一点(即尽可能少地读取
浏览 3提问于2020-12-10得票数 1
回答已采纳
如何打开格式的大文本文件在Python里。我试过使用Pandas和numpy，但是read_csv方法或其他类似的方法不起作用。更新:我能够使用以下代码行读取.txt文件：
f = open("demofile.txt", "r&quo
浏览 0提问于2019-12-13得票数 1
回答已采纳
我有一个巨大的dna序列保存在一个140 to大小的.txt文件中，我想使用txt文件编辑器打开它。Notepad，Python，R不允许打开这样的文件。是否有专门的文本文件编辑器来打开大文件？我目前正在使用Python中的代码来打开140 in的大文件.txt</e
浏览 5提问于2022-03-06得票数 1
回答已采纳
2回答
我一直在node js中做一个压缩.txt文件的项目。我的主要问题是如何从图像中读取数据来进行压缩。我一点也不知道如何使用Buffer、stream甚至Blob来实现这一点(通过在某些时候搜索兴趣，这些都是可能的方法)。我在一些python库(如open-csv和Pillow (PIL) )方面的经验不多。到目前为止，我已经使用cv2.imread()函数
浏览 3提问于2020-08-05得票数 2
回答已采纳
1回答
我编写了一个Python脚本，它生成一个输出到一个文件。Mathematica将它作为输入文件读取，然后使用它进行一些操作，最后返回另一个输出文件。反过来，最后一个文件应该由相同的初始Python脚本读取，以执行更多的操作。我将在下面(非常简化)的例子中写我正在处理
浏览 3提问于2016-05-18得票数 5
1回答
我希望程序也能够将TXT文件转换回CSV，所以我创建了一个TXTReader类。我在读取大的TXT文件时遇到问题。这与小文件完美地工作，但与我的31MB TXT文件真的很慢。然后我尝试了我自己的老办法，迭代了fullText中的所有字符并检查"\""，因为所有的字符串在TXT中都有
浏览 0提问于2015-08-03得票数 1
当我用python test.py在我的集成开发环境和命令提示符中尝试以下代码时，我的文本文件仍然是空的： file.write("Hello World")
我很困惑，因为这个方法以前是有效的。因此，我在python控制台
浏览 2提问于2020-06-02得票数 0
1回答
因此，我想使用trio (异步)打开文件，然后由于文件相当大，请读取其中的特定行with open("text.txt") as f: if i == 3:这将打印文件第二行的内容
浏览 8提问于2019-08-12得票数 1
回答已采纳
1回答
为了处理一些文本数据，我尝试将一堆Google文件读入。我必须首先将它们全部保存为.txt文件吗？在python中是否有一种有效的方法来做到这一点？或者是否可以使用.gdoc文件？
谢谢你的帮助！
浏览 3提问于2021-08-01得票数 1
回答已采纳
3回答
我正在尝试使用python更快地对文件进行gzip压缩，因为我的一些文件小到30MB，大到4 GB。
有没有比下面的方法更有效的创建gzip文件的方法？有没有办法优化以下内容，这样如果一个文件足够小，可以放在内存中，它可以简单地读取要读取的文件的整个块，而不是以行为单位进行<
浏览 3提问于2014-04-01得票数 3
2回答
为了将pdf转换为文本，我使用以下命令：但我有超过1000个pdf文件，我需要转换为文本文件，然后进行分析。有什么方法可以让我使用这个命令来迭代pdf文件并转换所有这些文件呢？
浏览 4提问于2015-06-03得票数 1
回答已采纳
2回答
我已经创建了一个用于预测分析的python脚本，使用pandas，numpy等。我想将我的结果集发送到java应用程序。是他们做这件事的简单方法。我发现我们可以使用Jython进行java python集成，但它使用的数据分析库并不多。任何帮助都是最好的。谢谢你。
浏览 25提问于2016-08-02得票数 2
下面是在windows下逐行读取csv文件的方法。但是，在将csv文件复制到linux服务器时，它会失败。值得一提的是，性能是一个问题，因为csv文件很大。因此，我担心在使用诸如条带之类的东西时的字符串复制。
浏览 1提问于2010-02-23得票数 2
回答已采纳
我有一个4000万行x54列的MySql格式的表。我尝试使用read_sql分块读取表，但内存不足(我使用的是32 gb的8核EC2实例)。然后我尝试了Limit和Offset方法，但它真的很慢。有没有什么有效的方法可以在不损失内存的情况下更快地读取表。目前我正在使用它来读表，但它确实很慢，而且效率也不是很高
浏览 13提问于2020-06-02得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
