我有一个很大的*.csv文件，我想在R中使用SQLlite和dplyr动词查询它，我如何才能将它连接到SQLlite而不将其读取到内存中？我可以解析它，因为我也有一个fst版本，但整个文件是120 is。
浏览 9提问于2021-01-18得票数 0
回答已采纳
4回答
我有一个10 to的CSV文件，其中包含一些我需要使用的信息。
由于我的PC内存有限，我无法在一次批次中读取内存中的所有文件。相反，我只想迭代地读取这个文件的一些行。假设在第一次迭代时，我想读取第一个100，在第二次迭代中，读取</
浏览 0提问于2017-03-20得票数 15
这显示了从SQLite数据库读取图像文件与直接从SD卡中的文件系统读取图像文件之间的区别。哪一个更快？
浏览 0提问于2010-06-17得票数 1
回答已采纳
如何将Access数据库(.accdb)转换为SQLite数据库(.sqlite)？
请多关照，任何帮助都将不胜感激。
浏览 5提问于2012-03-29得票数 3
我在使用Autodesk Forge模型衍生API时遇到了一个奇怪的问题。在使用端点获取对象的属性时，我有时会得到包含以下文本的404响应：模型被上传为IFC，下面是一个失败的请求示例：
curl -H "Authorization: Bearer <token>" https://
浏览 0提问于2021-03-03得票数 1
在我的一个主要数据集成测试工具中，我创建并使用了Fluent NHibernate的SingleConnectionSessionSourceForSQLiteInMemoryTesting，为每个测试获得一个新的会话并不是测试工具的第一次设置和拆卸失败，实际上，测试工具成功地引导内存中的数据库，因为应用程序将在生产环境中引导真正的数据库。当<e
浏览 0提问于2010-06-12得票数 2
我需要使用read.table从csv (逗号分隔值)读取一些数据库，我希望知道如何为每种类型的变量计算分配的内存大小。
该怎么做呢？编辑--换句话说:为从.csv文件读取的通用数据帧分配多少内存R？
浏览 1提问于2013-02-06得票数 3
回答已采纳
我有一个Python脚本，它循环遍历文件夹，并在每个文件夹中对我们的Redshift集群执行sql文件(使用psycopg2)。=False)def execute_query(self, source_path):
def read_sql_file(self,
浏览 2提问于2014-11-05得票数 0
我有一个大的CSV文件，我需要清除运输返回。该文件是我正在通过另一个程序运行的数据库的11 gig转储。Readcount = 1000(Get-Content -Path $CSVFile -Raw -ReadCount $ReadCount) -replace "`r", "" | Set-Content -Path $CSVFile -Force
我
浏览 1提问于2019-12-03得票数 0
回答已采纳
当TreeSet变得非常大(>1GB)时，我希望将TreeSet中最小的元素保存到一个文件中，以释放一些内存。然后，当有更多的空闲RAM时，我希望能够将这些元素重新加载到内存中来处理它们。我的问题是:是否有一些高效的方法来存储一部分TreeSet文件并在以后将其恢复到内存中？
注意，当我将元素重新加载到内存中时，它可能是新TreeSet<e
浏览 1提问于2011-03-16得票数 0
回答已采纳
我有一个10 GB的.dta Stata文件，我正在尝试将它读取到64位R3.3.1中。我正在一个虚拟机上工作，内存大约130 GB (4TB，HD)，.dta文件大约有300万行，变量在400到800个之间。我知道data.table()是读取.txt和.csv文件的最快方法，但是有人建议将大型.dta文件读入R吗？将文件作为
浏览 7提问于2016-08-08得票数 7
回答已采纳
1回答
我有一个拥有100多万条记录的MySQL数据库。我不是数据库的所有者，并且没有对它的写/修改权限。我有一个名为MyDB的小目标数据库，它从巨大的视图中获取一些字段。现在，这些是我在MysqlWorkbench上处理巨大的百万记录表时所面临的问题。+mar
浏览 5提问于2015-02-23得票数 0
回答已采纳
我有一些很大的CSV文件(~183兆)。使用R加载到数据库中的行(8列)，为此我使用duckdb，并使用它的内置函数duckdb_read_csv，该函数用于自动检测每个列的数据类型。，在第9栏中找不到任何不正常的地方。早些时候，我导入了dataset，同时将nrow.check的默认值保持在500，并且它读取
浏览 23提问于2022-11-15得票数 0
对于CSV文件是否有基于开源文件(而不是基于内存)的JDBC驱动程序？我的CSV是根据用户选择从UI动态生成的，每个用户都有一个不同的CSV文件。我这样做是为了减少对数据库的访问，因为信息包含在CSV文件中。我只需要执行SELECT操作。HSQLDB允许在指定索引的<
浏览 11提问于2011-09-27得票数 1
2回答
我的系统上有非常大的数据库(.db)文件，(>20 GB)包含aprrox 500 tables，还有一些表有十亿记录。下面是连接到数据库的第一步。")) con.Open();
浏览 8提问于2014-09-22得票数 0
回答已采纳
1回答
我正在将表数据从AWS Redshift移到python的内存sqllite数据库中。红移表:上述列中的value字段在Redshift中以Decimal表示。当我试图将数据带到sqllite时，我发现从Redshift获得的结果在结果中包含Decimal关键字，因此我无法将它插入sqllite表
浏览 1提问于2018-11-05得票数 0
回答已采纳
在我的Laravel应用程序的预定任务中，我正在读取几个大的gzipped文件，这些文件在外部FTP服务器上从80 my到4gb不等，其中包含基于products属性存储在数据库中的产品。我循环遍历要导入的产品提要列表，但每次返回一个致命错误：“允许内存大小为536870912字节”。我可以将fgetcsv函数的长度参数
浏览 0提问于2020-07-17得票数 5
回答已采纳
我正在开发一个核心数据应用程序，并且已经用我用来测试该应用程序的所有fixture/数据填充了iPhone模拟器中的sqlite文件。我想使用这个sqlite文件作为一组标准化的测试数据。我测试应用程序的设备都有不同的数据集，我想在模拟器中的数据集上进行标准化。在XCode (3或4)中，有没有办法在构建/安装过程中添加一个步
浏览 1提问于2011-01-01得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
