我有一个Pandas dataframe，其中一些列的值超过65536个字符。当我尝试使用df.to_sql(con=engine, name=table_name, if_exists='replace', index=False)将数据导出到MySQL时，它们被截断为65536个字符。如果列的值大于65536，有没有办法自动将它转换为LONGTEXT或BLOB (而不是文本)
浏览 23提问于2019-07-10得票数 2
我试图在Pandas dataframe中找到有超过64个字符的列。 if (df[col].str.len()).any() > 64:
浏览 1提问于2018-11-05得票数 4
回答已采纳
1回答
请建议在一个事务中执行SQL语句和pandas dataframe .to_sql()的方法因此，基本上我需要使用dataframe的.to_sql在一个事务中删除然后插入
我将sqlalchemy引擎与pandas.df.to_sql()一起使用
浏览 0提问于2018-06-25得票数 1
我正在使用pandas通过SQLalchemy将数据写入SQL数据库。 我将数据加载到DataFrame，然后使用to_sql()方法。 pandas to_sql()方法会回滚吗？例如，如果在将数据插入数据库的过程中发生错误，我可以将其回滚到原始数据吗？
浏览 175提问于2020-08-09得票数 1
回答已采纳
我使用teradatasql包作为python和Teradata之间的连接器，它是Teradata的本地解决方案，用于从DB加载数据。但是，我想将我在python中创建的数据框插入回DB。是否可以使用teradatasql包将数据帧写入数据库？ 谢谢
浏览 14提问于2020-07-13得票数 1
回答已采纳
我正在尝试从MS SQL表中读取数据，其中一列包含超过1024个字符的varchar。当我将查询读入数据帧时，字符串被截断为1023个字符。请参见下面的代码和输出。有人知道如何将超过1023个字符的字符串放入数据帧吗？我到处寻找，在DataFrame文档中，但我还没有找到答案。
在下面的代码中，表test包含一个列's‘，其中一行有一个长度为1100的字
浏览 27提问于2017-01-22得票数 1
回答已采纳
我正在尝试找出如何遍历.CSV文件中的行，并将数据输入到sqlite中的表中，但前提是该行中的数据满足一定的条件。 我正在尝试建立一个关于我个人消费的数据库。我已经使用python对我的支出数据进行了分类，现在我想将这些数据输入到一个数据库中，每个类别作为一个不同的表。这意味着我需要对数据进行排序，并根据支出类别将其输入到不同的
浏览 12提问于2021-09-26得票数 0
s = (["id" "title" "name"] ["2" "hide" "joh"]我需要得到长度超过2个字符的字符串值。由于数据相当大，所以我也尝试了DataFrame.iterrows或pandas中的</em
浏览 1提问于2022-06-19得票数 0
回答已采纳
我理解它在加载数据时所带来的好处。
是否建议在Server任务中启用它？也许只要一直做单身插入就行了？我仍然看不出fast_executemany会怎么变慢。
浏览 0提问于2020-11-23得票数 2
回答已采纳
1回答
我有一个简单的任务，它正在发挥作用，但它正在漫长地完成。任务包括从api (json文件)检索数据，并比较该数据是否已经在数据库上。
如果数据位于数据库= update项上，则on =insert。为此，我循环遍历数据库上的一组当前item_id，并为每个场景执行语句。在另一个任务上，我只需要一次从一个数据中插入所有数据，所以我使用了df.to_sql和method=multi和chunksize = 50，它工作得
浏览 9提问于2022-07-16得票数 0
回答已采纳
我使用的是pandas 0.16和sqlalchemy。是否可以只将数据帧的结构(即列名和数据类型)导出到SQL？我所能做到的最接近的结果是只导出第一行：然后我必须做一个截断表。但是，to_csv和to_sql方法之间存在不一致之处: to_csv将布尔字段写为字符串'TRUE‘或'FALSE’，而to_sql<
浏览 4提问于2015-04-20得票数 3
1回答
我有一台SQL Server，其上有我想使用pandas来更改数据的数据库。我知道如何使用pyodbc将数据放入DataFrame中，但是我不知道如何将该DataFrame放回我的SQL Server中。我试图用sqlalchemy创建一个引擎并使用to_sql命令，但我无法让它工作，因为我的引擎永远不能正确地连接到我的数据库。import pyodbc
import pa
浏览 16提问于2019-04-19得票数 1
回答已采纳
我有一个数据集，它有时包含由于大小而无法插入到SQL中的无关注释。注释与我正在做的事情无关，但格式不好，所以我不能常规地通过查找代表其开头的符号来找到它们。我需要的是找到每个长度超过250个字符的单元格，并将其替换为保留积分(如果您可以按列执行此操作)，因为在一天结束时，我希望在每个文件中保留两列，所以我可以在dataframe.columns中调用x:= (column_name to )来做这件事
下面的示例代码
浏览 6提问于2020-03-05得票数 0
回答已采纳
我正在为HANA数据库连接创建一个sqlalchemy引擎(安装了pyhdb和sqlalchemy-hana )，并将其传递给pandas的to_sql函数用于数据帧：我在Hana模式中创建了一个表，该表与我试图从dataframe传递给它的内容的</
浏览 3提问于2017-06-30得票数 0
1回答
我是雪花新手，只是想了解雪花中的数据加载。
假设我在Azure ADLS或Amazon S3中有一些文件。我使用python读取这些文件，进行一些转换，并使用Pandas 'to_sql‘函数将数据加载到雪花表。雪花是否使用任何暂存区域先加载数据，然后将数据移动到表中？还是直接将数据加载到表中？
浏览 4提问于2022-08-20得票数 1
回答已采纳
我试图使用Pandas对列进行某种长度验证。现在，假设我有一个名为dbo.Test1的SQL表，其列数据类型和长度如下：
CREATE TABLE [dbo].test.csv，然后使用to_sql导入这些数据。当运行时，它将抛出一个错误，因为Column3数据在第一行(13)中对于第3 (5)列的长度设置来说太大了。我的问题是- Pandas中是否有一种方法可以拒绝此记录并导入没
浏览 4提问于2022-04-18得票数 0
1回答
我正在编写一个函数的测试，该函数使用数据帧的to_sql()方法将熊猫数据帧发送到sql数据库。为了避免实际发送任何内容，我使用mock.patch('pandas.DataFrame.to_sql')模拟该方法。我正在测试<em
浏览 2提问于2019-03-22得票数 0
我已经创建了一个包含32 in财务数据的SQLite数据库(我从csv文件开始，然后在pandas中使用to_sql命令)。更具体地说，该数据库有超过5.5亿行和6列(3个字符串列、2个浮点列和一个日期-时间列)。我想使用pandas执行一个简单的分组计数查询，但这似乎需要很长时间。我做了以下工作：from sqlalchemy import create_
浏览 0提问于2015-05-07得票数 2
1回答
COLUMN_ALLIANCERANK, COLUMN_ALLIANCEID, 输入的dataframe除了最后一个数值字段(101,102.)是数据文件中的索引。 table.create
浏览 0提问于2016-04-10得票数 0
我正在使用Apache zeppelin，我可以分别从postgres和clickhouse获得结果。但是我需要合并这两个查询。
浏览 31提问于2019-01-29得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
