我在sql中有一个表，我希望将其读入到pandas数据帧中。我可以读入表，但所有列数据类型都是作为对象读入的。当我将表写入csv，然后使用read_csv重新读回它时，假定数据类型是正确的。我在df中有650列，因此显然不可能手动指定数据类型。
浏览 46提问于2019-11-14得票数 0
4回答
我想指定在执行pandas.read_sql时返回的dtype。特别是，我对节省内存和将浮点值作为np.float32而不是np.float64返回感兴趣。我知道以后可以使用astype(np.float32)进行转换，但这并不能解决初始查询中的大内存需求问题。在我的实际代码中，我将拉出8,400万行，而不是这里显示的5行。pandas.read_csv允许将dtype指定为dict，但我看不出如何使用read_sql来做到这一点。
浏览 7提问于2016-08-17得票数 22
回答已采纳
当使用pandas将查询的输出加载到DataFrame中时，标准行为是将包含NULL的整型字段转换为浮点型，以便NULL变为NaN。从pandas 1.0.0开始，它们包含了一个名为pandas.NA的新类型，用于处理具有NULL的整型列。但是，当使用pandas.read_sql()时，当出现NULL时，整型列仍然转换为浮点型，而不是整型。除此之外，read_sql()方法不像read_csv()那样支持使
浏览 26提问于2020-03-18得票数 2
我正在使用sqlalchemy、pyodbc和pandas read_sql对从数据库中提取的一些数据进行格式化，并将其作为dataframe df返回。我想使用以下命令逐行应用dataframe的每个“单元格”中的数据格式，并排除前两列：
df.iloc[6, 2:] = (df.iloc[6, 2:]*100).map('{:,.2f}%'.format过去，当我从csv文件中读取数据时，这种方法非常有效，但现在从数据库中读取数据时，该行上会出现一个ValueEr
浏览 6提问于2016-08-18得票数 0
我正在使用read_sql函数从postgresql表中拉取数据。当我将数据存储在数据帧中时，我发现一些整型dtype列会自动转换为float，有什么方法可以在仅使用read_sql函数的情况下避免这种情况
浏览 3提问于2019-07-31得票数 0
对于pandas=1.4.0，它发出警告，不要直接在read_sql中使用psycopg2，而是要使用sqlalchemy。在尝试进行这样的迁移时，我无法解决如何将tuple作为查询参数之一传递。例如，这目前起作用：import psycopg2
"SELECT * from news where id in %s",psycopg2.connect("dbname=m
浏览 5提问于2022-01-24得票数 2
回答已采纳
1回答
我有一个在Apache下运行的烧瓶python应用程序(使用mod_wsgi)。一个特定的URL将导致应用程序使用熊猫和ceODBC查询微软的数据库。这通常会导致以下异常：
File "C:\proj\pd_test\py_virt_env\Lib\site-packages\pandas\io\sql.py", line 1046, in read_sql\py_virt_env\Lib\site-packages\pandas\io\sql.py",
浏览 3提问于2014-11-21得票数 0
回答已采纳
问题1:使用pandas read_sql读取MySQL。生成的dataframe有一列，其数据类型为unicode字符串。此列将转换为元组并在以下查询中使用。问题2:使用pandas read_sql读取Redshift。该查询类似于在一个字符串上，它给了我一个错误。它将其视为一个空字符串("")，后跟无法理解的符号，如(Hello 'There&q
浏览 15提问于2016-09-19得票数 0
1回答
它开始抱怨类型错误：dtype_df(sql = query, con = some_credentials(), dtype = dtype_df)
我做了我的研究，我发现这个问题与使用一个较旧版本的熊猫的dtype参数有关。这是没有意义的，因为在与代码更新之前，代码是起作用
浏览 4提问于2022-02-09得票数 0
回答已采纳
它不能正确地将大时间戳值(在遥远的将来，例如‘2286-082700:00:00.000’)转换为datetime64ns值。有人知道用雪花连接器解决这个问题的方法吗？import snowflake.connectorcur = cs.execute('SELECT * FROM TARGET.TESTTABLE
浏览 16提问于2022-08-23得票数 1
我使用的是带有sqlite数据库的pandas.read_sql，它非常慢。有什么方法可以提高pandas.read_sql的速度吗？以下是代码片段： self.logger.info('{} - START read_sql: {}'.format(table)) index_col=indexcolname)
sel
浏览 101提问于2019-01-27得票数 1
1回答
该程序主要是使用pandas和numpy的Python编写的。对数据还执行了许多操作。this_trade = pandas.read_sql("""
浏览 3提问于2017-05-24得票数 0
我正在使用便携式python 2.7.6.1，我想将一个查询从oracle数据库导入到python大熊猫中。我已经搜索了几个例子，并提出了以下代码：import pandas as pd
df = pd.read_sql('select * from databasetable', engine, index_col = index)
程序在‘pd.rea
浏览 2提问于2015-02-19得票数 4
回答已采纳
2回答
修改浮动值列
、、
我正在尝试使用Pandas read_sql来验证我的应用程序中的一些字段。当我使用SQL 读取我的数据库时，我得到以下值：但是使用Pandas读取相同的sql查询，小数位被忽略并添加到全数部分中。
浏览 5提问于2019-10-30得票数 2
2回答
time: {:.1f}'.format(time.time() - start_time))
print('Read_sql1: {:.1f}'.format(time.time() - start_time))print('Read_sqlDatabase time: 0.0
Read_sql time for ta
浏览 4提问于2016-10-14得票数 2
如何在python中使用sql这个SQL查询？create tablefrom db
另外，我如何用原生python语言(使用pandas)来实现呢？
浏览 31提问于2019-10-29得票数 0
1回答
我现在使用的是pandas开发版(2014年5月9日)。# Never do this -- insecure!, t)然而，正如我所理解的，pandas接口需要我去做eng = sqlalchemy.create_engine/path/to/file.db')
sql.read_sql("SELECT * FROM mytable WHERE myid = {0};&q
浏览 3提问于2014-05-09得票数 2
回答已采纳
我在我的德语计算机上使用DataFrame.read_sql_query和SQLite时遇到问题:根据数字的本地设置，十进制字符是逗号'，‘而不是点’‘。使用CSV和pandas，可以很容易地在函数read_csv和to_csv中使用decimal参数将小数字符设置为'，‘。但是我在sql函数read_sql / read_sql_query中缺少这个参数。当我从SQL表中读取一个浮点值时</em
浏览 5提问于2020-11-12得票数 0
2回答
在pandas中使用read_sql时，该函数需要确定哪些列应该被视为日期(参见下面的代码片段)。但是我事先不知道哪些栏是日期。给定一条select语句，我需要检索它的列类型并将结果集加载到pandas数据帧中。我期望pandas在从select创建dataframe时标识date类型的列并分配类型。在select语句或数据帧中标识date类型的最佳方法是什么？我尽量避免使用pyodbc运行语句来检测类型。impor
浏览 60提问于2020-10-03得票数 1
我正在尝试使用cx_Oracle模块从Oracle数据库中提取数据并将其放入Pandas数据帧中。使用fetchall()函数时，如下所示cursor.arraysize = 1000rows = results.fetchall()
提取速度与使用R Oracle库提取非常相似，大约需要8秒(数据大小约为750,000行和30列混合数据类型)
浏览 3提问于2016-07-06得票数 3
云服务器
ICP备案
对象存储
实时音视频
云直播
腾讯云开发者
