无法将SQL值导出到DataFrame表中

文章/答案/技术大牛

发布

1回答

python、sql、sql-server、pandas

我正在尝试编写一段python代码，对来自SQL的表中的一些数据执行回归，然后将清理后的数据的一些参数导出回一个新的SQL表。mod.fit()print "\n"

浏览 0提问于2016-08-19得票数 0

1回答

如何在SQL Server中使用df.to_sql将两个索引的数据导出到一个表中？

python、sql-server、python-3.x、dataframe

我有一个包含两个索引的数据框，我正尝试将其导出到SQL Server表中。这是我正在使用的代码。grouped_and_summed.to_sql(x, engine, if_exists='append', index=True, index_label=None) 'x‘变量是表的名称，'enginedriver=SQL Server Native Client 11.0?trusted_connection=yes"

浏览 16提问于2021-01-15得票数 0

回答已采纳

2回答

如何将sp_execute_external_script中的值输出到表中

python、sql、sql-server、pandas

有了以下代码，我如何将外部python脚本中的值输出到可以查询的sql表中。pandas as pd df = pd.DataFrame

浏览 1提问于2017-12-24得票数 4

6回答

如何将PySpark中的表数据框导出到csv？

python、apache-spark、dataframe、apache-spark-sql、export-to-csv

我使用的是Spark 1.3.1 (PySpark)，并且我已经使用SQL查询生成了一个表。我现在有一个对象，它是一个DataFrame。我想把这个表对象(我把它叫做“DataFrame”)导出到一个csv文件中，这样我就可以操作它并绘制列。如何将DataFrame“表”导出为csv文件？谢谢!

浏览 813提问于2015-07-13得票数 92

回答已采纳

1回答

对空字段进行数据格式化返回“null”

scala、dataframe、hive、null、apache-spark-sql

默认情况下，我将原始数据加载到我的hive表中，所有列都是字符串。现在，我需要更改hive表的数据类型，以导出到SQLServer。当类型转换为单元列时，空字段返回'NULL'，尝试将蜂窝表加载到dataframe中并对列进行类型化，但仍然对空字段返回'null‘。SQLserver无法识别这样的值。当我从hive或dataframes获得数据时，有人能提出避免显示“n

浏览 1提问于2018-05-30得票数 1

回答已采纳

1回答

将R数据框导出到SQL

sql、r、sql-server

我正在尝试将R dataframe (我之前使用SQL查询创建的)导出到SQL，以便与SQL服务器上的数据表执行合并(联接)。具体地说，如果mydat是R中的一个dataframe，我希望能够按照以下方式做一些事情edw = odbcConnect(<some sql server>) new_matSQLServer_Tables.Table1 a

浏览 0提问于2018-05-04得票数 2

1回答

将导出到SQL表

python、sql

我正在尝试将python数据文件导出到Server表中。有更好的方法吗？我搞错了。Dataframe - results_out输出SQL表- FraudCheckOutput results_out.to_sql(con=cnn_

浏览 1提问于2014-07-17得票数 0

回答已采纳

1回答

试图导出SQL表，但使用Python + PYODBC和熊猫时出错

python、sql、pandas、pyodbc

你好，我正试图将一个非常大的SQL表(大约170万行)导出到excel或csv文件中，我的问题是当我没有指定内存限制错误时，我猜数据太大，无法存储在内存中。values =np.array(转换(V)表示v的值)import pyodbc

浏览 6提问于2022-06-17得票数 0

1回答

重新组织DataFrame并写入SQL数据库

python、sql、database、pandas、dataframe

我有以下DataFrame：表名：District_Area#Date Morning时，<em

浏览 5提问于2015-08-08得票数 1

回答已采纳

1回答

数据长度超过65536个字符的Pandas dataframe to_sql

python、mysql、sql、pandas、dataframe

我有一个Pandas dataframe，其中一些列的值超过65536个字符。当我尝试使用df.to_sql(con=engine, name=table_name, if_exists='replace', index=False)将数据导出到MySQL时，它们被截断为65536如果列的值大于65536，有没有办法自动将它转换为LONGTEXT或BLOB (而不是文本)，这样表内容就不会被截断？

浏览 23提问于2019-07-10得票数 2

1回答

如何使用Pandas Write_Frame将结果导出到cx_Oracle中的Oracle数据库

python、sql、oracle、pandas、cx-oracle

我正在尝试将Pandas DataFrame导出到Oracle数据库。我在Pandas中遇到了Write_Frame函数，这听起来正是我所需要的。然而，我已经做了大量的在线搜索，只是无法让它发挥作用。import pandas.io.sql as psql output = psql.write_frame(MyResults, name = 'MySchema.MyTable', con =flavor = 'oracle', if_exis

浏览 3提问于2014-03-17得票数 7

回答已采纳

2回答

Pandas.read_sql_query将int读入浮点数

python、pandas、dataframe

我正在使用csv + df.to_csv将SQL数据库导出到df.to_csv中，存在一个问题，即整数字段在DataFrame中表示为浮点数。另外，我不知道哪一列有哪一种类型(所有表的代码都是通用的) <

浏览 5提问于2021-06-16得票数 0

回答已采纳

1回答

Azure数据湖-如何在AzureSQL DB中插入外部表？

azure-data-lake、u-sql

从Azure数据湖中，向AzureSQL DB中的外部表插入记录会产生以下错误：CREATE DATA SOURCE myDataSourceWITH PROVIDER_STRIN

浏览 0提问于2018-06-14得票数 1

3回答

为什么我不能在Python中迭代Dataframe对象？

python、pandas

我试图将一堆数据文件导出到SQL表中，跳过有错误的表，但是得到了这个错误："TypeError：'DataFrame‘对象是可变的，因此它们不能被散列。'tableName1', df3:'tableName3'} try: df.to_sql

浏览 5提问于2022-10-03得票数 -2

回答已采纳

2回答

在R中运行要搜索的值在DF中的MySQL查询

mysql、r

我有一个包含多个列的DF，但其中有一列是一些预处理阶段的结果，该列包含我需要使用MySQL查询进行搜索的值。如何让查询直接读取该列或另一个DF，而不是手动添加它们？

浏览 2提问于2017-01-24得票数 1

3回答

是否有将Azure SQL数据库表数据导出到Excel的自动化方法？

excel、azure、azure-sql-database、azure-blob-storage、azure-data-factory-2

我正在尝试将Azure SQL数据库表数据自动导出到Excel表中，我试图用Azure database来实现它，但由于Azure数据工厂没有对Excel的直接支持，所以无法成功。我在一些文档中发现，应该首先将SQL数据库作为文本文件导出。在该文档之后，我使用Azure database将SQL数据库数据作为CSV文件导出到Azure Blob存储中，无法继续下去

浏览 1提问于2019-06-14得票数 2

回答已采纳

3回答

列名sql server中的重音

php、sql-server

我试图通过php查询sql服务器数据库，字段名有重音，我得到以下错误。警告: sqlsrv_fetch_array()希望参数1是资源，布尔值 $sql='SELECT introductión FROM table; while( $row = sqlsrv_fetch_array( $stmt ) ) {}

浏览 1提问于2017-08-23得票数 0

回答已采纳

1回答

从Bigquery到Avro

google-bigquery、avro、python-bigquery

我现在运行一个SQL查询将公共BigQuery数据集中的数据提取到一个表中，在那里我可以很容易地使用导出功能来生成Avro文件并将其保存到GCS中。如何以编程方式生成此文件？我已经使用BQ API将表读取到Pandas Dataframe中，是不是读取到Pandas DF，然后将其导出到Avro的最佳选择？或者这是一种更好的方法。

浏览 20提问于2019-06-03得票数 0

回答已采纳

5回答

将大量数据从BigQuery加载到python/大熊猫/dask

pandas、google-cloud-platform、google-bigquery、bigdata、dask

我在BigQuery中有一个大表(假设每天插入2000万行)。我希望有大约2000万行数据，在python/大熊猫/dask中有大约50列的数据来做一些分析。我尝试过使用bqclient、panda和bq存储API方法，但在python中拥有500万行需要30分钟。还有其他办法吗？甚至有任何谷歌服务可以做类似的工作？

浏览 2提问于2019-03-06得票数 6

回答已采纳

1回答

在HDFS上写入数据需要很长时间

scala

在HDFS上写入文件创建多个零件文件(200)并花费很长时间我正在将配置单元表(使用SqlContext.sql)加载到数据帧1(6K记录)并注册到临时表。我将临时表与另一个配置单元表(500万条记录)连接在一起，并加载到dataframe 2中。我使用左外部连接更新dataframe 1和dataframe 2的值，并尝试将dataframe

浏览 71提问于2019-05-18得票数 2

点击加载更多