尝试将记录从Dataframe推送到SQL Server表

文章/答案/技术大牛

发布

1回答

python、python-3.x、dataframe、azure-sql-database、databricks

我正在尝试找到一种方法，将数据帧中的所有内容都推送到SQL Server表中。我在谷歌上搜索了一下，想出了这个。option("user", "u_name") \ .save() 我的数据帧被命名为‘集群’，它的类型是pyspark.sql.dataframe.DataFrame

浏览 7提问于2020-02-07得票数 1

1回答

将Pandas datetime转换为插入MS SQL Server

python、sql-server、pandas

我正在尝试转换Pandas dataframe datetime列以插入到MS SQL Server中。_libs.tslibs.timestamps.Timestamp HY105 SQL Server中的" datetime“列是datetime。

浏览 13提问于2021-02-07得票数 0

1回答

将SQL Server表缓慢加载到pandas DataFrame中

python、sql-server、pandas、pyodbc

当使用pyodbc和函数pandas.read_sql(pyodbc_conn，pyodbc)从SQL Server DB加载1000多万条记录时，Pandas变得非常慢。以下代码最多需要40-45分钟从SQL表中加载1000-1500万条记录：Table1impor

浏览 0提问于2018-11-20得票数 7

2回答

适用于MS SQL的pandas to_sql

sql-server、pandas、sqlalchemy、pandas-to-sql

我正在尝试将数据帧保存到使用Windows身份验证的MS SQL。我尝试过使用engine、engine.connect()、engine.raw_connection()，它们都抛出了错误:分别是'Engine' object has no attribute 'cursorparams = urllib.parse.quote('DRIVER={ODBC Driver 13 for SQL Server};'

浏览 54提问于2019-02-12得票数 4

1回答

有没有一种方法可以使用AWS胶水作业将“好”记录仅写入SQL Server表并返回“坏”记录？

sql-server、amazon-web-services、apache-spark、pyspark、aws-glue

我正在尝试编写一个粘合(PySpark)作业，执行一些ETL，并最终将数据写入SQL Server中的一个表(在AWS Glue Catalog中定义)。在将记录写入SQL Server表时，可能有一些约束(例如:主键、外键、列类型)阻止某些记录(即“坏”记录)被写入到表中。发生这种情况时，Glue作业会抛出一个错误，并且作业会失败。我使用write_dynamic_frame_f

浏览 9提问于2019-04-10得票数 0

1回答

如何在SQL SERVER中通过存储过程插入数据表

sql-server

尝试通过存储过程将数据表中的多条记录插入到SQL表中，我需要将数据表中的多条记录一起插入。我使用的是C#编程语言，我想通过ADO.net存储过程将许多记录一起发送到SQL server。我想了解有关数据表类型的知识，如果对我有帮助的话，可以使用它。

浏览 33提问于2019-06-02得票数 0

回答已采纳

2回答

无法使用python插入数据库

python、sql-server、sftp、sql-insert

(4104) (SQLExecDirectW)') 当我尝试调用以下函数并插入到表dbo.sftpserverlist中时。

浏览 6提问于2020-10-21得票数 1

回答已采纳

1回答

将日期值从R推送到缺少值的Server表

sql、r、sql-server

我使用DBI将数据帧从R推送到Server表中。在表中，其中一列的类型为DATE。我遇到的问题是，当R数据帧中的任何日期值丢失(NA)时，我会得到一个错误。这是我的密码：con <- dbConnect() ## Create a table= "my_table", value = df, append = T

浏览 2提问于2019-02-01得票数 0

回答已采纳

1回答

我想在.NET中将我的SQL数据异步同步到elasticsearch来索引数据，这样我就可以快速搜索我的数据。

.net、elasticsearch

目前，搜索是使用SQL查询完成的，这需要花费太多的时间来给出结果。所以我打算把它移到elastic search。

浏览 0提问于2021-03-25得票数 1

1回答

将ssis错误返回到sql查询

sql-server、ssis

我必须承认，这是我的组织第一次尝试将这3种“系统”一起使用。所以，我们可能会犯一些建筑上的错误。2) ETL包有错误，但网页报告成功完成。需要注意的是，一旦SQL查询调用SSIS包，SQL查询和SSIS包执行就变得并行，而不是顺序执行，因此SQL查询完成并报告成功，无论SSIS包是否实

浏览 0提问于2016-02-26得票数 1

1回答

我们如何使用Python/Pandas将数据推送到Azure SQL Server？

python、sql-server、python-3.x、azure、azure-sql-database

当我运行下面的脚本时，我会从我的笔记本电脑中得到开始和结束的IP地址。现在，我正在尝试使用下面的代码登录Azure数据库，在一个文件夹中循环遍历几个CSV文件，然后将每个文件推入我的数据库。Server}' + 'Database=%s;' % 'ryan_sql

浏览 2提问于2022-01-24得票数 0

回答已采纳

2回答

如何将Oracle数据与Server同步

sql-server、oracle、sql-server-2008、oracle-11g

我在一台具有唯一IP的计算机中有一个Oracle 11g数据库，在另一台计算机中有一个Server 2008数据库。Oracle中的表(A)包含一些字段(并非所有字段)，这些字段与Server中的表(B)相同。怎么把这事做完？

浏览 0提问于2016-12-01得票数 2

1回答

如何将数百万行数据从Server迁移到任何客户端或云？

sql-server、asp.net-web-api、cloud、snowflake-cloud-data-platform

我有代码可以将数据从Server上传到雪花。步骤：谢谢

浏览 6提问于2022-02-08得票数 -2

1回答

需要在单个事务中将数据存储在SqlAzure和表存储中。

azure

我需要将历史数据存储在表存储中，将主数据存储在Sql Azure中。也就是说，如果数据发生更新，历史数据应该移动到Azure表存储中，新修改的数据应该在单个transaction.if中在Sql Azure中更新。任何一个数据库系统出现问题，都应该恢复。同时也让我知道了使用上述方法的优点和缺点:在单个事务中将数据存储在SqlAzure和表存储中

浏览 1提问于2013-11-18得票数 1

2回答

链接服务器查询运行但未完成？

sql-server、oracle、tsql、linked-server、openquery

原问题-with spd_data as (from openquery(IRPROD,'select * from budget_user.spd_data我可以在带宽监视器上看到SQL Server数据的进出。此外，如果我只运行查询的select部分，它将在4秒内返回结果。你知道为什么它没有完成吗？

浏览 1提问于2010-06-29得票数 0

1回答

将Dataframe写入Azure SQL Server表的最佳实践？

dataframe、apache-spark、apache-spark-sql

我正在尝试找出将数据从dataframe (DF)推送到SQL Server表的最佳方法。我昨天对此做了一些研究，并提出了这个想法。._ "url" ->"my_sql_ser

浏览 9提问于2019-10-10得票数 0

回答已采纳

1回答

如何在ASP.net应用程序中启用数据库日志记录

.net、asp.net、logging、visual-studio-2010、database-connection

如何在ASP.net应用程序中启用数据库日志记录？我正在使用VS2010 (ASP.net MVC2项目)，希望看到日志记录突出显示应用程序和数据库之间的数据库活动，包括数据库连接建立(因为我确实在某个地方遇到了与连接相关的错误)。

浏览 2提问于2010-05-28得票数 3

回答已采纳

1回答

我的生产者(SQL* Server)打开了，Kafka关闭了。如何重新处理发往kafka的消息？*

apache-kafka、apache-kafka-connect

我正在使用Debezium SQL Server Source connector通过CDC将数据推送到Kafka。SQL Server表中的数据是连续插入的。当Kafka宕机时，数据还会插入到该表中吗？如果是这样，当我的Kafka打开时，如何获得这些记录？

浏览 13提问于2020-05-22得票数 0

回答已采纳

1回答

将索引从SQL* Server 2008迁移到SQL Azure*

sql-server-2008、azure-sql-database

我正在尝试将数据库从SQL Server 2008迁移到SQL Azure。我相信我已经成功地将我所有的表和存储过程迁移到SQL Azure。但是，当我尝试将一条记录插入到我的一个表中时，我收到一个错误消息： System.Data.SqlClient.SqlException (0x80131904)：此版本的SQL Server不支持没有聚集

浏览 0提问于2012-04-10得票数 1

回答已采纳

2回答

在函数内执行查询时，python ceodbc get无法获取诊断文本消息

python、odbc

我有一个简单的函数 conn = ceODBC.connect("DRIVER={SQL Server};SERVER=temp;Trusted_connection=yes") if ('insert' insql.lower()) and (~recor

浏览 0提问于2014-08-20得票数 1

点击加载更多