使用Sqlite查询将pandas数据框中的数据插入Sqlite
可以通过以下步骤完成：
- 首先，确保已经安装了pandas和sqlite3库。可以使用以下命令安装：
- 首先，确保已经安装了pandas和sqlite3库。可以使用以下命令安装：
- 导入所需的库：
- 导入所需的库：
- 创建一个连接到Sqlite数据库的连接对象：
- 创建一个连接到Sqlite数据库的连接对象：
- 将pandas数据框中的数据保存到Sqlite数据库中的表中：
- 将pandas数据框中的数据保存到Sqlite数据库中的表中：
- 这里的
df是一个示例的pandas数据框，你可以根据实际情况替换为你的数据框。table_name是要插入数据的表名，如果表已存在，可以选择替换或追加数据。 if_exists参数用于指定如果表已存在时的处理方式。可以选择的值包括：'fail'：如果表已存在，则抛出一个ValueError。'replace'：如果表已存在，则先删除表，再创建新表并插入数据。'append'：如果表已存在，则在现有表的末尾追加数据。
- 关闭数据库连接：
- 关闭数据库连接：
这样，你就可以使用Sqlite查询将pandas数据框中的数据插入Sqlite数据库了。在实际应用中，你可以根据需要进行适当的调整和优化。
相关·内容
当将DataFrame写入sql时，是否可以以下列方式使用with语句？
import sqlite3
import pandas as pd
with sqlite3.connect('database.db') as conn:
df = pd.read_sql("SELECT * FROM table", conn)
# add change to db
df.to_sql('table', conn, if_exists='replace', index=False)
浏览 2提问于2020-10-24得票数 2
回答已采纳
我有一个API：，我想使用python代码从这里获取数据(这是JSON格式的)，并创建一个填充这些数据的表，以便我可以使用sqlite3在它上运行SQL查询。我在这里获得了JSON中的数据，但我想将它推到名为pitch.db的数据库中
以下是我到目前为止所拥有的：
import pandas as pd
import requests
import sqlite3
import json
from sqlalchemy import create_engine
engine = create_engine('sqlite://',
浏览 9提问于2022-04-17得票数 -2
3回答
我想将数据从一个大的csv文件迁移到sqlite3数据库。
我在Python 3.5上使用pandas的代码：
con = sqlite3.connect(DB_FILENAME)
df = pd.read_csv(MLS_FULLPATH)
df.to_sql(con=con, name="MLS", if_exists="replace", index=False)
是否可以打印to_sql方法执行的当前状态(进度条)？
我看了关于的文章，但没有找到如何做到这一点。
浏览 19提问于2016-09-14得票数 13
回答已采纳
1回答
import pandas as pd
import sqlite3 as sql
sea_level_df = pd.read_csv(r"C:\Users\slaye\OneDrive\Desktop\SeaLevel.csv", skiprows=3)
database = "database.db"
conn = sqlite3.connect(database)
sea_level_df.to_sql(name='Sea_Level', con=conn)
con = sql.connect('Sea_Level')
c
浏览 4提问于2022-10-18得票数 -1
1回答
我有大量的.csv文件，我想把它们放在sqlite数据库中。大多数文件包含相同的列名，但也有一些文件具有额外的列。
我尝试的代码是(修改为泛型)：
import os
import pandas as pd
import sqlite3
conn = sqlite3.connect('test.db')
cur = conn.cursor()
os.chdir(dir)
for file in os.listdir(dir):
df = pd.read_csv(file)
df.to_sql('X', conn, if_exists
浏览 10提问于2017-10-19得票数 1
对于只有一个cvs文件，我可以将其导入到sqlite中，如下所示： conn = sqlite3.connect("data.sqlite")
df = pd.read_csv('data.csv')
df.to_sql('data', conn, if_exists='append', index=False)
conn.close() 如果我有多个cvs文件怎么办？如何将cvs文件中的所有表插入到一个sqlite或mysql数据库中？
浏览 69提问于2021-08-05得票数 0
我正在从抓取的数据建立一个数据库。我只想插入数据库中还没有的记录，而忽略所有重复的记录。
以下是我的代码
conn = sqlite3.connect('Database.db')
df.to_sql("My_cool_data_Temp", conn, if_exists='replace', index=False)
query = "SELECT * FROM My_cool_data_Temp EXCEPT SELECT * FROM My_cool_data;"
new_entries = pd.read
浏览 2提问于2021-07-11得票数 0
我正在尝试摆弄我在Apache Superset上的csv。我创建了一个sqlite数据库，并尝试通过超集上传csv，但在表部分没有得到任何返回。因此，我通过python创建了这个表，重新加载后，在我的nav数据库中仍然看不到超集中的表。 下面是我的代码： import sqlite3
import pandas as pd
conn = sqlite3.connect('nav.db')
csvfile = 'nav.csv'
df = pd.read_csv(csvfile)
df.to_sql('nav', conn, if_exi
浏览 58提问于2020-09-23得票数 0
我正在尝试将一个表加载到sqlite3中。我现在有一个csv格式。表格有多种格式-文本、数字、日期、NaN...
代码如下：
import pandas as pd
import sqlite3
df = pd.read_csv("filename.csv")
conn = sqlite3.connect('test.db')
df.to_sql('file', conn, flavor='sqlite', if_exists='replace', index=False)
我得到以下错误：
str:除非您使用可以
浏览 0提问于2017-11-22得票数 0
我正在尝试使用python脚本和pandas将几个enter image description here文件导入到SQlite数据库中，代码如下： import pandas as pd
import os
path = os.getcwd()
files = os.listdir(path)
for filename in os.listdir(path):
if filename.endswith('.xls'):
df = pd.read_excel(filename)
df.columns = ['Data'
浏览 88提问于2021-10-13得票数 0
回答已采纳
1回答
不懂SQL脚本。请哈尔普
、、、
我正在尝试访问SQL数据库中的表。然而，我遇到了一个不寻常的错误。有谁能帮我一下吗?我在这方面很新。
import sqlite3
import pandas as pd
com = sqlite3.connect('Reporting.db')
注意事项：熊猫数据文件已经在上面定义了，这就是为什么我不把它放在这里。
df.to_sql('tblReporting', com, index=False, if_exists='replace')
print('tblReporting loaded \n')```
%loa
浏览 4提问于2021-10-29得票数 0
我正在尝试使用Pandas执行SqlLite的REGEXP函数，但得到的错误是
"ImportError:使用未安装sqlalchemy的URI字符串。
python代码如下：
import pandas as pd
import csv, sqlite3
import json, re
conn = sqlite3.connect(":memory:")
print(sqlite3.version)
print(sqlite3.sqlite_version)
def regexp(y, x, search=re.search):
return 1
浏览 13提问于2020-10-12得票数 0
我想把一些数据从数据存储到一个sqlite数据库中。我所做的工作如下：
首先创建一个数据库：
conn = sqlite3.connect("mydatabase.db")
然后从dataframe df向数据库添加表：
df.to_sql(table_name, conn,if_exists='append')
然后从数据库查询表：
cur = conn.cursor()
cur.execute("SELECT * FROM table_name")
rows = cur.fetchall()
df2=pd.DataFrame(rows)
d
浏览 1提问于2017-11-15得票数 1
回答已采纳
1回答
问题如何将我的数据添加到数据库中，以便它检查stock_ticker是否存在，只为附加stock_ticker不存在的行？
这就是我所做的
将CSV文件导入到dataframeAssign中的列名与在databaseSending中使用下面的代码导入数据库的数据格式相同，但获取
sqlite3.IntegrityError: UNIQUE constraint failed: stocks.stock_ticker
conn = sqlite3.connect('stockmarket.db')
c = conn.cursor()
df.to_sql(name='st
浏览 2提问于2020-09-13得票数 0
回答已采纳
在试图将pandas的数据write写入sql-server时，我得到了以下错误：
DatabaseError:在sql 'SELECT FROM sqlite_master，其中类型=‘table’和名称=？；('42S02'，“42S02SQLServer本机客户端11.0无效对象名‘sqlite_sqlite_master’)上执行失败。(208) (SQLExecDirectW)；42000 Server本机客户端11.0状态无法准备。(8180)
pandas似乎正在研究sqlite而不是真正的数据库。
这不是连接问题，因为我可以使用pandas.re
浏览 1提问于2017-07-26得票数 8
我有以下DataFrame，其中0列是ID，第1列是名称，第2列是道达尔。第2列是新生成的。
0 1 2
0 1 Name1 1
1 2 Name2 8
2 3 Name3 6
3 4 Name4 5
以此类推。
ID是数据库中现有表中的主键。我在我的表中创建了一个新列(最初有两个列ID和名称)，标记为"Total“，我想为每个相应的ID插入第1列的值。
我目前正在用新列Total重新生成DataFrame中的现有表。然后再次使用df.to_sql重写整个表(.，if_if=‘替换’)。
以下是我的完整代
浏览 8提问于2015-04-17得票数 0
回答已采纳
我尝试在Python语言中使用Pandas的df.to_sql和SQlite3将大约2 2GB的数据和大约1600万行数据放入数据库中。我的策略是将原始CSV分成较小的数据帧，对它们执行一些操作，然后将它们放入SQL数据库中。
当我运行这段代码时，它开始得很快，但很快就变慢了。在大约300万行之后，它会变慢到这样的程度，因为它似乎不会在任何实际的时间内完成。造成这种情况的原因是什么?我能做些什么？我的代码如下：
def chunk_read_CSV_to_db(database, table, filepath, chunksize, delimiter=','):
s
浏览 2提问于2016-01-12得票数 1
我有一个CSV文件，我想使用Python将这个文件导入到我的sqlite3数据库中。CSV的列名与数据库表的列名相同，下面是我现在使用的代码。
df = pandas.read_csv(Data.csv)
df.to_sql(table_name, conn, index=False)
但是，该命令似乎会将所有数据导入到数据库中，我正在尝试只输入数据库中不存在的数据。有没有一种方法不需要迭代csv或数据库的每一行？
浏览 1提问于2018-05-31得票数 0
有没有办法使用Python将多个csv文件转储到一个sqlite数据库中？
我正在尝试使用sqlite3和pandas用Python重新创建我的一些R代码。csv文件相当大，有135个cols和300行，所以在sqlite数据库中创建表时，我尽量避免对列进行命名。
下面是我想要实现的一个例子。
import sqlite3
import pandas as pd
conn = sqlite3.connect('dbex.db')
c = conn.cursor()
mydata_1 = pd.read_csv(file_name_ex)
c.execute("CR
浏览 1提问于2019-08-22得票数 0
3回答
我正在尝试从csv文件创建sqlite。经过一些搜索，这似乎是可能的使用熊猫df。我尝试了一些教程和文档，但我找不出这个错误。这是我的密码：
# Import libraries
import pandas, csv, sqlite3
# Create sqlite database and cursor
conn = sqlite3.connect('test.db')
c = conn.cursor()
# Create the table of pitches
c.execute("""CREATE TABLE IF NOT EXISTS pit
浏览 1提问于2018-10-27得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
