使用mysql连接器python将值插入数据库，web抓取

文章/答案/技术大牛

发布

2回答

为什么我的MySQL数据库不包含从Scrapy发送到它的所有数据？

python、mysql、scrapy、transactions、bulk-load

我是一名SQL新手，正在尝试使用python将大量数据存储到MySQL数据库中。出于某种原因，在寄出大约。我的数据库中有24,000行数据--我发现它只包含1,300行。这可能与存储引擎InnoDB有关，但考虑到这1300行占用176 KB，我对此表示怀疑。我在处理python数据库时使用的语句如下所示。、\ service_hi

浏览 7提问于2021-06-06得票数 0

2回答

python、mysql、sql、web-scraping、mysql-connector-python

然后将它们插入到数据库中(插入"project“表)。import requestsimport mysql.connector cnx.commit() cnx.close() 当我想将它们插入到我的<e

浏览 30提问于2020-07-05得票数 3

回答已采纳

3回答

pymysql使用python将随机数插入到列中

python、mysql、random、pymysql

我想将随机数插入到MySQL列rnd_value中，其中包含100个随机数，并使用python在1到100之间。我将使用以下命令从python生成随机数：我已将MYSQL查询添加到数据库中CREATENULL AUTO_INCREMENT COMMENT '', `rnd_value` INT NULL COMM

浏览 34提问于2016-08-10得票数 0

回答已采纳

1回答

在MariaDB 10.5.8上运行Django迁移时出现的问题

django、mariadb、mysql-python、django-migrations

我一直试图从mysql数据库(Version5.7.26-29.31.37-log-输出从SELECT版本())迁移到mariadb (版本10.5.8-MariaDB-log -从SELECT版本()但是，在服务器上运行“迁移”命令时，使用新的DB：decimal.InvalidOperation：<class‘十进制.转换语法>执行此错误时，将失败DEBUG (0.008) SELECT/django/db/backends/mysql</

浏览 0提问于2021-01-06得票数 4

回答已采纳

3回答

Python web crawler与MySQL数据库

python、mysql、sql、web-crawler、web-scraping

我想创建或找到一个用Python编写的开源网络爬虫(爬虫/机器人)。它必须找到并跟踪链接，收集元标签和元描述，网页的标题和网页的网址，并将所有的数据放入一个MySQL数据库。此外，如果有人能给我一些关于我应该做什么的建议，那么他们将非常受欢迎。

浏览 4提问于2011-08-11得票数 6

回答已采纳

2回答

在python中将datetime.date或字符串转换为时间戳

python、pandas、datetime、timestamp

我在python中将其读作dataframe df。# datetime to timestamp df['X'] = pd.to_datetime(mydate) 当我在python编辑器df.info()中检查数据类型时，X的数据类型是datetime64ns，但当我将其保存到MySQL中的DB中并在python中再次读取为dataframe时，数据类型更改为object。在MySQL中，我的数据类型是datetime，但在MySQL中，我需要它作为timesta

浏览 118提问于2020-10-15得票数 0

1回答

Python3的MySQL模块

python、django、python-3.x

据我所知，MySQLdb不支持Python3，我听说PyMySQL是这个模块的替代品。但是它在生产环境中是如何工作的呢？这两者的速度有很大的差别吗？我之所以这样问，是因为我将管理一个非常活跃的the应用程序，它需要经常在数据库中创建条目。

浏览 3提问于2015-12-17得票数 0

回答已采纳

2回答

如何使用S3或ODBC连接将数据从ODBC Bucket导入MySQL数据库

database、amazon-web-services、amazon-s3

我想导入数据从亚马逊网络服务S3存储桶到MySQL数据库使用JDBC或ODBC连接。我想知道它是怎么做到的？我尝试使用AWS Lambda，但我只需要使用JDBC或ODBC连接。

浏览 2提问于2021-10-03得票数 0

5回答

如何提高mysql数据库插入性能

php、mysql、database、performance、database-performance

在与web抓取相关的PHP项目上工作，我的目标是将数据存储到mysql数据库中，在9列表中的3个索引上使用唯一的键索引，记录超过5k。我是否应该在程序级别上检查唯一的数据，比如在数组中放置值，然后在插入数据库之前进行比较？有什么方法可以加速我的数据库插入吗？

浏览 5提问于2013-07-18得票数 1

4回答

java.lang.ClassNotFoundException: com.mysql.jdbc.Driver.

java、mysql、eclipse、tomcat、jdbc

我正在使用Java/Eclipse连接到MySQL数据库，但遇到了以下错误。错误信息： <% Class.forName("com.mysql.jdbc.Driver").newInstance(); Connection myCon = DriverManager.getConnect

浏览 4提问于2014-03-29得票数 2

回答已采纳

2回答

在Python代码中创建的架构/数据库不会出现在MySQL工作台/ MySQL服务器中

python、mysql

我正在尝试用python代码创建模式/数据库，并且能够创建表，将数据插入其中，但是当我签入MySQL工作台时，用Python创建的数据库没有出现。我的工作空间详情：Python版本: 3.8下面是我用python编写

浏览 2提问于2020-04-28得票数 0

1回答

使用c++在mysql数据库表中插入多个值时出现问题

c++、mysql、database、function、insert

如何使用c++将向量中的多个值插入到mysql数据库表中，即未安装mysql c++连接器。我的代码#include iostreamusing namespace std; MYSQL_RES *result; MYSQL_ROW row

浏览 1提问于2011-04-13得票数 1

2回答

Python上不正确的SQL语法

python、mysql

我找不到这段代码中的错误：test = '99'有人能给我解释一下吗？提前感谢！

浏览 0提问于2018-11-16得票数 0

回答已采纳

1回答

pymongo插入与pymysql插入

python、mysql、mongodb、pymongo、pymysql

我正在使用python连接器pymongo和pymysql测试MongoDb和MySQL，特别是insert函数。= time.clock() deltaT = time.clock() - deltaT 我不想在这里做一个基准测试，只是为了在我

浏览 0提问于2017-02-11得票数 0

回答已采纳

1回答

如何在Tableau Public中添加mysql作为数据源

tableau-api

我使用静态excel和web数据连接器在tableau中安装和创建了一些报表，安装的tableau显示了Odata，Google和Web数据连接器用于数据连接。我使用的是"Tableau Public 10.0“版本

浏览 1提问于2016-08-31得票数 2

1回答

如何在Asp.Net中使用MySQL获取查询返回的错误码

asp.net、mysql、mysql-connector

在MySQL连接器5.0.9.0的帮助下，我在我的.net web应用中使用了MySQL。我从web服务中获取数据并将其插入到本地数据库中。我只想在本地数据库中插入唯一行。我知道当发生复制时，MySQL会返回一个错误代码: 1062。

浏览 2提问于2013-03-13得票数 1

回答已采纳

1回答

用c#模拟mysql压缩函数

c#、.net、mysql、entity-framework、compression

我想在mysql blob列中插入一些字节数据。数据很大，所以我想以压缩的方式存储它。我使用Entity Framework3.5SP1通过最新的mysql .net连接器将数据插入到mysql数据库中。有没有办法使用实体框架将blob插入到mysql数据库(如insert into testtable (blobcolumn) values (

浏览 1提问于2012-02-22得票数 0

2回答

不能让MySQLDb在Mac上的python中工作，还有其他更简单的DB吗？

python、mysql、database、database-connection

我正在寻找一个与python/django一起使用的用于web开发的生产数据库。我已经成功地安装了MySQL。我认为python连接器没有工作，我也不知道如何使它工作。请给我指出正确的方向。谢谢。Traceback (most recent call last): File "/Users/vantran/tutorial/scrape_yf/mysql.py", li

浏览 2提问于2013-12-02得票数 0

回答已采纳

1回答

PyMySQL如何防止用户受到sql注入攻击？

python、sql-injection、pymysql、server-side-attacks

很抱歉在这里问您，但是我找不到关于pymysql安全指南中关于如何防止sql注入的大量参考，当我进行PHP开发时，我知道使用mysql preared语句(或称为参数化查询或stmt)，但我在pymysql简单的代码使用pymysql，如attack="jason' and 1=1" cursor.execute(sqlscursor.execute默认情况下已经使用了预置语句吗？

浏览 1提问于2018-08-02得票数 4

回答已采纳

2回答

字符串包含时的python* mysql查询错误*

python、mysql

当字符串包含'时，在mysql数据库中插入字符串时遇到困难。/usr/bin/env pythonmysql_localhost_user = 'admin'mysql_localho

浏览 0提问于2013-12-15得票数 0

回答已采纳

点击加载更多

为什么我的MySQL数据库不包含从Scrapy发送到它的所有数据？