腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
在
MySQL
中存储
大量
文本的最有效的空间方法是什么?
mysql
、
sql
、
text
、
full-text-search
、
huffman-code
我正在用
Python
编写一个set爬虫,它将在
MySQL
数据库
中存储
大量
页面的HTML代码。在开始
处理
数据之前,我想确保我的存储和
处理
方法是最优的。我想: 有没有人在这个或类似的问题上有任何建议或经验?考虑到
Python
需要
大量
的HTTP请求和
浏览 3
提问于2011-11-13
得票数 1
回答已采纳
5
回答
MySQL
可以
处理
大量
数据吗?
php
、
mysql
我是一个用PHP和
MySQL
开发的高校管理网站应用。我选择
MySQL
作为我的
数据库
,因为它有免费的许可。它会
处理
大量
的数据吗?随着学校的增多和数据积累年限的增长,高校数据逐渐增多。对于大数据量,
MySQL
是最好的吗? 提前感谢
浏览 3
提问于2012-03-03
得票数 1
回答已采纳
2
回答
在不安装
MySQL
的情况下使用
Python
查询
MySQL
数据库
python
、
mysql
、
database
我想使用
Python
语言查询
MySQL
数据库
,但显然MySQLdb包需要单独安装
大量
的
MySQL
工具。如何使用
Python
脚本查询
MySQL
数据库
,而不安装一堆不必要的
MySQL
内容,包括在客户机上授予
MySQL
服务器功能?我不喜欢Perl,但是DBI包似乎允许Perl脚本与
MySQL
交互,而不需要包外部的任何
MySQL
内容。我正在为
Python
寻找类似的东西。
浏览 2
提问于2012-09-05
得票数 1
回答已采纳
1
回答
使用php在word或pdf文件中搜索文本短语
php
、
mysql
、
text
、
mysqli
它是将word/pdf文档的内容存储在
MySQL
表还是文本文件中? 如何最好地在
MySQL
数据库
中存储m刀/pdf文档内容?在
MySQL
表中最好使用哪种数据类型?
浏览 1
提问于2016-10-12
得票数 0
2
回答
如何将大型表(100M+行)导出到文本文件?
python
、
mysql
、
database
、
hadoop
、
export
我有一个包含超过1亿行的大型表的
数据库
。我想导出这些数据(经过一些转换后,比如和其他几个人一起加入这个表,清理一些字段等等)。并将其存储在一个大文本文件中,以便以后使用Hadoop进行
处理
。到目前为止,我尝试了两件事: 使用
Python
,我使用按块浏览表(通常每次10'000条记录),对每一行执行转换并直接写入文本文件。这个技巧是有帮助的,但是随着导出的进展,LIMIT变得越来越慢。使用
mysql
命令行工具,我尝试将CSV形式的查询结果直接输出到文本文件中。由于大小,它耗尽了内存,并崩溃了。我目前正在调查作为
浏览 4
提问于2013-01-18
得票数 0
回答已采纳
4
回答
新的应用程序--在我的使用案例中,PostgreSQL是否提供了比
MySQL
更多的好处?
mysql
、
postgresql
、
heroku
在过去的七年中,我经常使用
MySQL
,我的经验通常是:“忽略存储过程,在
数据库
中放入任何类型的逻辑。将业务逻辑保留在代码中,并将
数据库
作为哑巴数据存储。”我正在构建一个新项目,目前使用的是
Python
+ Flask +
MySQL
。
MySQL
数据库
主要
处理
读操作。有一个主表--要在web应用程序上显示的项目列表。在这种情况下,PostgreSQL是否会提供一些优于
MySQL
的好处?(
大量
读取,写入限制为每天一批)
浏览 0
提问于2012-03-07
得票数 1
回答已采纳
1
回答
使用php和
mysql
构建网站的更有效方法(兑现或查询?)
php
、
mysql
、
performance
背景:该程序( IRC打赌机器人客户端用
python
编写)最初使用.csv文本文件数组来保存用户数据。然而,我意识到这种数据存储方法实际上是无法扩展的,并且在内存中保存了
大量
的数据(因此需要
大量
的文件写入和平面文本文件搜索)。 我重新实现了这个程序,转而使用
mySQL
数据库
。我现在正在重写这个网站。对于每个用户来说,对于存储的每个变量,我只查询一次
mySQL
浏览 2
提问于2015-09-22
得票数 0
1
回答
存储与每个用户相关的
大量
数据?
php
、
mysql
不幸的是,我的
MySQL
知识有限,所以我不确定如何在不创建天文数字的条目的情况下做到这一点。我并不是要求任何人为我做所有的工作,但如果有人能给我一些关于如何存储如此
大量
的数据(相当有效)的信息,那就太好了。 实际上,它不一定是企业效率,因为只有我和一些朋友在使用它(也许100个用户最多?)
浏览 1
提问于2013-01-16
得票数 0
1
回答
用于
python
程序的中大型可移植
数据库
选项
python
、
mysql
、
database
、
mysql-python
我正在创建一个简单的
python
程序,它需要搜索一个有点大的
数据库
(大约40个表,600万行一起)。目前,我使用MySQLdb查询我的本地
MySQL
数据库
,然后我有一些
处理
数据的其他
python
函数,并返回一些统计信息和其他东西。我想与不想构建自己
数据库
的其他人分享这一点。此时,
数据库
仅用于查询。如何最好地将
数据库
和
python
程序共享为一个“包”。我必须放弃SQL方法并切换到某种文本文件
数据库
,还
浏览 4
提问于2012-11-08
得票数 2
回答已采纳
2
回答
MySQL
中的n元语法计数
mysql
、
full-text-search
、
nlp
、
n-gram
我正在构建一个
MySQL
数据库
,其中将有大约10,000条记录。每条记录将包含一个文本文档(大多数情况下是几页文本)。我想在整个
数据库
中做各种n-gram计数。我已经用
Python
编写了算法,可以针对包含
大量
文本文件的目录执行我想要的操作,但要做到这一点,我需要从
数据库
中提取10,000个文本文件-这将存在性能问题。我是
MySQL
的新手,所以我不确定它是否有任何内置的特性来进行n-gram分析,或者是否有好的插件可以做到这一点。
浏览 0
提问于2011-09-21
得票数 4
2
回答
将SNMP GET输出存储到
MySQL
数据库
mysql
、
database
、
snmp
、
net-snmp
我想做一个简单的脚本,定期执行SNMP GET并将输出存储到
MySQL
数据库
。它将在Windows上运行。 用哪种编程语言编写它是最不痛苦的选择?Powershell、Java、…?
浏览 3
提问于2012-10-13
得票数 0
1
回答
如何在DB上负载时减慢kafka使用者的速度,反之亦然
mysql
、
apache-kafka
、
confluent-kafka-python
如果在kakfa上产生了
大量
消息,如果我尝试使用(使用
python
confluent_kafka库)并对它们进行
处理
,
数据库
(
处理
mysql
)将快速加载
大量
查询。我想根据DB上的负载减慢消耗速度。
浏览 7
提问于2022-06-03
得票数 0
1
回答
加速文档
处理
和加载到
数据库
python
、
relational-database
、
data-processing
我要做的很简单,
处理
文档以提取我需要的信息,并将其加载到
数据库
中。我用
Python
语言和SQLAlchemy来做这件事。另外,我使用multiprocessing来利用我机器上的所有内核。文档是包含
大量
文本的XML。
数据库
是定义了自定义关系模式的
MySQL
。有什么方法可以加快这项任务的执行速度吗?
浏览 0
提问于2014-01-21
得票数 0
1
回答
通用策略:
Python
中的数据/数组分析
python
、
arrays
、
pandas
、
data-analysis
我刚刚在VBA和SQL中完成了一项任务,我不知道如何在
Python
中执行它,因为我还在学习,并且对
Python
中的一般方法是什么样子很感兴趣。 我有三个表/矩阵/数组。这是一个广泛的问题,但如果可能的话,在
python
中执行这类任务将会欣喜若狂。请注意,使用OID可以辅助的不同名称最少为1个,最多为1000个。
浏览 1
提问于2013-07-18
得票数 0
4
回答
如何将XBRL数据导入
MySQL
?
mysql
、
database
、
import
、
xbrl
我正在做一个涉及
处理
大量
XBRL文档(> 1m个独立文件)的项目。我对XBRL完全是个新手,现在我觉得很迷茫。我在一个单独的
MySQL
数据库
中有与这些XBRL文档相关的数据,我想将XBRL数据添加到
MySQL
中,以便将所有内容存储在一个
数据库
中。我一直在寻找关于这些问题的教程,但找不到任何提供基本介绍的东西,只有
大量
的高级信息。
浏览 5
提问于2016-06-30
得票数 13
1
回答
内容管理系统设置,.INI文件或
MySQL
?
optimization
、
content-management-system
我想过在
mysql
中创建一个包含常量的表,但我认为在每次页面刷新时添加一个新的
mysql
查询并不是最好的解决方案。
浏览 2
提问于2010-06-27
得票数 0
回答已采纳
2
回答
python
中的数据访问对象
python
、
mysql
、
database
、
dto
6个月前,我被要求为我们的项目进行一个大约有30个表的
数据库
访问(使用数据传输对象模式)。当时我们使用的是微软的sql server。因此,我必须编写一个脚本来自动生成DAO和DTO(自动构建类,根据表对它们进行适当的命名,然后在函数中编写查询),将其另存为.py并将其放在正确的文件夹中-这只是文本
处理
-。现在管理层决定将
数据库
改为
mysql
。我想知道,在
python
中是否已经为
mysql
创建了DAO生成器??因为我在java中看到了类似这样的东西。这将为我节省
大量
的工
浏览 1
提问于2010-10-20
得票数 1
回答已采纳
1
回答
python
-docx生成包含
MySQL
数据的文档
python
、
mysql
、
django
、
vba
、
python-docx
我有一个使用
MySQL
的Django应用程序,我需要用SQL数据生成一个docx文档,我正在考虑使用
python
-docx。我需要生成的文档可能非常大,大约有数百页,它将包含
大量
的图像、表格等。这里有人用过
python
-docx吗?对它
处理
大文件的效率有什么建议吗?为了执行特定的任务,如创建目录或嵌入文件,限制有多大? 另一种选择是使用VBA,而不是向
数据库
查询数据并填充docx文档。
浏览 0
提问于2014-12-18
得票数 0
2
回答
寻找从生产
数据库
生成报表的更好的体系结构
mysql
、
amazon-web-services
、
etl
、
business-intelligence
、
aws-glue
在我工作的公司,我要做的工作之一就是编写程序,使用存储在生产
数据库
中的数据生成业务报告(例如上个月访问我们网站的用户数量)。我们使用AWS函数和复杂的
MySQL
查询来生成报告(*.csv文件)。这种架构有一些缺点: AWS lambda函数的最大超时时间为5分钟。我尝试过AWS,但还没有找到一种简单的方法将复杂的
MySQL
查
浏览 1
提问于2018-10-13
得票数 0
1
回答
Mysql
/php -如何创建用于缓存的“空”行对象
php
、
mysql
我使用memcache来缓存
数据库
对象,例如用户行。 当用户行不存在时,我想创建一个“空”
数据库
对象,类似于
mysql
为用户查询返回的对象,用数据填充它并使用它。此时,我不想为新用户创建新的
数据库
行。如何有效地创建一个属性类似于
mysql
将返回的用户
数据库
对象的对象,而不实际创建用户行并读取它?
浏览 0
提问于2009-09-20
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python连接mysql数据库
python数据库操作-MySQL
Python 操作 MySQL 数据库(上)
Python 数据库骚操作-MySQL
python处理完的df数据怎么快速写入mysql数据库表中?
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券