腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
用PHP在内存中存储入站数据
、
、
、
我正在建立一个聊天应用程序在php-
mysql
后端。我面临的问题是
mysql
读写速度
慢
。我对我的查询和
mysql
服务器做了各种优化,问题实际上是由于数百个用户并发的http->
mysql
查询造成的。现在我想的是,如果php有一种方法可以将入站数据存储在内存中,然后通过
批量
插入将其
写入
数据库,那么当数据达到100个条目时 使用memcached可以做到这一点吗?如果是,是如何实现的?
浏览 1
提问于2011-08-28
得票数 1
回答已采纳
2
回答
Flink时间缓冲接收器
、
我正在尝试编写一个Flink应用程序,它从Kafka中读取事件,从
MySQL
中丰富这些事件,并将这些数据
写入
HBase。我正在RichFlatMapFunction中进行
MySQL
丰富,现在我正在尝试找出如何最好地
写入
HBase。我想
批量
写入
HBase,所以我目前正在考虑使用WindowAll,然后使用identity apply (只是为了返回DataStream),然后编写一个HBaseSink,它获取一个记录列表并对HBase执行
批量
Puts。
浏览 0
提问于2019-09-27
得票数 0
1
回答
原生mapreduce与hbase mapreduce
、
、
如果我使用TableMapReduceUtil( hbase )创建MR job,似乎hbase扫描仪将数据输入映射器,并将数据从还原器转换为特定的hbase输出格式,以便将其存储在hbase表中。由于这个原因,我预计hbase mapreduce作业将比本地MR job花费更多的时间。那么,Hbase的工作时间肯定要比本地的先生长多长时间?
浏览 3
提问于2014-02-19
得票数 2
回答已采纳
1
回答
MySQL
批量
插入非常
慢
、
、
、
、
FileReader("LoadData.txt"))){ } catch (final IOException e) {} 即使有了上面的代码,
批量
插入也非常
慢
浏览 4
提问于2016-02-13
得票数 0
回答已采纳
1
回答
(Apache ) JdbcIO
批量
插入
mysql
数据库
、
、
、
我使用DataflowSDK2.xJavaAPI( Apache )将数据
写入
mysql
。我创建了基于的管道,使用数据流将数据
写入
mysql
。当我需要实现
批量
插入时,它会插入单个行。我在正式文档中找不到任何选项来启用
批量
嵌入模式。 .apply(JdbcIO.>write() .withDataSourceConfiguration(JdbcIO.DataSourceConfigu
浏览 3
提问于2017-12-08
得票数 5
1
回答
不向磁盘
写入
文件的
MySql
大容量导入
、
、
我有一个运行
mysql
数据库后端的django网站。我接受相当大的上传从一个管理员用户
批量
导入一些数据。数据的格式与其在数据库中所需的格式略有不同,因此我需要进行一些解析。我希望能够将这些数据转换为csv,并将其
写入
cStringIO对象,然后简单地使用
mysql
的
批量
导入命令来加载该文件。我宁愿先跳过将文件
写入
磁盘的过程,但我似乎找不到解决方法。我过去基本上用postgresql做过这样的事情,但不幸的是这个项目是在
mysql
上进行的。 简而言之:我是否可以使用内存中
浏览 1
提问于2011-06-30
得票数 0
回答已采纳
1
回答
如何在没有Spark的情况下直接编辑HBase HFile
、
我需要
批量
编辑HBase数据,为每一行编辑特定单元格的内容。通过HBase PUT/GET API不是一种选择,因为这会非常
慢
。我找到了关于如何将HFile从Spark
批量
写入
HDFS的几个指南,但是,我不确定如何从HDFS中获取数据。哪种类型的DataFrame/RDD最适合这种任务? 谢谢
浏览 0
提问于2019-01-24
得票数 1
回答已采纳
1
回答
MySQL
:
慢
日志;追加CPU使用率
、
、
我启用了
MySQL
慢
日志功能:如何将当前的CPU负载附加到
MySQL
慢
日志中的每个条目(它
写入
文件)?
浏览 1
提问于2012-01-13
得票数 5
2
回答
使用“`mysqldump”缓慢编写数据库
、
我正在尝试自动化
mysql
转储来自Azure Database for
MySQL
Server的所有数据库。数据库的当前大小:
mysql
> SELECT table_schema "DB Name", Round(Sum(data_length + index_length) / 1024 / 1024,它正在被转储到一个文件中,但是它非常
慢
,在30分钟内不到4MB。然而,db2和db3在几秒钟内几乎立即被抛出。我尝试了以下所有选项和组合,以查看
写入
速度是
浏览 4
提问于2017-09-01
得票数 6
回答已采纳
2
回答
-从snowflake卸载数据-每行到一个单独的文件
“复制到”被设计为一次
写入
批量
数据。使用"Copy into“为每一行生成单独的文件非常
慢
。 谢谢!
浏览 25
提问于2020-05-20
得票数 1
2
回答
MongoDB C#驱动程序- InsertBatch获取受影响的文档计数
、
var collection = database.GetCollection<Publication>("Publications");我想要获取受影响的文档计数。我得到的AffectedDocumentCount为零。
浏览 1
提问于2013-04-11
得票数 0
1
回答
优化nodejs
mysql
插入
、
、
、
、
我一直在开发一个用于mongodb到
mysql
转换的ETL工具,该工具托管在github here 上。nodejs的
mysql
是否有插入查询数/秒的限制?如果是这样,那么如何增加它?否则,有没有框架没有这个限制呢?整个转换的代码在。
浏览 3
提问于2017-10-27
得票数 1
1
回答
通过数据流管道
写入
云SQL的速度非常
慢
、
、
我设法通过JDBCIO连接到云sql这是可行的,但是,
批量
写入
1000条记
浏览 1
提问于2018-09-21
得票数 0
1
回答
将数据库与web服务器分离后,
MySql
写入
速度极慢
我在同一台服务器上运行Apache/PHP和
MySql
,但是在高峰期(一天大约2-3个小时),服务器非常
慢
。因此,按照最常见的建议,我将
MySql
设置在一台单独的机器上(在具有1Gbit互连的同一本地网络上)。现在,在非高峰期间,读取和
写入
都稍微
慢
一些(似乎合乎逻辑,因为我使用TCP/IP而不是套接字),然而,在高峰时间,读取要快得多,但
写入
非常
慢
。对可能的原因有什么建议吗?对优化有什么建议吗?
浏览 1
提问于2015-03-23
得票数 1
1
回答
Ruby中的延迟处理作业:多大程度上不会阻碍我的工作
、
、
、
、
我最近发现了一个边缘情况,这让我产生了一些问题:我有这个AR (顺便说一句,我正在使用
MySQL
)对象,它在更新时向has_many关联的所有元素发送一条消息。它们使用的是某种东西,而不是
MySQL
,这意味着连接不会相互阻塞。我唯一的问题是:一次40000次
写入
redis会花费我多少钱?
浏览 0
提问于2013-03-18
得票数 1
回答已采纳
1
回答
幼体中的散装insertOrUpdate
、
、
、
、
我们如何insertOrUpadate()
批量
数据?我有大约60,000个
批量
数据,所以执行循环插入非常
慢
,而且
批量
数据也在不断增加。
浏览 8
提问于2020-06-29
得票数 0
1
回答
如何使用Mongoose保存集合中的现有对象?
、
、
、
、
下面的JSON是我想要保存我的MongoDB集合的一个例子,其中键应该作为_id的。const customerObj = await customerDocument.create({ _id: '5434', ...customerColl['5434'] });问题{ "name
浏览 3
提问于2022-10-27
得票数 1
回答已采纳
1
回答
Python 3 CouchDB单次更新vs批处理
、
、
、
、
我正在将数据从
mysql
导出到couchdb,当一个项目被保存后,我用最近更新的日期标记
mysql
项目。下面我有一个python函数,它一个接一个地接收json对象和一些随机id,以便在
mysql
上进行本地更新: #db.update(json_obj): # mark id inside
mysql
db, so
浏览 15
提问于2020-05-19
得票数 0
1
回答
导入过程中的数据转换
、
我正在使用PHP (Symfony Framework,如果重要的话)将大约350,000行从CSV文件导入到
MySQL
中,我正在读取每一行并将其插入到SQL表中。我正在试验在
MySQL
中使用查找表,在PHP中也使用数组-但我想知道是否有更有效的方法。
浏览 0
提问于2011-05-22
得票数 0
回答已采纳
2
回答
是否可以在PHP中将大型csv文件编写为xls工作表?
、
、
、
、
数据来自多个
MySQL
查询。谢谢你的帮助!
浏览 2
提问于2014-08-22
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
第八篇|Spark SQL百万级数据批量读写入MySQL
Python写入数据到MySQL
Mysql优化-mysql慢查询
Python爬虫数据写入mySQL案例
ClickHouse是如何批量写入的?
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券