腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
4
回答
MySQL
群集能否处理Can级
的
数据库
、
我必须寻找解决方案,以提供一个能够处理to级
数据量
并具有
高
可用性(5个9)
的
MySQL
数据库。每个数据库行可能有一个时间戳和最多30个浮点值。预期工作负载高达2500次/秒。查询可能不那么频繁,但可能很大(可能涉及100 of
的
数据),尽管可能只涉及单个
表
。 我一直在关注
MySQL
集群,因为这是他们
的
HA产品。由于
数据量
太大,我需要使用基于磁盘
的
存储。有人有在这种规模
的
数据库上使用
浏览 0
提问于2009-05-11
得票数 6
回答已采纳
1
回答
卡桑德拉:什么时候增加容量?
人们如何知道何时该增加卡桑德拉星系团
的
容量?错误信息?表演?其他
的
告密信号? 因为卡桑德拉
的
容量规划是一门(看似)黑色
的
艺术,知道从哪里开始、什么时候成长可能会有一些问题。
浏览 0
提问于2014-10-29
得票数 0
回答已采纳
1
回答
AWS RDS显示,尽管# DB连接较低,但写Ops/秒却有很大
的
增长?
、
、
我有一个运行
MySQL
5.5
的
多AZ AWS RDS实例📷📷 我知道总体上写操作系统/秒
的
水平很低,但是我预计在接下来
的
几个月里会有更多
的
文件(比如100倍),并且希望确保我
浏览 0
提问于2014-01-14
得票数 6
回答已采纳
1
回答
Spark Streaming Redshift性能问题
、
我在我
的
Spark streaming代码中有许多在Redshift
表
上操作
的
创建
表
、插入和更新。我使用
的
是Spark 2.2、spark-redshift-preview 3.0.0 jar和scala 2.11.8。通过流式作业在Redshift中插入/更新5000行数据花费了超过20分钟
的
时间-这超出了我
的
spark微批处理窗口,并且使我
的
系统不稳定。我应该设置什么配置参数来加速Spark Streaming作业中
的
R
浏览 1
提问于2017-11-06
得票数 0
1
回答
选择查询会导致
高
写入
IOP吗?
、
、
我们有一个AWS RDS
mysql
数据库,它经常挂起似乎是
高
写入
IOP和
高
写入
延迟
的
数据。在这段时间里,我们不相信我们正在进行任何繁重
的
DB编写。不过,我有一个理论,即我们
的
select查询之一可能是创建大型临时
表
,因为我们运行具有大量键
的
聚合查询。我们在几百万行上运行一个查询,并进行分组,结果可以有10万行。我们是否可能达到了选择聚合
的
内存限制,从而导致磁盘
写入
?
浏览 4
提问于2022-08-24
得票数 0
1
回答
基于kafka分区
的
结构化流读
、
、
我使用spark structured来读取来自Kafka主题
的
传入消息,并根据传入消息
写入
多个镶嵌
表
,因此我创建了一个readStream,因为Kafka源很常见,并且为每个镶嵌
表
在循环中创建了单独
的
写入
流这工作得很好,但是readstream正在造成一个瓶颈,因为它为每个writeStream创建了一个readStream,并且没有办法缓存已经读取
的
数据帧。_"+tableName) .outputMode("append&quo
浏览 1
提问于2018-10-10
得票数 0
1
回答
读写
表
数据库设计
、
、
我有一个用户活动跟踪日志
表
,其中记录了所有发生
的
用户活动。这是非常
高
的
写入
表
,这是由于点击跟踪
的
深度跟踪。到目前为止,数据库设计是完美的。问题就是下一步。我需要为业务人员输出数据,这些人可以通过查询来获取过去
的
活动数据。因此,也有半中到
高
的
读取。我不喜欢在同一张
高
流量表上读写
的
想法。因此,理想情况下,我希望拆分
表
:第一个
表
用于快速
写入</
浏览 0
提问于2011-04-27
得票数 4
2
回答
如何解决
MySQL
5.1.38中lock_wait_timeout、后续回档、数据消失等问题
、
、
我使用
的
toplink与struts 2和toplink用于
高
使用率
的
应用程序,该应用程序总是访问每秒多次读取和
写入
的
单个
表
。这会导致lock_wait_timeout错误和事务回滚,导致刚输入
的
数据从前端消失。(
Mysql
的
自动提交已设置为1)。异常已被捕获并发送到应用程序中
的
错误页面,但仍会发生回滚(它必须是toplink异常,因为
mysql
没有打开回滚功能)。原始数据文件ibdata01在编辑
浏览 5
提问于2009-11-09
得票数 1
2
回答
如何在galera集群上提升
写入
速度?使用maxscale作为db代理
、
、
目前,我正在研究使用许多服务器(Linux centos)
的
galera集群。扩展读取流量是非常有效和容易
的
,但是扩展
写入
似乎很困难(没有改进)。但是
写入
速度并没有提高。
浏览 1
提问于2016-11-07
得票数 2
3
回答
速度:
MySQL
与文件输出
、
、
、
我有一个php脚本,每次执行大约一个小时,在运行期间,它需要存储关于它正在做什么
的
稳定
的
评论流供我稍后查看。基本上,每条评论都包括一个时间戳和一个简短
的
描述,比如"2/25/2010 6:40:29 PM:更新了255项
的
价格“。 那么,输出到.txt文件和插入到
MySQL
数据库中,哪个更快呢?另外,我应该使用PHP
的
date()中
的
时间戳,还是应该在
MySQL
中创建一个time对象?我问题
的
第二部分是,
浏览 0
提问于2011-02-26
得票数 1
回答已采纳
1
回答
网站遇到意外错误-如何避免?
、
、
我遇到了一个典型
的
Website encountered unexpected error问题,有时会弹出,然后在修复了watchdog
MySQL
表
之后,所有的工作都会再次找到。我
的
问题是,是否有一个模块可以自动完成这个任务?或者任何我可以从cron或drupal运行
的
脚本?谢谢!
浏览 0
提问于2015-03-30
得票数 0
3
回答
用于大文件
的
数据库
、
我有一个只有4列
的
表
。但是,每天都有大约180个新行被添加到
表
中。
MySQL
的
速度和效率是否足以处理如此多
的
数据?谢谢!
浏览 2
提问于2011-12-07
得票数 0
回答已采纳
1
回答
Mysql
集群与Percona/Maridb集群
、
、
我们希望设置一个具有主主同步复制
的
mysql
集群,以提供HA,以便一个db用于从一个应用程序
写入
,另一个用于从其他应用程序
写入
。它是一个
高
写入
和中等阅读
的
read应用程序。我们正在考虑添加
mysql
集群,并考虑percona和
mysql
集群。ndb集群能支持
MySQL
异步和双向同步复制吗?ndb集群支持4-5
表
可以加入吗?
浏览 0
提问于2015-03-19
得票数 6
2
回答
我能否实时地将数据从CloudSQL加载到BigQuery?
、
、
、
这些数据呈指数增长,我需要一种高效
的
方法来执行查询。数据库以~3GB/天
的
速度增长,我希望将数据保存至少3个月。因此,我把我
的
CloudSQL连接到BigQuery ..。下面是我在BigQuery上运行
的
一个查询示例,但我对此表示怀疑。不确定查询是在Postgres还是BigQuery中执行
的
。created_at) d, variable1, AVG(variable2) FROM my_table GROUP BY 1,2 ORDER BY d;"); 似乎查询是在postgre
浏览 1
提问于2020-06-03
得票数 1
回答已采纳
1
回答
带有ttl
的
Cassandra
表
数据已存在,但磁盘空间未释放
、
我使用
的
是cassandra (DSE4.8),在桌面上设置default_time_to_live为86400(1天),gc_grace_seconds为180 (3分钟),压缩策略为STCS。这个
表
一天
的
数据量
大约是100 is,每秒都有数据
写入
表
中,5天后我得到了大约382 is
的
表
数据。(我使用nodetool cfstats命令获取
表
数据量
)谁能告诉我为什么ttl不起作用?
浏览 4
提问于2017-12-13
得票数 1
2
回答
为什么当
写入
300 to /秒时,I/O必须
写入
MySQL
?
、
、
、
、
我正在寻找一些帮助的人与
MySQL
的
专业知识。我不需要一个确切
的
解决方案-只是一些想法和地方寻找优化。 我使用8个线程进行
写入
(每个线程分别编写不同
的
数据)。因此,我
的
问题是,当通过查询发送
的</
浏览 4
提问于2011-12-06
得票数 2
2
回答
使用多个线程导入.sql文件?
、
、
我有一个巨大
的
SQL文件(大约69 SQL)。我想把它导入我
的
本地数据库。所有
表
都是基于InnoDB引擎
的
。我试过标准
的
进口方式和但这些花了太多时间。在SQL或Python中,我们是否可以创建与diff表相对应
的
多个线程并导入它们?还有其他方法可以加快这一过程吗?
浏览 2
提问于2014-06-16
得票数 0
1
回答
使用大索引时,插入性能会降低(
MYSQL
)
最近,我发现其中一台服务器
的
磁盘I/O流量很高。在某些诊断后,由于在某些
表
上
写入
索引而导致
的
高
I/O。我做了几次评估测试,发现
mysql
在向索引较大
的
表
插入记录时会进行大量
的
写操作。索引列
的
数据类型是varchar(15)和varchar(17),两者都是非唯一
的
索引。如果我将20000条记录加载到有10000条记录
的
表
中,那么磁盘上只有80次
浏览 4
提问于2013-04-12
得票数 0
1
回答
从
MySQL
复制到SQL Server
、
、
、
我有一个不断
写入
数据
的
系统。它在
MySQL
上工作,我还有第二个系统,它在SQL Server上运行,并使用第一个库中
的
一些参数。问:如何不断地将值从一个基础(
MySQL
)转移到另一个(SQL Server)?切换到一个基础
的
选项不是一个选项。据我所知,这将有必要编写一个程序,例如在Delphi中,它将从另一个数据库
的
值转移到另一个。
浏览 25
提问于2019-09-30
得票数 0
4
回答
python中
的
网络爬虫数据库?
、
、
嗨,我用python编写了一个网络爬虫,从nytimes.com这样
的
新闻网站上提取新闻文章。我想知道什么是一个好
的
数据库作为这个项目的后端? 提前感谢!
浏览 3
提问于2010-01-27
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python处理完的df数据怎么快速写入mysql数据库表中?
MySQL 每秒 570000 的写入,如何实现?
MySQL表添加了一个字段,竟然导致数据无法写入,反思
一个高并发、大数据量的业务环境中,你会选Oracle还是mySQL?
python数据处理实战-自动统计mysql数据库数据表每天数据量
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券