如何优化需要花费大量时间的“优化”MYSQL查询

内容来源于 Stack Overflow,并遵循CC BY-SA 3.0许可协议进行翻译与使用

  • 回答 (2)
  • 关注 (0)
  • 查看 (9)

我有一张桌子(innodb),每周有100万个新插页(20GB)。我只需要1周的数据,所以我在7天后删除它,所以每天我们删除大约3GB并插入3GB新。该表已与其余数据库位于不同的数据库中。

问题是磁盘空间仅在优化查询后释放,因此我们每隔几周运行一次。它工作,但它需要30分钟,并冻结整个数据库服务器的时间,而不仅仅是特定的数据库。

有没有办法更快地加入?

如果我们每次删除数据时都运行优化,那么它会比每隔几周运行一次优化更快吗?我认为当需要从磁盘中删除3GB已删除的行时运行它可能会更快,如果我们在20天之后运行它是60GB。是对的吗?还有另一种方法来优化优化吗?

提问于
用户回答回答于

由于你有一个没有的古董版本PARTITIONing,这是另一种解决方案:

  • 压缩html并存储到BLOB(而不是TEXT)。
  • 在客户端进行压缩和解压缩。
  • 这种技术可以将磁盘占用空间缩小到3:1以上。

这不会消除这个OPTIMIZE问题,但它会

  • 使用更少的磁盘空间。
  • 更快(由于挖掘的数据较少)。

但是,正如已经提到的,InnoDB在某种程度上清理了自由空间。我怀疑在Optimize之后表格没有超过2倍?通常情况下,在没有自由空间的情况下开始的BTree在大量流失后会降低到大约69%。但后来它保持这个比例。

电子邮件,HTML,文本,代码 - 所有这些都与任何体面的压缩库(zlib,PHP compress()等)缩小约3:1 。大多数图像格式和pdf都已经过压缩; 他们没有受益于第二次压缩。

热门问答

在serverless中,我能否自己host 一个express(nodejs)的服务?

Tina

腾讯云 · 产品经理 (已认证)

Go Serverless!
推荐
您好,可以这样的。您可以参考如下文档,申请下http function 您可以使用常见的 WEB 框架(如 Nodejs Web 框架:Express、Koa)编写 HTTP 函数。而 WEB 框架内置的一些中间件(如cors)也会极大的方便您的业务编写 文档链接 https:...... 展开详请

使用有过期时间的签名往Cos存储桶中上传文件,若上传还在进行中签名过期,上传是否会终止?

galenye

腾讯 · 工程师 (已认证)

对象存储专业搬砖工
推荐已采纳

如果你是使用的简单上传,它能接收5g以内的文件,那签名过期的文件还在上传的话,是没影响的,因为签名判断是在cos接受到请求时。

如果你是使用的sdk等封装的分片上传,那其实是多个请求去上传文件,如果签名过期了,那上传到某一刻,后面的请求都会返回403

存储桶的默认加速域名 cdn 如何更改业务类型, 即把静态加速改成下载加速?

Jinqn

腾讯 · 高级工程师 (已认证)

腾讯云COS前端开发
推荐

我理解你意思是,浏览器打开的时候要下载,不要直接显示。

通过存储桶的文件 Content-Type 来控制

为何我使用.Net API 生成的临时密钥无法进行文件操作?

推荐
cos有自己的密钥系统,应该是在控制台上,访问管理,API密钥,项目密钥那里,或者去看看cos的文档是如何说明的吧。 你通过ms接口创建cos临时密钥,也许的确会被限制一些,这个需要ms这个产品的人回答下比较好。 生成临时密钥和哪个SDK无关,可以直接在线调用也可以生成,通过AP...... 展开详请

tencentcloud-sdk-php-master github代码上没有vendor文件夹?

推荐
因为和composer冲突,因此导出时没有包含vendor目录。如果需要,可以考虑git clone方式拿到,或者到https://cloud.tencent.com/document/sdk/PHP#.E9.80.9A.E8.BF.87.E6.BA.90.E7.A0.81.E5...... 展开详请

请问微信云支付是否有沙箱环境?

HKC

红客学院 · 创始人 (已认证)

道可道 非常道 名可名 非常名
推荐
微信支付沙箱环境,是提供给微信支付商户的开发者,用于模拟支付及回调通知。以验证商户是否理解回调通知、账单格式,以及是否对异常做了正确的处理。 ◆ 如何对接沙箱环境? 1、修改商户自有程序或配置中,微信支付api的链接,如:被扫支付官网的url为:https://api.mch.w...... 展开详请

所属标签

扫码关注云+社区

领取腾讯云代金券