mysql 高并发更新计数问题

问题:功能为链接的点击计数,其他两个计数更新 还有两个内容表的插入,只插入链接对应的id,分4个库,共128个表,mysql每天有5000万次插入和5000万次更新操作,压力负载过大,需要想方案,对计数更新做合并处理,或者加cache,一定时间后flush到磁盘DB。

目前有batch处理程序,使用java.sql包原生类,但执行一段后就出现 java.sql.BatchUpdateException: Deadlock found when trying to get lock; try restarting transaction 错误

解决进行中,未完成。

解决步骤

show global status like 'Com%' 查询当前db的crud次数

mysqladmin -htestdb -P3306 -utest -p -S /tmp/mysql.sock -r -i 10 extended-status | egrep "Com_select | Com_insert|Com_update"

统计每十秒的查询 插入 更新次数

|Com_insert | 5210 | | Com_insert_select | 0 | | Com_select | 2033 | | Com_update | 0 | | Com_update_multi | 0 |

插入时出现 java.sql.BatchUpdateException: The table 'xxx' is full 有说是 tmp_table_size参数和max_heap_table_size参数问题

查看了硬盘发现是硬盘空间不足,100%使用,删除无用文件

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

扫码关注云+社区

领取腾讯云代金券