问题:功能为链接的点击计数,其他两个计数更新 还有两个内容表的插入,只插入链接对应的id,分4个库,共128个表,mysql每天有5000万次插入和5000万次更新操作,压力负载过大,需要想方案,对计数更新做合并处理,或者加cache,一定时间后flush到磁盘DB。
目前有batch处理程序,使用java.sql包原生类,但执行一段后就出现 java.sql.BatchUpdateException: Deadlock found when trying to get lock; try restarting transaction 错误
解决进行中,未完成。
解决步骤
show global status like 'Com%' 查询当前db的crud次数
mysqladmin -htestdb -P3306 -utest -p -S /tmp/mysql.sock -r -i 10 extended-status | egrep "Com_select | Com_insert|Com_update"
统计每十秒的查询 插入 更新次数
|Com_insert | 5210 | | Com_insert_select | 0 | | Com_select | 2033 | | Com_update | 0 | | Com_update_multi | 0 |
插入时出现 java.sql.BatchUpdateException: The table 'xxx' is full 有说是 tmp_table_size参数和max_heap_table_size参数问题
查看了硬盘发现是硬盘空间不足,100%使用,删除无用文件