zoukankan      html  css  js  c++  java
  • mysql 高并发更新计数问题

    问题:功能为链接的点击计数,其他两个计数更新 还有两个内容表的插入,只插入链接对应的id,分4个库,共128个表,mysql每天有5000万次插入和5000万次更新操作,压力负载过大,需要想方案,对计数更新做合并处理,或者加cache,一定时间后flush到磁盘DB。

    目前有batch处理程序,使用java.sql包原生类,但执行一段后就出现 java.sql.BatchUpdateException: Deadlock found when trying to get lock; try restarting transaction 错误

     

    解决进行中,未完成。

    解决步骤

    show global status like 'Com%' 查询当前db的crud次数

    mysqladmin -htestdb -P3306 -utest -p -S /tmp/mysql.sock -r -i 10 extended-status | egrep "Com_select | Com_insert|Com_update"

    统计每十秒的查询 插入 更新次数

    |Com_insert | 5210 |
    | Com_insert_select | 0 |
    | Com_select | 2033 |
    | Com_update | 0 |
    | Com_update_multi | 0 |

    插入时出现 java.sql.BatchUpdateException: The table 'xxx' is full
    有说是 tmp_table_size参数和max_heap_table_size参数问题

    查看了硬盘发现是硬盘空间不足,100%使用,删除无用文件

  • 相关阅读:
    dedecms内容页调用缩略图 缩略图多种用法(借鉴)
    线性回归
    Jupyter Notebook 快捷键
    etcd入门
    Centos7 Docker安装
    TFIDF介绍
    Ceph 概念理解
    Nifi简介及核心概念整理
    经典排序算法总结
    Hbase协处理器
  • 原文地址:https://www.cnblogs.com/shenguanpu/p/2494707.html
Copyright © 2011-2022 走看看