mysql sum 重复计算_mysql join sum时数据重复问题及解决方案

当我们使用mysql的join功能从多张表中取出数据并使用sum分别对取出的数据求和时

会发现sum出来的值是不对的，往往是正确值的整数倍

为什么会出现这样的情况呢

复现

假设有两张表：user_buy 和user_sell，分别记录了用户在某天的购买和出售金额，

结构如下：

CREATE TABLE `user_buy` (

`id` int(10) unsigned NOT NULL AUTO_INCREMENT,

`uid` int(10) unsigned NOT NULL COMMENT '用户id',

`amount` int(10) unsigned default '0' COMMENT '数量',

`init_time` date not null comment '日期',

PRIMARY KEY (`id`),

KEY `uid` (`uid`) USING BTREE

) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COMMENT='用户购买统计';

CREATE TABLE `user_sell` (

`id` int(10) unsigned NOT NULL AUTO_INCREMENT,

`uid` int(10) unsigned NOT NULL COMMENT '用户id',

`amount` int(10) unsigned default '0' COMMENT '数量',

`init_time` date not null comment '日期',

PRIMARY KEY (`id`),

KEY `uid` (`uid`) USING BTREE

) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COMMENT='用户出售统计';

数据如下：

 

现在我想求用户在一段时间里面的购买总金额 - 出售总金额，并根据差值排序，取前30个用户

一番思考后，我写下了如下sql

SELECT
    ub.uid,
    sum( ub.amount ) - sum( us.amount ) total 
FROM
    user_buy ub
    LEFT JOIN user_sell us ON ub.uid = us.uid 
GROUP BY
    ub.uid 
ORDER BY
    total 
    LIMIT 30

得到如下结果：

很明显，这个结果是不对的

用户11的正确值应该是(100+200) - (10 + 20) = 270

用户22的正确值应该是(300+400) -(30 + 40) = 630

sql得出的结果是正确值的2倍！

猜想

由于按照uid字段进行聚合，且uid也是两个表关联的联结字段，因此会出现以下情况：

1.user_buy中的某个uid在user_sell中存在，且在user_sell中有n条记录时，会使得sum(ub.amount)的值变为正常值的n倍

2.user_sell中的某个uid在user_buy中存在，且在user_buy中有m条记录时，会使得sum(us.amount)的值变为正常值的m倍

验证

修改数据，在user_sell中增加一条uid = 11的数据

 继续用上面的sql查询：

用户11的正确值应该是(100+200) - (10 + 20+30) = 240

780 怎么来的？

(100+200)* 3 - (10 + 20 +30)* 2 = 780

1260同理，猜想正确

解决方案

为了避免联表字段同时满足多条记录的情况

先用子查询在各自表中完成数据的聚合，将数据存放在临时表中，再联合临时表

此时两个临时表中的数据对聚合字段uid来说都是唯一的

sql如下：

SELECT
    ub.uid,
    sum( ub.amount ) - sum( us.amount ) total 
FROM
    ( SELECT uid, sum( amount ) AS amount FROM user_buy GROUP BY uid ) AS ub
    LEFT JOIN ( SELECT uid, sum( amount ) AS amount FROM user_sell GROUP BY uid ) AS us ON ub.uid = us.uid 
GROUP BY
    ub.uid 
ORDER BY
    total 
    LIMIT 30

结果：