[MySQL] SQL去重方法汇总

• task_id: 任务id;
  
• order_id: 订单id;
  
• start_time: 开始时间
  

注意：一个任务对应多条订单

-- 列出 task_id 的所有唯一值（去重后的记录）
select distinct task_id
from Task;
-- 任务总数
select count(distinct task_id) task_num
from Task;

-- 列出 task_id 的所有唯一值（去重后的记录,null也是值）
-- select task_id
-- from Task
-- group by task_id;
-- 任务总数
select count(task_id) task_num
from (select task_id
    from Task
    group by task_id) tmp;

-- 在支持窗口函数的 sql 中使用
select count(case when rn=1 then task_id else null end) task_num
from (select task_id
     , row_number() over (partition by task_id order by start_time) rn
   from Task) tmp;

-- 下方的分号;用来分隔行
select distinct user_id
from Test;  -- 返回 1; 2
select distinct user_id, user_type
from Test;  -- 返回1, 1; 1, 2; 2, 1
select user_id
from Test
group by user_id;  -- 返回1;  2
select user_id, user_type
from Test
group by user_id, user_type;  -- 返回1, 1; 1, 2; 2, 1
select user_id, user_type
from Test
group by user_id;  
-- Hive、Oracle等会报错，mysql可以这样写。
-- 返回1, 1 或 1, 2 ; 2, 1（共两行）。只会对group by后面的字段去重，就是说最后返回的记录数等于上一段sql的记录数，即2条
-- 没有放在group by 后面但是在select中放了的字段，只会返回一条记录（好像通常是第一条，应该是没有规律的）