滴滴大数据开发实习一面面经

1. 简历深挖
2. mysql binlog了解吗
3. shell脚本写过吗
4. 两个集群，一张hive表如何进行数据共享，A集群如何同步到B集群中
5. 一张订单表，支付状态会发生变化，如何采集到ods？

面试官说由于每张mysql表都是在系统上有应用的，所以应该用update的方式更新支付状态，不能采用数仓的方式去思考问题，不能用拉链表。数仓可以保存历史数据，但是mysql表必须要用update的方式，不然在系统上数据会显示错误。
用户角度：如果数据状态没有更新就会出现，用户界面就会显示未支付。

6. sql执行流程
7. 数据倾斜，9999w条id为1的数据，如何处理数据倾斜问题
8. 数仓的分层
9. hadoop是什么
10. spark和mapreduce的应用场景。
11. 三个sql题
第一道：b left join a表的返回结果是什么
a:
id name
1   a
1   a
2   b
3   e

b:
id name
1   a
1   a
2   b
第二道：忘了，简单的累计开窗函数

第三道：列转行

tab:

t_1 t_2 t_3

a      c    1

a      d    2

a      e    3

a      c    4

a      d    5

a      e    6

结果表

t_1    res_2   res_3   res_4

a         1           2         3

b         4           5         6

select
  t_1
  ,max(case when t_2 = 'c' then t_3 end) as res_2
  ,max(case when t_2 = 'd' then t_3 end) as res_3
  ,max(case when t_2 = 'e' then t_3 end) as res_4
from tab 
group by t_1

#滴滴##滴滴实习##滴滴数据开发#