荔枝大数据实习营-数据仓库开发实习 面经

本人是26届数开选手 找的日常实习 中科院信工所的数据开发主要业务是做安全相关的 底层是大数据技术。11/26 一面，问题如下1. 自我介绍2. 实习时长，实验室研究方向，如果进来的话会考虑转正吗3. 了解过liunx吗？如果我们要查看各个运行的进程具体情况用哪些指令，查看显卡运行情况用什么指令4. 熟悉哪些语言？java常见集合有哪些5. 如果我们往hashmap中插入一个元素，说说这个过程底层是怎么实现的6. 项目数据来源，说说用什么方式采集的7. 简单说说kafka架构是怎么样的，那它里面数据是有序的吗？怎么解决kafka中数据重复问题8. HDFS小文件过多有什么影响，应该怎么解决？9. 了解过spark吗？spark相关算子有哪些？groupbykey和reducebykey有什么区别 具体说说10. 了解过flink吗反问环节总结：无手撕，面试官反应 基础知识不是很牢固 项目使用的组件不太清楚 被认为数仓搭建没有自己从0-1动手做（实际自己跟着视频一步步敲了 不过确实答的不好）因为项目是离线数仓 所以被问到spark和flink直摇头，面试的老师还是挺好的，继续学习吧#日常实习面试##数据开发##寒假实习#

数据开发日常实习的一面，也是我的第一面。投简历的时候没想到会这么快，上午投的简历，晚上就打电话约第二天面试，自己完全没准备好，以为会有一个礼拜左右缓冲时间。和hr约了第三天面。首面还是非常紧张，问的问题很多都回答不上来，表现很差。后续一个礼拜没有联系，应该是g了自我介绍，介绍一下项目以及项目中用到的一些大数据组件HDFS的文件存储格式有哪些（这个真没想起来）MapReduce过程，MapTask和ReduceTask个数怎么确定MapReduce阶段哪些因素会影响性能Flink和Spark Streaming的区别数仓建模理论主题域和数据域的区别（这个问题一开始没听懂，后来感觉应该想问主题的确...

bg: 双非硕1. flink sql怎么计算24小时UV/PV？(开窗)2. 有没有spark调优经验，有没有具体的case（executor调整）3. spark ui如何查看executor内存？4. 介绍项目5. 数仓建模过程6. dwd和dws区别7. 做题#凉凉##凉经##小米##ai智能作图#

26届Java选手，面了很多大厂后端实习基本都挂了，稀里糊涂接了大数据的实习，总体比较顺利，先去沉淀了9.27美团数开一面  30min介绍一个项目项目中的难点sql 求每月最大和最少的订单数量二分查找面完10分钟打电话约二面9.30美团数开二面  50min介绍两个项目MySQL 索引介绍一下HadoopHDFS有几个个副本，为什么深挖Shuffle原理sql 面试官自己出的 一个表找一下互相关注的人，只能输出一列算法：复原ip地址10.8oc #美团# #美团工作体验# #美团实习#