11.29大数据开发日常实习日记

本人是26届数开选手 找的日常实习 中科院信工所的数据开发主要业务是做安全相关的 底层是大数据技术。11/26 一面，问题如下1. 自我介绍2. 实习时长，实验室研究方向，如果进来的话会考虑转正吗3. 了解过liunx吗？如果我们要查看各个运行的进程具体情况用哪些指令，查看显卡运行情况用什么指令4. 熟悉哪些语言？java常见集合有哪些5. 如果我们往hashmap中插入一个元素，说说这个过程底层是怎么实现的6. 项目数据来源，说说用什么方式采集的7. 简单说说kafka架构是怎么样的，那它里面数据是有序的吗？怎么解决kafka中数据重复问题8. HDFS小文件过多有什么影响，应该怎么解决？9. 了解过spark吗？spark相关算子有哪些？groupbykey和reducebykey有什么区别 具体说说10. 了解过flink吗反问环节总结：无手撕，面试官反应 基础知识不是很牢固 项目使用的组件不太清楚 被认为数仓搭建没有自己从0-1动手做（实际自己跟着视频一步步敲了 不过确实答的不好）因为项目是离线数仓 所以被问到spark和flink直摇头，面试的老师还是挺好的，继续学习吧#日常实习面试##数据开发##寒假实习#

除了少量八股外，其他的按照简历写的技术栈提问1、接口和抽象类的区别？2、final关键字的各种用法，简要讲解下3、说一下flink的checkpoint4、checkpoint 中barrier的两种对齐方式5、interval join操作知道吗，概述下6、窗口函数 Sliding Time Window 为什么不设置很长的窗口时间7、checkpoint 和 kafka offset的关联8、offset的提交是自己写还是用flink框架9、非Barrier对齐可以保证精准一致性吗10、flink的状态后端知道吗？ 通常使用哪种状态后端，优势分别是什么？11、MemoryStateBack...

做的都是平台需求，没有什么成就感，到现在感觉自己还是没有很强的产出。。。很想转策略，据说数据好转，在考虑有没有必要跳呢

11.27日1.自我介绍2.看我简历上写了目标检测，就问了下目标检测，问我了解模式识别吗(不了解)3.介绍一下集合4.说一下设计模式(就简单介绍了下单例，工厂和策略模式，说的有点简单，感觉还是八股没背熟)5.了解jdbc吗(不太了解，我说我一般用mybatis进行数据交互)6看我简历上写了ffmpeg，问只用他做转码吗，会不会音频分离等7介绍一下多线程(答得也不是很好)反问：一共有几面我应该多关注下底层虽然凉凉了，但也知道自己的简历以后可能会问哪些问题了，面试中卡了好几次磕，太紧张了，不知道说些什么，除了复试的第一次面试