25届2研双非本，想找大数据开发相关工作，求大佬拷打下简历

电话面试15min 不知道是不是KPI，没让自我介绍，上来直接问。1.简历上的两个项目都是你自学的吗？2.你写HQL常用的函数？3.你说的rank，那你说说rank和row_number区别4.之前用数据中台吗？5.用过国产数据库吗？6.面试官说他们数据库是必须要用国产的7.介绍一下你的项目吧（说完面试官就没细问了）8.后年毕业，啊？你才大三吗？😓9.平时要写接口，你能聊聊吗？（Java太久没用🥲）10.我们工作比较综合，数据从头到尾全链路的都会接触，不会侧重于单一的写SQL算指标。（我理解就是他们项目数据量级不大，所以每个人要做的事情比较杂）总结：后端的知识也要捡回来，不能只当SQLboy#大数据开发面经# #大数据面经# #面经#

自我介绍项目里做的是什么工作？建模设计？数据采集？还是其他什么？（项目是sgg）数仓建模怎么样？聊一聊那你是主要做指标计算这一块吗？（面试官这个的时候已经知道我对这个sgg的项目没有吃透了，然后就转移其他问题了）问另一个项目spark了解地怎么样？说说两种shuffle（hashshuffle没有聊好）spark底层运行原理说一下hive掌握得怎么样？小文件是怎么产生的？（这一点没答好，我没准备到位，就硬扯map切片机制）那hive是怎么优化小文件问题呢？你有处理过埋点数据吗？（这一点也没准备）然后面试官在哀声叹气了写两题sql吧行转列连续登录你用到了排序函数，聊聊他们的含义吧（rank，de...

offer快来！

1. HDFS的架构HDFS主要包括三个部分，namenode，datanode以及secondary namenode。这里主要讲一下他们的作用：namenode主要负责存储数据的元数据信息，不存储实际的数据块，而datanode就是存储实际的数据块，secondary namenode主要是定期合并FsImage和edits文件（这里可以进行扩展，讲一下为什么有他们的存在？首先namenode存储的元数据信息是会放在内存中，因为会经常进行读写操作，放在磁盘的话效率就太低了，那么这时候就会有一个问题，如果断电了，元数据信息不就丢失了吗？所以也需要将元数据信息存在磁盘上，因此就有了用来备份元数...