一拳打在棉花上 level
获赞
20
粉丝
12
关注
3
看过 TA
185
华中师范大学
2025
大数据开发工程师
IP属地:湖北
暂未填写个人简介
私信
关注
分享一下我在大数据方向的学习路线,列出的基本上是必须掌握的内容。对于项目方面,建议先离线后实时项目,再之后便是数据湖等项目。另外推荐《大数据之路》这本书,里面涉及到的理论和企业中的白皮书基本一样。平常也可以多翻看各个公司公开分享的技术文章,源码等。比如:阿里的学习文档、美团的技术文档等,在没有实际生产经验时可以了解各个场景下技术选型、底层调优、内存调整、资源配置、数据治理等各个重要环节和内容。1. Java:JAVA SE、JVM、JUC(刚开始只需要看Java基础就可以,不要花太多时间在Java的学习上,也不需要学习一些web框架,因为不管是源码二次开发,UDF开发,还是数仓都不需要用到这些框架,除非涉及到数据平台开发。2. Linux+Shell,熟悉基本操作即可3. Git、Maven(了解会用,如果需要使用能快速学习上手使用即可)4. Hadoop(重点,HDFS,MapReduce,Yarn)5. Zookeeper6. Hadoop高可用(了解即可)7. Flume8. Kafka(重点,时间紧张的话可以大致了解用途,后面可以和Flink一起学,主要用来处理实时数据)9. Hive(重点,需要熟练了解原理,并且会写HQL,以及一些优化,是基础)10. Spark(重点,大部分公司都是写SparkSQL,并且调优,需要明白底层原理,内存结构,SparkUI等,来不及的话可以先跳过Java API编写Spark代码的学习)11. Maxwell、DataX、DolphinScheduler(项目中数据同步、模拟日常调度工作)12. 离线数仓项目:sgg电商数仓6.0(跟着做完这个项目,就知道数仓、维度模型、指标体系等等,以及生产中一些内容。这套教程比较全面,若来不及可以选择sgg其它离线数仓项目)。学到这里可以去找实习,实时数仓等技术可以在实习中抽空学13. Flink(重点)14. MPP架构(如:Doris、Clickhouse、StarRocks)15. 实时数仓项目16. 数据治理17. 数据湖、湖仓一体18. 刷算法、刷sql、刷场景题 #数据开发工程师# #秋招#  #春招#  #实习#  #大厂#
投递美团等公司10个岗位
0 点赞 评论 收藏
分享
12月底收到农行数据中心补录签约,直接绝杀秋招,现在来做个总结。bg:双非本,211硕方向:数据开发整个秋招从8.11号开始,12.27号结束,持续四个半月。累计投递226家,(招聘软件上投递的不计),收到560封邮件,做了45次测评,62场笔试,42家给了面试机会。总共面了68场(包括AI面),收到9个oc,其中最高的年包35万。目前还有京东、滴滴、爱奇艺面完了一个多星期跑池子中。8-9月期间在边实习边改简历,以每天三家的速度投递互联网大厂和银行。一开始对自己的项目没有思考地很深入,也缺少了Flink实时数仓、数据湖这部分的八股,导致大厂都没有面试成功。后续整理了很多面经,把项目进行了沉淀,准备地更充分了,但大厂面试机会也没有了。九月份基本上每天都在做笔试测评,但做完了就没有消息,颗粒无收,挺焦虑的。10-11月期间开了很多国企,就重点投递国企,刚投递完就会收到测评和笔试,一天最多做了5场笔测,但做完后也没有收到面试通知,基本上都石沉大海,每天都在痛骂。但还好10月中旬陆续收到了一些银行的笔试,就开始学银行EPI,顺便学学行测找找后路。终于在月底收到了中通sp的oc,但我往上a了薪资,hr直接告知我没审批下来,直接毁了意向。当时又生气又无力,但也没有办法,只能继续找。被毁意向后的一个星期更加焦虑(但现在看来,幸好意向被毁了没签约),因为金九银十过去了还是没有offer。还好11月初收到了移动子公司和深圳外企的offer,考虑到女朋友在深圳而且这家外企给的挺高,还可以随时毁约,就先签了当保底。签了之后,9月和10月疯狂笔测埋下来的种子才开始慢慢发芽,银行、运营商和国企开始陆续发力约面试,反正只要面试时间不冲突我就会去面。银行和运营商的面试确实比互联网强度小很多,但他们的难度在于问的八股比较偏门,很难准备到。很多银行都是海面,有的还必须要求线下,吭哧吭哧坐高铁到了线下,结果4个人进去总共就面试10分钟,还没有后续,校招生地位真的太低了。我反而在12月收到的好机会是最多的。本来已经做好了春招再冲刺大厂的准备,但没想到12月,大厂开始了补录,银行和国企也在快速推进,我就在boss上疯狂投递,看看有没有捡漏机会,收到了好几家原本初筛就被挂掉的公司发来的面试邀请。因为自己在九月份过后面了很多中小公司,也沉淀了很多技术文档,所以京东、滴滴、爱奇艺都很快面完了三面,面试官评价都还不错,但到现在还是在泡池子。已经做好了备战春招和考事业编的打算,但幸好收到了农行数据中心的补录,至此才觉得漫长且折磨的秋招终于结束了。整个秋招最大的感受就是特别卷,还有心累。一方面是因为金九银十这个说法,我们都被这个说法给裹挟着向前,给我们一种十月找不到工作就只能等春招的感觉。但可能对于我们这种非双9的人来说,11月和12月才是我们真正的秋招(冬招)。另一方面是因为企业和校招生这个供需市场的失衡以及信息不对称。企业先让你经过测评、笔试一系列的服从测试,有的甚至就白嫖你的笔测时间,你刚做完笔试就给你挂掉。如果企业良心一点,可能拉你进行三到四轮的面试,通过后就把你放到养的蛊中。问就是还在评估中,一直消磨你的耐心。好不容易泡出来了,就逼你签三方,三天内必须给答复。对于三方,名义上保护学生,但实际上恰恰限制住了学生。企业邀请学生签约,可以要求学生三天内必须应邀否则直接失效。企业解约时也是说解就解,学生没有一点办法。但学生要解约时却难如登天,先需要和企业协商,很多企业或者学校还会限制在明年才统一处理解约。个人觉得如果公平一点,学生解约时应该也可以设置一个企业回应时间,若企业超过3天未回应,学生交了违约金后,直接解约。总之,秋招大部分看的就是运气,当然也得是投递地够多,面试地够多,进的池子够多,这个运气才能有依附的载体降临到头上。希望大家能收到心仪的offer#秋招##农行数据中心##京东##秋招总结##滴滴#
0 点赞 评论 收藏
分享

创作者周榜

更多
关注他的用户也关注了:
牛客网
牛客企业服务