大数据开发

bg双9，非科班，3段中大厂实习 最近秋招陆续开了，投了一圈一个面都没有。不知道是不是简历写太烂！求大佬们锐评 #秋招# #大数据开发#

9.27二面总计45分钟左右1.自我介绍2.实习经历介绍3.项目介绍4.逐一拷打简历上的各个方面，首先是实习，实习内容，实习产出，实习收获，问到实习期间做的工作时会深入问项目细节（数仓分层情况，项目数据情况等）5.实习拷打的差不多了问了个专业名词：数据血缘，没听说过，随便胡诌了一点ods层和dw层关系溯源的情况，面试官说意思差不多，然后给我讲了一下这个名词6.拷打项目，从项目数据源到数据中间层设计，项目框架，数仓设计，数仓模型分类，redis缓存的一些八股7.项目拷打完来两个手撕，两道SQL题，一道Java题8.sql比较简单，常规题9.Java题是实现一个栈，实现出栈，入栈，查看栈顶元素三个方法（有点汗流浃背）10.反问部门业务，工作业务对接情况，出差情况等面试完还提了一嘴什么时候会出结果，回答：流程快的话应该是国庆节后几天10.10三面 三面共计三十分钟左右，部门大leader面1.自我介绍2.实习拷打3.项目拷打4.项目细节拷打5.介绍本科和硕士的经历，选了感兴趣的问了一下6.遇到过的困难，如何解决的7.反问 什么时候出结果，回答会让hr尽快联系我，反手就给挂了还是倒在了三面，什么时候才能有offer呀#携程##携程面试##大数据开发##凉经#

接下来这几道题，算是所有面经里面出现频率最高的（仅限牛客大数据开发面经分享），有的公司甚至一二面都常有重复的题（比如美团~）。 公众号：旧时光大数据 一、Hadoop部分 一、HDFS文件写入和读取过程 可灵活回答： 1）HDFS读写原理（流程） 2）HDFS上传下载流程 3）讲讲（介绍下）HDFS 4）HDFS存储机制 问过的一些公司： 阿里×3，阿里社招，腾讯x2，字节x2，百度，拼多多x2，浩鲸云，小米，流利说，顺丰，网易云音乐×2，有赞×2，祖龙娱乐，360×2，商汤...

美团高频数开面试题分享|2024届校园招聘即将开始：https://www.nowcoder.com/discuss/515311167196160000?sourceSSR=users字节最全数开面试题|有同学拿了字节提前批offer：https://www.nowcoder.com/discuss/509134018885992448?sourceSSR=users快手大数据开发高频面试题及答案【海量hc】：https://www.nowcoder.com/discuss/527892445468577792?sourceSSR=users微众大数据开发高频面试题及答案【附JD分析】：ht...

面试时间：1h 10min自我介绍实习工作的一些问题项目相关的一些问题Java基本数据类型？String为什么不是基本数据类型？能不能继承？如果需要频繁地拼接字符串用什么？为什么？StringBuffer、StringBuilder 的区别？Java的集合类了解吗？都有那些？它们的继承关系是怎么的？讲讲HashMap？HashMap多线程下怎么办？多线程的HashMap它的原理？并发编程的问题，听的有点懵，说不会，他又换了一个，还是不会，尴尬JVM内存结构？类加载机制？线程池了解吗？介绍一下设计模型用过那些？在哪里用过？线程和进程的区别？我看你学过python，python里面的协程和进程线程有什么区别吗？MapReduce原理？Spark为什么比MaReduce快？现在还有用MapReduce的吗？比起Spark，MapReduce的应用场景？Spark任务执行的流程？宽窄依赖？HDFS是如何保证数据可靠的？机房断网，造成脑裂怎么办？Flume构成？你在项目里是怎么用的？Kafka的构成？多个partition，怎么能保证全局有序？回答可以设置一个partition，不知道其他方法，反问面试官。他说这是别人问他的，他也不知道，问问看我能不能知道....数据库和数据仓库区别？数仓为什么要分层？星型模型和雪花模型区别？维度表和事实表，介绍一下？SQL：给了一张用户登陆表，求每个日期用户的活跃数、7日留存用户、7日活跃留存率好像最后时间不够了，我还没写完，就让我说了一下思路反问：部门业务是什么实习生都做什么工作对实习生有什么要求总结：- 问了很多项目相关的问题，很细，我开始以为一面只会问八股，没怎么准备，猝不及防- 面试官说他不是这个部门的，似乎是后端开发的，问了不少Java 的八股，Java集合的内容很久没复习，忘得差不多了；并发编程是都没研究过- 第一次面试，有些紧张，NameNode和DateNode、线程和进程 这些嘴瓢都说乱了，面试官人挺好的，还在安慰我别紧张#我的实习求职记录##美团##大数据开发#

推荐阅读文章列表 大数据开发面经汇总【持续更新...】 我的大数据学习之路 大数据开发面试笔记V6.0 SQL题目 来自字节跳动数据开发一面 有一张用户登录日志表ods_login_usr_log, 包含user_id（用户id）和login_dt（登录日期） 问题：计算每个用户最大的连续登录天数，可以间隔一天 -- 举例如下： -- 输入 use_id login_dt 1001 20240812 1002 20240812 1001 20240813 1001 20240814 1001 20240816 1002 20240816 1001 202...

#牛客解忧铺##牛客在线求职答疑中心##你觉得今年春招回暖了吗##面经##大数据开发#附加信息：211本+985硕（非计算机），笔试4出头的分数，面了90分钟，面试官人超好，奈何本人过菜1、部门介绍2、自我介绍3、项目介绍，在项目中承担什么角色，如何完成工作大数据相关：4、对大数据开发的理解5、知道什么常用的大数据开发组件6、谈谈MapReduce的原理7、谈谈shuffle的实现方法8、对spark有什么理解？为什么Spark的运行速度快MySQL相关：9、对索引的理解10、索引的数据结构是什么？有什么好处？11、数据库设计三范式12、常用的数据引擎有什么？InnDB有哪些优势？13、sql题：计算排名14、sql题：用户净增长15、sql题：用户留存率16、sql题：表格转置17、反问

一面：自我介绍hdfs架构，读写流程mr的shuffle，mr和spark的区别sqoop和flume的应用场景项目数仓分层，各层干了什么维度建模理论了解调优吗数据倾斜两道sql，连续登录和好友数量反问二面：自我介绍拷打项目建模理论sql，分组topk，行转列窗口函数介绍排序方式了解哪些，order by有几个reduce文件存储格式反问感恩脉脉，我要为脉脉当牛做马#面经##大数据开发#

    2023年4月，大数据开发面试笔记V3.0发布，过去已经两个月，V4.0终于来了，这次主要新增了企业级调优手法以及数据湖基础等内容。如今面试越来越难，常常会被问到大数据的前沿知识比如数据湖，以及企业级调优手段有哪些等，于是我结合自己在大厂的工作经历进行了补充，最终汇聚成一份全面的大数据开发面试笔记。    此笔记包含大数据开发、Java、计算机基础、数仓理论、常考SQL、大数据开发场景题、大厂面经合集、大厂SQL真题、企业级调优手法、数据湖基础等十大模块，并且所有内容会持续更新。第一部分 大数据开发HDFS...

记录一下暑期实习投递历程 5月17号开始投递 因为之前在脉脉实习 一直推到5月才开始找 基本上暑期实习都快截止了 投了很多 也都没有回信。每天都盯着boss 官网 牛客 实习s 不管三七二十一 都投了  终于零碎约到几家日常实习面试【shein 希音】一面:聊实习 基本上都是我在讲 。把实习的工作内容 都给他讲了一遍（不是很感兴趣）。八股: 内部表和外部表区别 缓慢变化纬然后问我实习多长时间 工作地点深圳 能不能接受没约二面 感觉挂了【电信—天翼安全】一面: 聊实习 说了好久。然后 问了几个简单的八股 介绍一下spark  内部表和外部表区别 对实时感兴趣吗。 面试官说 很缺人 ，转正很容易。最后发offer了【大疆】一面（25分钟） :聊实习 面试官比较感兴趣 聊了好久 口述一道sql 连续登录 三种解法二面（10分钟） : 纯聊天 我实习的内容和下面要做的很像 面试官想让我去最后发offer了 【百度】一面:聊实习 然后问了两个很基础的八股 出了一道sql 比较简单 算法题入门dp  左上角到右下角路径的种类二面 面试官 很牛 一上来就探讨Hadoop切片问题 聊了十分钟 尬了五分钟 （完全不会）出了一道sql比较简单 算法题 验证IPV4和IPV6 没写出来最后挂了【美团】一面 聊了一下实习 按照简历问的八股 面试官什么都问了 学的课程也问了 八股问的spark相关 为什么要有DAG图 为什么要划分阶段  然后出了一道算法题 验证二叉搜索树二面 聊了一下实习 还有简单的spark八股 最后发offer了 #大数据开发#

推荐阅读文章列表：大数据开发面试笔记V4.0 || 面试聊数仓第一 || 小白大数据学习路线 全文1.5w字，题目比较多，请耐心阅读！！！一、前言原文链接：https://www.nowcoder.com/share/jump/1689088775835之前发过一篇字节跳动面经汇总的帖子，但是当时答案并没有更新完全，最近在字节开了提前批后，我立马更新了所有的题目答案，发出来供大家面试参考！！！赶紧投递！！！赶紧投递！！！赶紧投递！！！二、面经汇总Hadoop篇1.介绍一下Hadoop hadoop是什么Hadoop是一个由Apache基金会所开发的分布式系统基础架构，主要解决海...

作为一个数据工作者，肯定不少被问窗口函数的问题，比如用过什么窗口函数，或者出个题，一般都是需要用到窗口函数才能完成。所以这一篇，专门讲窗口函数，不是做数据开发的也可以看看，当作学习也好，指不定哪天要实现这种逻辑。 什么是窗口函数 相信很多人都比较熟悉 SQL 聚合函数的语法，比如 count(), sum(), max()等， 窗口函数类似聚合函数，不同的是窗口函数不改变原有的行。 窗口函数是数据分析和数据开发必备的技能。 基本语法： <窗口函数> over (partition by <用于分组的列名> order by <用于排序的列名>) 可能这样的解...

前情提要：本文主要面向想在数仓方向求职的牛油，仅是我的个人理解和想法，欢迎提出建议和修改意见    近期有周围同学和个别牛友有问我：“数据仓库岗位需要准备什么才能找到实习或工作”，我在牛客上没有找到面向小白的比较清晰的解答，所以试着回忆一下我的去年春招（实习）和今年秋招我做的准备，并试着做一点总结，看能不能解决大家的部分疑惑。    首先，实习和秋招都面过多个互联网大厂，发现实习和正式的难度差距不是很大的。不要抱着“我随便学学就能找到实习”或“实习应该不需要会许多技术栈吧，我大概了解一下大数据组件就好”的想法。我大概觉得实习是秋招的70%难度（感觉日常实...