百度-大数据工程师一面

#软件开发笔面经# 自我介绍第一个项目中的成员分工数据规模是多少数据模型是怎样考虑的项目中有没有遇到过什么问题，是如何解决的当时考虑接外部软件是吧，为什么没有考虑在数据可视化部分自己做一些定制化的开发第二个项目是部署上线的，可使用的项目是吧SQL中做行列转换如何操作如何找到脏数据中十条重复数据并删除如果直接筛，可能导致被锁住，有其他办法么SQL中几种删除方式的区别索引有了解吗，有哪些索引的类型什么情况下会导致索引失效分区有了解过吗大数据量处理慢SQL的解决和优化方法雪花模型和星型模型的区别事实表和维度表有什么区别Hive中内外部表有什么区别Hive和Spark有什么区别Sqoop在项目中主要做什么如何用Sqoop实现增量数据的处理常用Linux命令具体讲解改文件执行权限用什么命令做定时任务用什么命令找到某一目录下，找到占用空间的最大的文件创建文件呢校园经历，写过PPT是吧

研二 | 快手后端开发实习✅总体感受：目前来快手实习已经两个半月啦～，最大感受就是快手的工作强度真的很大我们的工作时间是早十晚九！我正常都是10.30左右到，晚上9点左右走✅实习生培养：我们这边的业务主要是ToB业务，看板类需求比较多，刚开始阶段挺轻松的，可能是因为我是第一次实习，没有给我太大的压力，mentor对我也超级好，有求必应，做久了发现ToB的业务真的业务逻辑蛮复杂的！✅福利待遇：入职当天就会有180的餐补打到工卡里，每天八点下班会有三十餐补，周六周日每天打卡满八小时，一天会给六十的餐补，同时双外的同学会有1500的房补，所以基本吃住就不需要花钱了。平时手子也会在公司楼下举办一些小活动，发放小礼品～✅最关心❗️给大家算笔账吧❗️1️⃣研究生是400/day，按照一个月正常平均工作日21天算：400*21=8400r2️⃣餐补每天30r/day，30*21=630r3️⃣房补:如果你是双外，非京籍，非京校，租房在5km以内，房补1500r/mouth❇️正常合计一个月工资卡到账：8400+1500=9900r🉑如果你足够努力，周末愿意去公司打卡8h，周末一天就是60元，按一个月8个周六日，60*8=480元🈴计一个月到账9900工资➕1110餐补✅吃饭开销，食堂的饭菜多种多样，正常我觉得平均一顿接近20左右，1110餐补基本上能cover吃饭✅房租：我是一个比较有维权意识，不喜欢被坑的人，所以租房非常谨慎，也是货比三家认识了现在这个房东，因为不喜欢隔断，所以我租的是主卧，2700一个月，空间挺大的，房子也是新小区《不是串串房》，绿化养护都非常好这个小区，价格也和周边的小区差不多，距离公司六百米左右，0通勤，我平时每天早上9.45起床洗漱，10.00出发去公司，基本上走路10分钟就到公司了，之前是骑电瓶车，最近太冷了都走路了！✅心得体会：自己实习这几个月也是深有感触，读书读太久了，社会经验太少，写这些也是为了能帮到大家大老远来北京实习的朋友们，租房，生活，这些真的信息差还是蛮多的，经常看的很多实习生被中介坑！本来工资就不多，还割大学生韭菜，真是太可恨了！大家有啥不清楚和想知道的都可以联系我，希望能帮到大家，也欢迎在快手实习，小米实习的和我约饭呀 #不给转正的实习，你还去吗#  #牛客创作赏金赛#  #你的实习什么时候入职#  #正在实习的你，几点下班#  #正在实习的你，几点下班#  #实习好累，可以辞职全力准备秋招吗#

11.21晚上7点 快手测开 一面1、自我介绍2、介绍一下实习公司自动化测试的类型、用了什么框架，怎么实现的？3、自动化测试的效果怎么样？测试覆盖率如何？你们是在测试的哪些阶段编写自动化测试脚本？（测试前还是边测编写）4、说一下mysql中慢sql治理的方法5、上面提到了索引优化，如果索引优化到最好了，查询速度还是很慢，为什么？6、上面提到了分区存储问题，mysql分区存储怎么做？比如用日期做区分，技术上需要做什么？7、说一下阿里的千万级的数据库，如何进行分区存储？回答：根据订单商品类型、订单类型（正常的/退货的）、日期来分区。8、给出一张学生信息表，包含学生姓名、性别、学生分数，用一条sql查询男生和女生中分别成绩最高的学生的姓名。（我回答的使用union的方法，问我还有没有其他的方法，我说不会了）9、了解linux吗？说一下常见的命令10、用的是什么linux系统（回答，乌班图），你了解乌班图的服务管理吗，比如网络配置。（我说不会，平常主要是应用）11、你了解docker吗？用docker做过哪些事情？（回答的是硕士跑深度学习，用到了docker的环境隔离）12、除了工作和学习之外，你使用docker镜像，做过什么有意思的事？（我说，用docker搭建游戏私服，算吗。。。面试官问是你搭建的吗，我说我同学搞过。。）13、你写过网页吗？说一下搭建一个网页的步骤14、你刚才提到Tomcat，你还知道其他的代理服务器吗？（我说nginx）15、你们公司用了nginx，你们公司的技术栈是怎么样的，用什么代码，跑在什么上面。（这个我不太会，说成了java跑在jekins上。。）16、说一下java的多态。17、你了解安全测试吗？（我说不太了解）18、根据登陆场景，说一下case设计思路（ #面经# 围绕功能测试、性能、兼容性、网络方面说的）19、选择一个测试方向，你更喜欢测试客户端还是web端，为什么？20、手撕题，字符串排列：给出一个字符串，找出字符串的所有排列，并以字母顺序返回所有不同的排列。21、逻辑题：现在有25匹马，每次比赛能用5匹马，请问需要多少局比赛才能找出跑得最快的3匹马。（答案是7匹，我一开始答错了，后面反问完问题想起来了，说了，面试官说，答案是对的，但是你应该刚才就说的）反问：1、快手测开的业务有哪些？2、强度如何？面试官很坦诚，说强度还是挺大的，周六加班的话双倍工资。3、晋升机制？然后say goodbye。- - - - -  - - - - -  - - - - - - - - - - - - - - - - - - 总结一下：一共面试了1个小时10min，中间面试官约的会议室到时间了，端着电脑出来的。。。强度很大，范围很大、面试官会深挖。求求快手捞我进去🙏🙏 #面经#  #快手#  #测开#  #应届生#  #秋招#

一面实习深挖指标怎么设计数仓怎么分层，各层的作用怎么决定分不分dwm中间层维度建模方法论平常怎么结合业务做数据探查cube计算优化doris底层原理Iceberg有哪些特性，相比hive有哪些优势Iceberg删除数据性能如何AQE引擎有哪些作用arm架构对比x86架构的优势spark向量化执行原理spark内存模型spark执行过程原理什么是宽窄依赖，怎么划分spark ui页面有哪些入口数据倾斜怎么排查数据倾斜有哪些解决办法开窗函数有哪些3种开窗排序有什么区别2道SQL1道算法 反问组内业务、人员结构二面实习深挖找一张自己开发的表，说说为什么这么设计上游数据链路怎么做的根据这张表出SQL题怎么开发UDF，UDF举例explode平时怎么用开动态分区union写入和不开动态分区分开写入有什么区别dws层怎么设计数据量大怎么处理数据倾斜怎么解决反问数据产品怎么做olap引擎怎么选型三面 没问几个问题 忘记记录了hr面 问基本情况录用评估一周挂#秋招##快手##面经#