某厂外包-大数据开发

面试过程自我介绍+深挖项目需要什么都会一点 也就是一点 比如 虚拟化、网络、安全、存储和灾备 以及AI产品的了解网络 VLAN和VXLAN ipsec vpn和ssl vpn 区别 ，存储 对象和文件存储区别，虚拟存储可靠性保障， 安全cc攻击原理 sql注入，数据库，k8s 最小单元另外需要注意的就是 说的东西 一定要可查 比如你会写博客，那你就要有一篇，另外还会问一些会什么工具因为外包要求不是很高，需要你会的也不会很难 你至少了解就行#牛客创作赏金赛#

#软件开发笔面经#### 简历竞赛，为什么没选择计算机专业什么时候开始接触java的## 项目后端开发，深度学习都问了项目具体细节。开发的有多少人，你的具体任务是什么？项目中碰到困的问题如何解决。如何设计的数据库## 八股：反射原理和具体应用  回答了动态代理类加载过程 什么情况下会频繁发生full GC 答了分代机制，old区满了，或者-xms设置小了Threadlocal 具体底层实现， 都有哪些应用场景？这个应用场景没想到，复述了作用。如何实现并发编程？说的比较多，synchronized，volatile，java并发工具包里面的一些具体的锁和工具类等等。如何实现分布式锁？答了redis和redission，问还有其他方法不？不知道了。如何排查fullGC  答了先定位pid，然后用一些jvm指令，分析日志复制网页工具解析 具体都有哪些指令？ 答了jstack jinfo printGCDetail，具体用的时候一般会查。Java代码量大概有多少？ ## 杂谈：你在学校成绩怎么样？做过最有成就感的事？做过最有挫败感的事？工作地点杭州和北京知道吗？#软件开发笔面经#

没想到，真是没想到还给我发了二面的机会。1.你最熟悉的大数据框架--Spark2.宽窄依赖，算子中哪个是宽依赖算子？哪个是窄依赖算子？简单举几个例子。3.colase算子简单介绍下--忘了4.平时用PySpark写代码，主要用RDD还是SQL完成？--SQL5.Shuffle原理和shuffle过程6.shuffle的几种方式：?和storted方式简单介绍下7.使用的Spark版本号--3.1.28.所有项目中最有成就感的是哪个？项目中 -> rfm的取值范围：    r:0~30,30~60,60~90    f:1,10,100    m:最开始是0.01，后面改为18,38,100ES:作为数据导出的部分9.最近工作的数据量有多大？--> 几百万。    面试官回答：我们量级更大，几十、上百亿条数据10.报表软件熟悉哪些？FineReport,tableau11.一道SQL题，求连续登录天数等于十的用户数。

双非二本大数据仔：数开 or 后端？别再让我纠结啦粉丝内容：双非二本大数据专业大三学生。我现在会 Hadoop、spark、hive、kafaka、flume 这些玩意儿呢，一直跟着 sgg 路线走。可我瞅着吧，感觉双非上岸数据开发那难度就像攀珠峰，太高啦！我就开始犹豫，是接着在这条路上死磕呢，还是转头去学后端？或者干脆贪心点，两个一起学？辉哥锐评：这网上信息看多了，那真是越看越迷糊，就跟进了迷宫似的，净让我焦虑。咱得整点实在的，多学点东西才是王道啊！多去跟大佬取取经，学学他们的经验。还有啊，得把简历好好优化优化，那可是咱的“敲门砖”呢！另外，数据仓库相关技术也得多搞搞，后面面试和工作都能用上 #实习#  #大数据#  #校招#  #秋招#  #数开#