数仓开发

问过的一些公司：字节 x 2，字节(2021.07)-(2021.08)-(2021.10)，阿里 x 2，爱奇艺，百度 x 2，百度(2021.08)，网易 x 3，网易(2021.09)x2，美团 x 4，美团(2021.09)x2，京东，京东(2021.09)，贝壳，keep，马蜂窝 x 2，转转，滴滴，小米，米哈游，有赞 x 2，猿辅导，58 x 2，作业帮社招，字节社招，腾讯社招 x 2，端点数据(2021.07)，百度(2021.09)，蔚来(2021.09)，恒生(2021.09)，快手(2021.09)，唯品会(2021.10) 参考答案： 首先，我要知道数据仓库分...

可回答：对数据仓库的理解 问过的一些公司：京东，美团，网易，阿里(2021.09)，网易有道(2021.10) 参考答案： 数据仓库的发展大致经历了这样的三个过程： 简单报表阶段：这个阶段，系统的主要目标是解决一些日常的工作中业务人员需要的报表，以及生成一些简单的能够帮助领导进行决策所 需要的汇总数据。大部分表现形式为数据库和前端报表工具。 数据集市阶段：这个阶段，主要是根据某个业务部门的需要，进行一定的数据的采集，整理，按照业务人员的需要，进行多维报表的展现，能够提供对特定业务指导的数据，并且能够提供特定的领导决策数据。 数据仓库阶段：这个阶段，主要是...

一面：80min1、自我介绍2、介绍部门情况3、介绍下部门的数仓建设情况4、简述实习里的三个实习做的项目，聊背后的逻辑 聊了好久好久5、聊聊在字节认为部门最厉害的技术是什么6、聊聊自己的爱好7、觉得自己有什么有优点8、团队协作和个人工作区别是什么，各自的优点和缺点9、一道sql题，有两个数组，展开数据，角标相对应的取出数据10、sql的job和stage划分，窗口函数是否会shuffle11、聊聊快速排序的实现和要注意的地方12、谈谈对hudi的理解13、对比spark和hudi14、反问二面：1、自我介绍2、聊实习做的项目，细聊(很细)3、mapreduce过程原理4、hive中sql被转...

家人们，二本本科，硕士双非能搞大数据开发吗？想去中厂会不会卡第一学历啊 #大数据#  #大数据工程师#  #数仓开发#  #Java#  #sql#

有大佬知道本科二本，硕士双非能搞大数据吗？会不会歧视第一学历

想问一下各位 ，打算年后实习的话，flink看重吗?目前已经学完flink了，打算去做实时数仓5.0，现在群里有个老哥说实习不看重实时，我spark又学的不是很好，又想去看看spark，有没有老哥给点建议呀😌😌。 #flink# #实习# #大数据# #hadoop# #数仓开发#

如果编辑有什么问题或有什么需要交流的可以留言。 公司有张用户表,全表千万量级，增量10w以内，且用户信息会进行更新用户行为日志表关联用户表补全用户属性，由于用户信息会进行更新，因此关联时要关联当日的用户表目前方案是每天全量抽取，分区存储全量快照 即每天一个全量快照改善方案：增量同步+(全量快照or拉链表) - mysql数据库中用户表 其中 status_x 字段可能会缓慢变化 update_time 数据插入或者更新 这个字段都会修改 即数据修改的时间 有索引，能够进行抽取 create table user_mysql( uid primary key , ...

前言：如果你面试的是金融信贷行业的公司，那么如果你懂一些这方面的业务知识，面试官一定会眼前一亮！！！本篇主要介绍金融信贷的线上模式——网贷，主要从网贷的业务模式和业务指标来介绍一些基本业务知识网贷的业务模式网贷最重要的三部分：资金（钱从哪儿来）风控（风险控制）获取用户（用户从哪里来）业务指标用户类指标申请用户数：完成贷款申请行为的用户放款用户数：通过审核并成功放款的用户复借用户数：借款次数超过一次的用户复借率：通常会结合时间维度，比如30天的复借率=首次放款用户中30天内复借的用户数/首次放款用户数申请情况类指标审批通过率：放款用户数/申请用户数（用于衡量审批策略的稳定性）逾期类指标用于量化公...

  在找工作时被百度云盘的面试官问到了这个问题，这种开放性问题不好回答，答的少了或者浅了显得水平不够，也不能太多，还得体现逻辑性和深度   面试官往往能从这种题目了解求职者的真实水平，在回答过程中最好是适时的寻求面试官反馈，看其对哪部分感兴趣，防止讲了一大堆面试官不感兴趣的。   自己当时回答比较关注组件理解，对背景介绍的不足，下来自己也做了更多了解，整理如下 背景介绍 oltp产生互联网将线下工作搬到线上，用数据库替代纸存储，比如销量统计数据，用户个人信息等此时出现了mysql这种oltp数据库，遵循三范式，通过事务机制做业务处理 olap萌芽随着发展，数据除了存储和查询，还需要进行相关...

这里是数据库的最新前沿地带 这里有严谨多思的技术达人 这里有开放活跃的团队leader 可以带你领略数据库的前世今生 可以带你提升coding能力 可以私信详聊，欢迎骚扰~ 内推亮点 全程流程跟踪，笔试面试辅导 招聘对象 2023届国内本硕博 岗位base 北京、西安 公司福利 五险一金、商业保险、免费宵夜、班车、节日活动、节日礼品、下午茶

数据开发，数仓，数据湖的不想卷的大牛们看过来 直接联系V： sweety-yeah

今天和同事排队做核酸时，讨论了个问题： 直播间发起弹幕抽奖，会将用户每一次参与分配一个id，最后需要抽取3个中奖用户; 如果用程序实现比较简单，如果用sql如何实现呢 下面将实现细节分享下，只做了关键点的说明，其他的复现下应该可以理解 -- 场景转化后的sql题如下 -- 1. 10张彩票 被超过3个人买 一个人可以买多张 想找到3张彩票号码正好让3人中奖 -- 2. 在1的基础上 如果1个人买了多张彩票 应该让其中奖概率大一点 满足吗 -- 在hive中建表并插入数据 create table temp_hyk_20220711( tid bigint comment '彩票号码...

0 面试现状 最近有不少参加面试的同学及网友反应，面试挂在了SQL环节，面试SQL挂了确实有点遗憾，毕竟平时工作都在用的东西，深入和这几位同学细聊后，发现主要有以下几种现象：（1）面试太紧张，当面试官给完题目后，脑子里一片空白，读不懂题意，不知道在讲什么（2）题目能读懂，题目给的也很简洁，但就是没有思路，不知道该如何入手，看着时间一点点过去，心理更紧张更绝望，最终啥也写不出来（3）好不容易在面试官提醒下写出来，但是面试官不满意，问还有没有其他解法吗？逻辑不够清晰，不够优雅，还需要继续优化。（4）写是写出来了，但是逻辑中有漏洞，面试官指出来后，头脑又一片空白，又不知道该怎么继续了。以上就...