快手数据研发面经

#牛客创作赏金赛# 在当今的数据管理领域，诸多问题亟待解决：1. 数据不流通：数据地方保护主义盛行：各地区或部门出于自身利益考量，对数据进行封锁与割据，形成数据孤岛，严重阻碍数据在更大范围内的共享与流通，如同设置了重重贸易壁垒，使数据难以自由流动，无法发挥其整合后的巨大价值。2. 口径不统一：指标同名不同义、同义不同名现象频发：相同名称的指标在不同业务场景或部门中含义存在差异，反之，同一概念又可能被赋予不同的指标名称，这使得数据的理解与整合变得异常艰难，犹如不同语言体系下的混乱表达，极易造成沟通障碍与分析偏差。3. 工具不统一：各种 BI 工具百花齐放却缺乏整合：市场上 BI 工具种类繁多，每个工具都有其独特的功能与特点，但由于缺乏统一规划与整合，企业在使用过程中往往面临工具兼容性、数据迁移等诸多问题，如同各种风格迥异的乐器杂乱演奏，难以形成和谐的乐章。4. 边界不清晰：业务系统报表与 BI 报表职责界定模糊：业务系统报表和 BI 报表在功能、应用范围等方面没有明确区分，导致在数据呈现与分析过程中出现重复劳动、数据不一致等情况，仿佛两块相邻土地的权属不明，引发诸多争议与混乱。5. 权限难管控：复杂权限体系令人困扰：随着数据的增多与业务的复杂，权限管理变得极为复杂，不同层级、部门、岗位对数据的访问权限难以精准设定与有效控制，好似一座迷宫，管理者在其中迷失方向，容易出现权限漏洞或过度授权等风险。6. 响应不及时：贯穿所有部门的数据需求难以快速满足：各部门对数据的需求日益增长且多样化，但由于数据处理流程繁琐、资源有限等原因，数据提供方往往无法及时响应，导致业务决策因缺乏数据支持而延迟或失误，就像快递在漫长的运输途中耽搁，错过最佳使用时机。7. 指标不体系：指标关系树尚未构建完善：指标之间缺乏系统性的梳理与构建，未能形成完整的逻辑关系树，使得数据分析师难以从宏观层面把握数据全貌，在分析过程中犹如盲人摸象，只能获取片面信息，无法深入挖掘数据背后的内在联系。8. 指标难管理：基于指标平台的全生命周期管理亟待加强：指标从定义、采集、存储到应用、更新等整个生命周期缺乏统一有效的管理平台与规范流程，导致指标的准确性、一致性与时效性难以保障，如同没有管家的豪宅，物品杂乱无章，难以有效利用。9. 指标不准确：指标质量审计环节薄弱：对于指标数据的质量缺乏严格的审核与监督机制，无法及时发现与纠正数据偏差、错误或异常值，使得基于不准确指标得出的分析结果与决策建议可能产生误导，仿佛在错误的地图上导航，必然偏离正确方向。10. 指标不会用：缺少指标故事线辅助理解与应用：虽然有众多指标数据，但缺乏将指标串联起来形成有逻辑、有情节的故事线，导致业务人员难以理解指标含义与应用场景，无法将数据有效转化为实际行动方案，如同拥有众多珍珠却缺少串线，难以制成精美的项链。

小红书的面试官人很好，因为我是第一次面试，面试流程都不太清楚，他一直在带我，可惜就是我太菜了，做算法时，虽然思路正确，但边界一直没考虑清楚，一直都在调试。唉，浪费机会了。 我是11/7晚上投的，11/8下午填面试前回答，晚上约面，11/9早上，一面。 1。自我介绍 2.。平时常用的技术有哪些 3 。后端与前端开发时间占比 4。从输入url到页面展示之间的流程 5。Redis在哪些地方使用，具体是怎么使用的 6. 问了平常使用的设计模式有哪些 7. 使用redis是如何做的封装，全局，限流等等的封装 8。自己设计一个操控数据库的方法，如...

跨域请求是指浏览器不能直接向不同域名的服务器发起请求。解决跨域问题的方法有以下几种：https://www.nowcoder.com/issue/tutorial?zhuanlanId=Mg58Em&uuid=43521d43a8e341f888324dd690363024JSONP（JSON with Padding）：利用script标签的src属性可以加载任意域名下的js文件的特性，通过在URL中传递callback函数名，让服务端返回指定格式的数据，前端通过调用指定的callback函数来获取数据。CORS（Cross-Origin Resource Sharing）：跨域资源共享，是W3C标准，需要服务端在响应头中设置Access-Control-Allow-Origin字段来允许前端跨域访问。代理：通过后台中转请求，将服务端的数据请求发送到同一域名下的后台进行处理并返回结果给前端。WebSocket：在建立WebSocket连接时不会执行同源检测，因此可以使用WebSocket进行跨域通信。发布JSON数据文件，JSONP或者JavaScript加载到页面里。但这种方式并不友好，容易暴露数据。设置Access-Control-Allow-Origin允许跨域，此方法支持IE8+、Chrome、Firefox等现代浏览器,或者使用XMLHttpRequest Level 2对象里面提供的withCredentials属性的值为true。在同一根域名下，但是不同二级域名之间进行跨越AJAX请求, 可以通过设置document.domain来解决。

秋招结束咯～写写之前的面经攒人品～自我介绍为什么选数据开发，对数据开发的理解。HDFS的读写机制什么是数仓（不是只有结构化如果副本机制只有2，会有什么优点和危害？spark的计算都是在内存里吗项目中怎么进行数据清洗数据库的主键、唯一、外键索引（主键索引是唯一索引的一种，一个表中可以有多个唯一索引但只能有一个主键，主键列不能有空值，而唯一索引允许空值，主键可以作为其他表的外键）如果有大量客户注册，应该怎么优化数据库？Python的进程，线程和协程（进程是资源分配和调度的基本单位，有自己的独立空间，开销大；线程是CPU调度的基本单位，进程的实体；协程是用户态的轻量级线程，单线程内执行多任务；切换效率：协程＞线程＞进程）Python的复制，浅拷贝，深拷贝（浅拷贝只拷贝最外层，深拷贝拷贝所有完全独立。当原始对象的最外层改变时，两者都不变；当原始对象的子对象改变时，浅拷贝随之变化。修改浅拷贝的子对象会影响原始对象，但深拷贝不会。）学习大数据的时候遇到的一些难点手撕：链表反转，积分最高sql反问：需要做的主要工作，工作氛围，工作地点