华子nlp线上10.23面经

🔞 美甲🧑‍🔧 语音算法实习😶‍🌫️ 项目提问+八股1. 自我介绍2. 介绍一下简历上的大模型项目；讲一讲如何做数据清理的；角色知识增强是怎么做的；推理阶段有无优化；有没有最新的改进。3. 介绍一下现在的研究方向以及论文。（主要听听思路，由于我说借鉴了RLHF的思路，借机问了一下RLHF的技术框架）4. LoRA的原理；RLHF的细节（要求更细致的介绍，这里问了一个我不是很理解的问题，除了reward model和llm，还用到了什么模型？之后查了一下确实就这两个啊）5. 手撕MHA（pytorch）；GQA的原理。6. 输入的padding部分是如何参与计算的；为什么用left padding而不是right padding。7. 让大模型确保输出json格式有什么办法？8. 介绍一下softmax的数值溢出，以及有什么办法解决。反问：主要业务是什么；实习时间的要求。感觉比之前面试状态要好很多，回答还是比较流畅。同时，这次发现了一些之前没复习到的地方，回去一定补。

🔞 理想🧑‍🔧 大模型算法岗实习😶‍🌫️ 项目提问1. 介绍自己的论文（针对论文提了巨多问题，创新点、如何想到这个思路的、借鉴了什么、实验效果怎么样）2. 介绍自己的大模型项目3. 数据集的语料量级；如何判断数据集的质量；有没有验证数据质量的过程；数据不对等会不会导致推理效果不佳；如何进行数据清洗的。4. 模型选型时是如何判断的？还有其他基础模型比较了解吗？介绍一下deepseek-v3和R1；介绍一下强化学习；强化学习中比较常用的算法。5. 然后就是针对业务相关的提问：对话系统（开始摆烂，听介绍）6. 了解Agent吗？7. 项目中在微调中调用了诸如web工具等方法补充语料吗？8. 未来职业规划；现在常用的图像特征提取方法；图像理解方面有了解过吗？（clip、blip）介绍他们的团队，更专注于技术，通用模型能力优化。反问：常规面试官懂得好多，大部分问的问题比较宏观，可惜我的知识面没那么广🫠

目前简历也是石沉大海啊！#投了多少份简历才上岸##你的简历改到第几版了##你已经投递多少份简历了#

组内直招，我给自己捞一下实习生联系方式****************************职位描述1、负责机器学习训练和推理系统的研发与性能优化，包括但不限于：超大模型计算性能优化、千卡训练集群调优、分布式推理系统、大规模推理流量调度等；2、负责解决大规模AI系统中高并发、高可靠性、高可扩展性等技术难关，支撑公司内外千万客户流量需求；3、负责大模型训练和推理前瞻性技术架构的调研和引入，技术方案不限于分布式训推系统、子图匹配、编译优化、模型量化等；4、负责异构硬件的引入与训练推理框架的集成，包括但不限于GPU、NPU、TPU等；5、面向全球多地域超大规模GPU算力集群，通过弹性调度、GPU 超卖、任务编排等方式不断提升算力利用率；6、与算法部门深度合作，分析性能瓶颈，通过软硬结合提升模型训推效率，支持AI工具链和技术生态建设，推动公司AI关键业务发展。职位要求1、2026届本科及以上学历在读，计算机、软件工程等相关专业优先；2、熟悉常见的算法、设计模式和数据结构，具备扎实的操作系统、计算机体系结构等知识；3、独立分析问题和解决问题，自我驱动并对过程负责；4、以下条件为加分项：1）能够理解GPU硬件架构，熟悉GPU软件栈（CUDA，cuDNN)，具备GPU性能分析的经验；2）参与机器学习系统开源社区项目经验，熟悉机器学习系统各项流程中的工作原理；3）有至少一种大模型训练/推理框架使用经验，包括但不限于：vLLM、TensorRT-LLM、SGLang、Megatron-LM等。