一个小时左右计算与智能平台部做智能客服，美团app上在接入人工客服前的自动回复都是他们做的，主要用得到技术是RAG。有用开源模型continue learning，也有用美团内部的模型。团队比较关注外部最新进展，比如昨天的Llama3，会拿来跑榜单。给了一个场景，让我想想会怎么做：给你一个大模型，怎么去做情感分析？比如客服场景，判断用户的评论是抱怨还是投诉还是夸奖。特定领域微调大模型后通用能力下降怎么办？后面完全是根据简历上写的东西提问。PEFT知道哪些？用过哪些？为什么用这些？有什么区别？ChatGLM跟Llama2有什么区别？两者在词表大小上的区别？Llama2在Llama上有哪些改动？算法题：让我自己选一个能体现自己能力的题…有点懵。选了力扣221（感觉是准备直接挂了，都不想出题感觉每次找实习都面了美团，最后每次拿了offer都没去…

总共一个半小时是大模型业务主管面试做题做了40分钟😭😭，今天的题刚开始思路错了，要用优先队列但是一直没想到。聊团队情况聊了差不多20分钟。主管人蛮好的，说话很有逻辑，也非常愿意介绍自己团队的工作。目前也是经历了从0到1训练大模型的过程，不过后面又说基座模型用的是llama2。团队也蛮大的，带了有30多个人。有考虑到现阶段入职的实习生需要参加秋招的问题，说不会安排特别靠近业务的工作。会有一个深入的方向，需要自己去做一些调研，对实习生和正式员工的要求是一样的（不然给那么多）。算法题：类似于打怪获取积分的游戏，英雄在初始位置，有初始power，每次只能吃掉上下左右power小于自己的怪物获取怪物的power，计算可以获取到的最大power。

50分钟。哦对，我睡过头了，醒来刚好两点，还迟到了两分钟。据说只有一面，有同学面过，也有同学正在组里实习。主要做预训练，目前只有四个人，包括他和另一个实习生。问了有没有其他方法的工作，他说他们只做预训练。面试官提到数据处理和清洗是他们现在的一个痛点。。。自我介绍只问了大模型的经历，但是这个项目经历讨论了半个小时，中间差点吵起来了……不过对于我们没考虑到的地方，他也给了不少建议，面试官人还蛮好的。有没有做过预训练的数据处理？（他们要做提到了做大模型评测，也问了怎么用llm做选择题，我说的是构造prompt引导，他说有更好的方法。没有做算法题

45分钟潞晨科技是做colossal AI的那个公司面试官base 新加坡团队介绍：主要做的是训练框架，包括STF、RLHF、长文本、数据处理、MOE、模型评估。团队人很少，主要base新加坡和上海。不是核心的colossal ai，那个有同学在，做分布式训练面试官上来之后看了一遍简历，说跟他完全不是一个方向，所以主要是我在介绍我的工作。从实习开始介绍，中间有问题会打断。介绍完之后，面试官根据自己知道的结合简历一点一点提问。对diffusion model的理解，为什么要diffusion，怎么扩散的？为了下微调方法，知道哪些adapter微调，有什么区别？lora是怎么实现的，讲下细节。layer norm和batch norm的区别，为什么nlp用layer norm比较多？问平常用transformers库多不多，写torch多不多…其他的记不起来了。算法题是leetcode 221 最大正方形，要求必须python写

一个小时自我介绍每一段实习具体做的什么都问了问题都比较细，有个印象深刻的是：让llm做分类任务，怎么写prompt？要求写一下看看代码：给定字符串，计算可分割个回文串数组的个数团队做科研多一点，想要实习生focus on工作，比较担心参加秋招会耽误工作。

55分钟左右男面试官，说话很温柔很客气自我介绍好奇为啥有段实习是在某个学校项目提问项目中遇到的loss上的问题，怎么排查怎么解决，讲个思路没有八股代码：1. 字符串数组的最长公共前缀2. 给你一个整数数组 nums 和一个整数 target 。返回 nums 中能满足其最小元素与最大元素的 和 小于或等于 target 的 非空 子序列的数目。团队介绍大模型应用，有具体需求，主要客户是金融企业在线会议记录，离线音频视频，图像中的文本提取和分析，类似ocr。es、vdb存储与检索，rag垂类sft小公司40多人正式员工早10晚9

65分钟左右自我介绍项目提问代码考查1. 排序数组找target的个数2. 八数码问题的简化版：五数码问题

三道题分数占比100、200、300最后通过用例：100%、97%、17%ACM模式第一题时间花在处理字符串，主要考察map第二题考察union set，大致意思是计算图的每个连通子图中所有边的和第三题考查dfs、bfs建议提前练习一下多行字符串每个字符串中又包含多个字段的处理，处理输入确实蛮花时间的（对于平常只刷leetcode的xx来说，acm佬勿喷）

女面试官态度蛮好的，起码比上一场百度的好10倍面试官先介绍组里的工作，自研大模型做客服自我介绍项目问答八股问的比较少位置编码llama设计上跟原始transformer的区别算法题：买卖股票问题2给了一个网店智能客服的场景，比如客户问衣服尺寸之类的问题，训练数据如何设计。问对什么方向感兴趣？了解RAG吗？RAG起到了什么作用，大致流程是怎样的？

4月10日面的面试官态度不说很差，只能说好像对生活没有什么期望，不太看得起人的样子jd如图hr说这是个招博士的岗位，但是等等原因招不到人，面试过程中面试官也说是想要招博士。。。面试过程没有自我介绍简历中写了两个大模型的项目，逐个问，要求给他看文件、看代码、画图。一些具体的问题，丝毫不考虑是否涉密，直接要求给他全部讲清。没有代码不想提问end挂

50分钟左右没有自我介绍也是对着简历一条一条问的每一段实习和论文做的是什么都问了除此之外看到有后端项目也问了下，为什么要做这个，解决了什么问题。问论文中用了什么模型backbone除了现在写模型用python，平常还会写些什么，说了用Java写安卓，cpp刷题问ptuningv2的细节，平常学习中怎么判断自己会了这个东西，论文中的某个点的代码是怎么体现的，举例说明代码题：层序遍历

全程一个小时，搜狐大厦线下面试一男一女两个面试官一起面对着简历一条一条问，对实习工作比较感兴趣没有像网上其他面经说的对chatglm问的很细，问了一些chatglm跟llama的区别，氛围还算比较轻松没有其他八股团队目前人很少，据说不到三人？那不就是两面试官，还在招人当中。计划做一些to国央企的agent应用，卡不多

40分钟面试官是个哈工大的博士只问了项目和publication，让我把他当小白给他讲清楚。没有八股。算法题讲思路，对于一个二次/三次函数，给定区间，怎么找到极值点，精度在-1e-6，1e-6，考虑二分或三分，答道点即可。当场过了。但是面试官做的是大模型内容安全

30分钟，没有考代码感觉好像给挂了，因为有两个关于loss和top-k采样的问题没太答上来