快手暑期算法实习一面凉经

📍面试公司：美团👜面试岗位：大模型春招📖面试问题：问了 PPO 重要性采样系数怎么才能为1？调节批量，学习率，超参数啥的 不懂，策略收敛最优解不就为一了吗grpo 的 GAE 怎么算，和批量大小有没有关系？为啥没有要PPO的v函数？离轨策略和在线策略的关系？ 冷启动 + grpo 怎么做的？仿真寻优（实习项目）的 PPO 和 openai 的PPO有啥不同？ 项目的p(s'|s,a)=1,状态转移矩阵非常稀疏手撕链表 切断+翻转+链表合并Input: 1->2->3->4->5->6->7Output: 1->7->2->6-&gt...

Boss投的，第二天就约面试了。一面 3月14日 60min1、自我介绍2、学校做cv，为什么实习找nlp3、聊项目：  (1)预训练数据怎么构造的，sft数据格式。  (2)为什么预训练数据要加维基百科的语料库。       (3)预训练数据好像加在sft阶段也可以，为什么还要进行预训练。  (4)dpo在项目中主要想解决什么问题？grpo你想解决什么问题？5、算法题：最大子数组和隔天周六3月15晚上发感谢信了。感觉聊的还行，项目深度这块应该回答的让面试官不满意。#字节求职进展汇总#  #面经#  #算法工程师#  #大模型算法工程师#

活动地址： 牛客春招刷题训练营 - 编程打卡活动 简单题 求int型正整数在内存中存储时1的个数 一个 int 类型的变量有 32 位，想要取出第 i 位就是 n >> i & 1 package main import ( "fmt" ) func main() { var n int fmt.Scan(&n) ans := 0 for i := 0; i < 32; i++ { if n>>i&1 == 1 { ans++ } } fmt.Println(ans) } 中等题 ...

对算法跟工程两个岗位是怎么考虑的？RAG思路大模型都具有联网搜索能力。那这个联网搜索能力大概怎么实现的？那这里有个问题，比如说在搜索的时候，我们经常看到他会搜索很多网页，那这时候模型需要输入的那个 token 就会很多，这个时候要怎么解决？上一段实习你遇到了哪些挑战吗？SSE底层的 HTTP 如何实现流？SSE是怎么保证消息的有序跟完整的？为什么要用线程池来处理你的数据量很大吗？用过线程池吗？一般都用哪几个变量都是干什么用的就是线程池的主要参数？spring 是如何加载注解的？spring 的源代码你这边有没有看过的，能拿出来讲一下吗？hash map 的结构python 跟 java 这些代码它在它有啥区别吗？攒攒人品，说是过了，等hr面