百度提前批一面面经总结

岗 nlp/机器学习/大模型

老哥人很好,部门深度学习相关

1.自我介绍

2.讲下论文(盘的很细,从开始到结尾每个细节都问到了)

3.bert roberta 区别

4.transformer里注意力机制演进(MHA,GQA,MQA,MLA)

5,MLA怎么与RoPE结合的

论文还是得看啊xdm

手撕:

self attention

进一步

MHA怎么实现,改一下

实现一个linear(顿了一下,最后实现了个y = wx + b,最后也是感觉少写了一维)

求别凉555

---------------------------------

8.12更新,被分享力

全部评论
老哥有顶会吗
点赞 回复 分享
发布于 08-07 22:30 上海
面试是哪个部门呢佬
点赞 回复 分享
发布于 08-20 22:29 香港
你好,请问老哥你简历中没有写数据结构是么?我看你写的手撕代码是自注意力,没有让你撕算法,我看其他有人面的这个岗位,手撕的有链表还有二叉树啥的。因为我下周也要面这个,就是想问一下hhh,感谢感谢
点赞 回复 分享
发布于 08-28 15:49 河北

相关推荐

4 24 评论
分享
牛客网
牛客企业服务