个人NLP实习面经汇总

本人目前研二，在后厂村某公司NLP日常实习，看到马上要到3月份了，很多同学要开始暑期实习面试或日常实习了。虽然我是不打算参加暑期实习了，打算在这里摸鱼到秋招提前批hh。但我想到我当初研二刚开学，21年10月份日常实习面试的经历，可能会对某些即将面试的同学有所帮助，所以决定把自己亲身经历的面试内容做个分享，以下所有内容均是面试真实问到的内容。

还有我当初日常实习面试的时候算法题都是最后才问的，不知道暑期是怎样的，但我经历的情况都是最后才问。

京东广告NLP一面：

项目以及通过项目延伸的相关知识，除了项目里面用到的技术，与此相关的也要有些了解，面试官蛮喜欢问的，比如我就被问到beam-search生成的句子基本都一样，是否有方法扩展生成句子的多样性。

layer normalization和 batch normalization的区别，padding对这两者有影响吗，对哪一维有影响。

给定transformer输入维度，头数，计算总的参数量。

是否有大数据相关的经验。

lstm隐藏层的维度，哪3维。

resnet的维度，有几维（这个忘了是不是项目里有用到才问的，应该正常nlp不会问resnet吧）。

pytorch.Dataloader 报错出现数据维度不一样怎么解决。

算法题（说思路）：无序数组，找topK，要求比快排快。

京东广告NLP二面：

项目及相关。

Bert里面mask的用处。（15%）

文本任务，文本是直接送入模型吗，有做什么处理吗。

文本生成的多样性怎么做。

怎么让生成的文本流程。

红色和绿色是两种颜色，怎么保证不会把红色的东西输出成带有绿色的文本（质量保证）。

对于两个词怎么算他们的相似度，用基于word embedding的方式。

算法题（说思路）：

1.最大子序列和。

2.给定一个长的标题，有一个禁用词词库，过滤标题里面的禁用词。

京东广告二面的问题基本是基于项目和面试官他们组做的事情来提问的，通用基础知识问的不多。

货拉拉风控一面：

项目及相关。

了解过Bert吗，说一下Bert。

说一下fasttext。

说一下word2vec里面的优化方式（就是hierarchical softmax和negative sampling这两个东西）。

算法题（说思路）：leetcode49题 字母异位词分组

京东科技算法一面：

Bert里面为什么用layer normalization，而不用batch normalization，分别讲一下这两个啥意思。

Bert里面为什么Q，K，V要用三个不同的矩阵，用一个不是也行吗。

Bert和transformer讲一下。

AUC指标讲一下。

Precision和Recall讲一下。

GBDT和Xgboost的区别。（问这些可能是我简历里面写了掌握这些知识）

Xgboost叶子结点的值怎么计算的。

LightGBM对于Xgboost有什么改进。

防止过拟合的方式。

Adam讲一下。

lstm为什么会梯度消失，怎么解决。

lstm和bert的区别。

深拷贝和浅拷贝。

python装饰器的原理。

python多线程和多进程。

了解哪些排序算法。

说一下快排和归并的原理。

word2vec原理讲一下，hierarchical softmax和negative sampling讲一下。

Faiss里的hnsw怎么提高效率，讲一下。（项目相关的）

了解SQL和Hive吗。

分类任务不用交叉熵，用均方误差可以吗。

算法题（说思路）：有一个矩阵，从左上走到右下共几种走法。（DFS）

京东科技虽然JD是算法实习生，但是看招聘要求的工作内容主要是python开发，有一大堆我没见过的python库。

京东科技算法二面：

项目及相关。

说一下transformer。

为什么要加layer norm层。

为什么用Adam。

python的语法和框架。

算法题（敲代码）：手写个链表反转。

陌陌推荐算法一面：

他们工作要求用的是tf2.0以上。

项目及相关。

Word2vec，fasstext说一下。

有亿个新闻标题，怎么进行词向量表征。

怎么进行句子的表征（词到句子）。

Attention的方式。

beam search（项目相关）。

bert了解吗，看过源码吗。

训练时碰到Nan这样的情况吗。

交叉熵公式，softmax公式。

检索式的过程（召回，精排）（项目相关）。

百度NLP一面：

项目及相关。

论文。

说一下transformer。

layer normalization 和 batch normalization。

知道git，shell脚本吗。

项目里面具体怎么实现PGN的（项目相关）。

知道什么生成模型吗。

算法题（敲代码）：最长公共子序列，要求找出那个序列，要求代码能运行。

腾讯PCG NLP一面：

腾讯当初面试流程很慢，说共四面，每面中间隔一到两周，约我二面的时候，我都上班一周了，也可能那时候10月份速度慢吧。

了解哪些预训练模型。

了解哪些生成任务的指标。

说一下free running和teacher forcing的区别。

有些哪些过拟合的方法。

项目及相关。

论文。

GPT的训练方式。

算法题（说思路）：二叉搜索树，找第K小的值。

京东健康NLP一面：

项目及相关。

greedy search 和 beam search的区别。（项目相关）

RNN 和 LSTM的区别。

RNN 为什么会出现梯度消失的现象。

word2vec有几种方式。

对于意思相近但表达方式不同的词，怎么知道它们是同一个意思。

对于句子结构相似，但里面关键词不一样的情况，怎么注意到关键词。

我当初面试过的公司就只有几个，因为我面试时间比较短，9.27晚开始投简历，10.13收到心仪offer，后面就都没面试了。后面还有快手，美团约面试，腾讯pcg2面，但是因为已经上班了，所以都拒绝了。然后我只是个普通双非院校的同学，要是有人对于我们这种背景如何找实习感兴趣的话，欢迎评论，人多的话我可以写一下。感谢。