华为nlp算法工程师线上面试

1. 核心影响因素- 任务类型：- 简单任务（如文本分类）：可能需数百到数千条标注数据。- 复杂任务（如对话生成、阅读理解）：通常需数万条甚至更多数据，尤其需多样性和高质量样本。- 模型规模：- 大参数量模型（如GPT-3、PaLM）可能需更多数据防止过拟合，但通过策略（如参数冻结）可降低需求。- 较小模型（如BERT-base）可能在较少数据下表现良好。核心是数据质量：- 高质量、标注精准、多样化的数据可显著减少需求量。- 低质量数据可能导致模型性能瓶颈，需额外清洗或增补。领域差异：- 若预训练数据与目标领域差异大（如通用→医疗），需更多领域数据调整模型分布。- 训练策略：- 正则化技术（早停、Dropout、数据增强）可缓解小数据过拟合。- 迁移学习技巧（如Adapter、LoRA）可减少可训练参数量，降低数据需求。经验可参考范围- 常规任务（分类/标注）：- 小模型（如BERT）：1k-10k样本。- 大模型（如GPT-3.5）：可能需10k-50k样本（结合领域适配策略）。- 生成任务（对话/摘要）：- 通常需5k-100k+样本，依赖生成质量要求。- 领域适配：- 若领域差异大，需额外增加20%-50%数据量。产品经理的权衡维度- 业务目标：- 若需快速验证MVP，可接受小数据+低精度（如数百样本），后续迭代优化。- 若追求高精度（如医疗、金融场景），需预留足够标注预算。- 资源限制：- 标注成本：若数据获取昂贵，需优先优化数据质量或采用主动学习。- 算力与时间：大数据量需更高训练成本，需权衡ROI。- 替代方案：- Prompt Engineering：用少量样本设计提示词，可能无需微调。- Few-shot Learning：结合模型原生能力减少数据依赖。 #牛客激励计划#  #聊聊我眼中的AI#   #数据人的面试交流地#  #AI了，我在打一种很新的工#  #面试被问期望薪资时该如何回答#  #面试题刺客退退退#  #大家都开始春招面试了吗#  #24届软开秋招面试经验大赏# #牛客AI配图神器#

已发意向一面手撕：三数之和过实习预训练数据构造数据配比如果现在重做一遍项目，怎么跟DeepSeek的技术结合能不能直接通过RL训练chat模型大模型八股sft、dpo的区别，什么时候用哪个MHA、GQA、MLA的异同从Bert开始讲，位置编码的演进和注意力机制的关系py八股除了py外，还有用什么语言进程、线程区别，什么时候用哪个平常用的什么包，numpy、pandas有用吗生成器、迭代器日常有没有其他在投，城市偏好反问评价？整体不错业务？有训练做知识注入、也有做问答系统流程？三面，两面技术一面hr大概40min二面无手撕聊科研介绍实习灾难性遗忘怎么缓解的sft后什么情况下用dpo对大模型的发展...

📍面试公司：每日互动👜面试岗位：NLP/大模型算法📖面试问题：实习做的语音模型微调，问语音大模型和其他大模型区别。问了实习，介绍研究方向。🙌面试体验：面试官全程听我讲，没有反问，大概方向不一致。#软件开发笔面经#

当时一二面流程很紧凑，没有分开记录，每面大约50min。总的来说很友好，面试体验也不错，不会的不太逼问，主要根据你的简历和jd进行提问。虽然流程很快但是offer反馈比较慢，应该是同时面多个在排序。后面时间不合适就没去。惯例：互相介绍自我介绍2min，之后面试官介绍自己的团队在做什么深挖项目介绍你做的某课题的pipeline、为什么要这样设计改进（就是问创新点）在xx项目中，如何解决遮挡导致的视角歧义问题？对比过不同3D表征方式对多模态融合的影响吗？若加入雷达点云作为第三模态，会如何调整对齐策略？loss函数介绍+写出基本算法八股看你做过bert，介绍一下bert,transformertra...