cuda 面试题整理（长期更新）

一面面经分享，差不多面了五十多分钟1. 项目深挖，问得非常详细2. 如何通过Profiling定位瓶颈？（带宽利用率、流水线空泡、指令耗时）3. Matmul分块策略4. 手撕：n! 中尾随 0 的个数5. 手撕：买卖股票的最大利润

一、面试基本情况岗位方向：嵌入式 Linux 系统开发（驱动、内核、系统调试）面试内容概述：影石嵌入式一面的面试主要考察了基础知识、Linux 驱动开发、内核调试能力以及项目经验。面试官技术功底较深，问题涉及广泛，既有基础操作系统原理，也有较多的实际项目经验。二、面试内容概述1. 项目与技术背景面试伊始，面试官要求进行自我介绍，并详细讲解自己参与的嵌入式项目。在这部分，我分享了自己在嵌入式 Linux 开发中的经验，尤其是在驱动开发、硬件接口以及系统优化方面的实践经验。介绍了以下几点：如何使用设备树配置外设；编写字符设备驱动以及设备的注册与注销流程；在用户空间与驱动交互的方式（ioctl）；多...

发一下问题给大家参考，攒攒人品！有面试过同岗的朋友欢迎评论区交流1. 项目交流2.  Shared Memory Bank Conflict及解决办法3. 同一Warp内不同线程的访问约束4. 广播机制（Broadcast）6. 四种Cast转换的区别与应用场景（reinterpret_cast等）7. 父类转子类的安全性问题与内存布局约束手撕：01背包问题 vs 完全背包问题

算法题： 1- 快排，寻找两个正序数组的中位数，下一个排列，二叉树中的最大路径和，Path Sum III2- 给定若干点的数轴坐标数组和固定数量的等长线段，问该线段最少要多长才能覆盖所有点3- 前k个高频字符串，词频一样时按字典序升序排列4- 给定初始字符串s，每次将字符串向右旋转一次，并将旋转后的字符串拼接到原字符串的末尾，每次操作都会使字符串的长度变为原来的两倍，求计算出无限扩展后的字符串中第 N个位置的字符5- 两根手指放在26个小写字母组成的键盘上，最少移动多少距离才能敲出给定的字符串sorch手撕题：MHA * 3，Flash Attention v1，flow matching model采样的伪代码ai infra或算法八股：1- flow matching模型预测的是什么，怎么理解conditional velocity (conditioned on data sample x0)2- 如何计算QwenImage的time shift3- 介绍Flash Attention的原理和实现思路4- GPU matrix transpose使用shared memory的好处5- CPU按列遍历一个行优先的矩阵相比按行遍历为什么性能会变差，具体是因为哪个性能指标变差导致的6- weight-only量化有哪些，实现weight-only量化cuda kernel时如何优化访存，是否了解Marlin kernel7- Megatron SP的实现方式8- DeepSpeed ZeRO stage1和stage 2的通信量区别，论文和代码实现有没有gap9- 多GPU通信时NVSHMEM和NVLink的区别