大模型开发工程师（OD岗位）

部门有以下几个团队及其对应方向，具体细节和要求欢迎沟通， （外企德科OD) 1、MindSpeed开发：MindSpeed是专为华为昇腾设备设计的大模型加速解决方案。大模型训练的复杂度与资源密集型特征，对计算平台提出了极高的要求，尤其是显存资源的限制往往成为制约训练效率的瓶颈。为突破这一限制，业界先后开发了Megatron-LM、DeepSpeed等第三方加速库，通过模型切分、数据分配及集合通信等策略，实现了多计算卡协同训练，从而提高了训练效率。MindSpeed在此基础上更进一步，其核心优势体现在并行算法优化、显存资源优化、通信性能优化、计算性能优化等 2、MindSpeed LLM开发：MindSpeed-LLM是基于昇腾生态的大语言模型分布式训练框架，旨在为华为 昇腾芯片 生态合作伙伴提供端到端的大语言模型训练方案，包含分布式预训练、分布式指令微调、分布式偏好对齐以及对应的开发工具链，如：数据预处理、权重转换、在线推理、基线评估。 3、MindSpeed MM开发：MindSpeed-MM是面向大规模分布式训练的昇腾多模态大模型套件，同时支持多模态生成及多模态理解，旨在为华为 昇腾芯片 提供端到端的多模态训练解决方案, 包含预置业界主流模型，数据工程，分布式训练及加速，预训练、微调、在线推理任务等特性。 4、pytorch框架适配：PyTorch框架组主要是基于昇腾芯片适配PyTorch框架，打造昇腾极简易用、极致性能的PyTorch框架，构造昇腾多样化生态。框架组现阶段主要的工作内容: A 适配PyTorch的主流版本，实现PyTorch各类API在昇腾AI芯片的支持，并围绕主流用户使用场景，对框架进行深度优化，提升框架易用性和执行效率，释放昇腾AI芯片极致性能；B 拥抱社区，跟踪社区发展动向，构筑昇腾框架对接生态竞争力，同时通过向开源PyTorch社区提交代码，实现社区PyTorch对昇腾芯片的原生支持，提升昇腾的行业认可度，完善昇腾PyTorch生态，打造全场景AI生态标杆。

1.熟练掌握PyTorch/Tensorflow/Caffe等深度学习框架中的至少一种，具备扎实的基础知识； 2.熟悉Megatron-LM，DeepSpeed等第三方分布式框架者优先考虑； 3.熟练运用Transformer、Attention等NLP模型结构，并具备相关领域的深入了解和实践经验； 4.了解并行计算、网络通信、系统优化和集群硬件架构等相关知识； 5.具备出色的编程能力，精通Python，并熟悉C++、数据结构和算法设计，熟练使用Git、Linux/Unix系统和Shell编程。

我们提供： 1.拥有领先大模型研发和实践经验的团队，为您提供广泛的学习和成长机会； 2.激励薪资和完善的福利待遇。 3.广阔的职业发展空间，有机会参与头部科技企业合作项目。 如果您对人工智能技术充满热情，热衷于追求卓越，渴望在AI领域深耕，我们真诚邀请您加入我们的团队，共同探索人工智能的边界，为社会创造更大的价值。