LongCat - 协同设计人工智能架构师
岗位摘要
探索大模型架构优化，涉及训练和推理的各类算法与工程策略的探索及落地，并实现算法与工程协同设计；参与美团基座大模型项目，包括但不限于大模型高效架构设计探索（高效注意力、混合专家架构等）、预训练与后训练调优策略、投机推理策略
岗位职责
- 探索大模型架构优化，涉及训练和推理的各类算法与工程策略的探索及落地，并实现算法与工程协同设计
- 参与美团基座大模型项目，包括但不限于大模型高效架构设计探索（高效注意力、混合专家架构等）、预训练与后训练调优策略、投机推理策略
- 负责模型轻量化方向，包括剪枝、量化、稀疏、蒸馏、结构搜索等
- 探索智能体优化策略及应用等方向
- 在上述方向做出创新性算法工程产出，并在公司业务场景中落地应用，创造业务价值
任职要求
- 计算机及其他相关专业，硕士或博士优先
- 熟悉一些常用的深度学习框架和大规模训练推理框架，如Megatron、verl、vLLM、SGLang等，具备大模型训练和推理算法工程优化经验者优先
- 熟悉机器学习和深度学习理论，具备扎实的编程能力，熟悉常见主流大模型架构者优先
- 有顶会论文发表，特别是模型架构优化相关的算法或工程论文者优先
- 具备良好的团队合作精神和沟通能力
福利待遇
- 公司具备丰富的研发经验和技术积累，提供广阔的发展空间
- 参与大模型架构优化先进方案的研发，解决行业内具有挑战性的技术问题