LongCat - 大模型推理 AI 工程师（多方向）

Job description

• 负责大模型推理引擎的研发和优化，包括推理系统优化、模型量化压缩和模型部署；
• 负责开发和维护基于大规模数据的推理引擎；
• 参与解决推理过程中的技术难题，提升推理算法的性能和效果；
• 开展相关领域的技术研究，提出创新性的解决方案。
• 大学本科及以上学历，计算机相关专业优先；
• 至少3年以上软件开发经验，有推理引擎开发经验者优先考虑；
• 熟练掌握C++、CUDA编程，熟悉常见的数据结构和算法；
• 熟悉机器学习和深度学习理论，具备扎实的编程能力，熟悉Transformer结构优化者优先；
• 熟悉常用的深度学习框架，如TensorFlow、PyTorch等，熟悉以下推理框架者优先sglang/vllm、FasterTransformer、DeepSpeed FastGen、TensorRT-LLM等；
• 具备良好的团队合作精神和沟通能力，能够承担一定的工程管理职责。
• 公司具备丰富的软件开发经验和技术积累，提供广阔的发展空间；
• 参与大模型推理引擎的研发和优化，解决行业内具有挑战性的技术问题；
• 薪资福利优厚，提供良好的培训和晋升机制，为员工提供良好的职业发展机会。