多模态大模型工程师

Job description

多模态大模型研发与训练

• 参与构建及优化面向业务场景的多模态（文本、图像、语音、视频等）大模型基座，深入数据处理、预训练（Pretrain）、有监督微调（SFT）及强化学习（RL）等关键环节。

跨模态交互与融合

• 设计并实现多模态融合算法，探索模型对多模态输入的深度融合与理解，提升在对话、情绪感知、场景交互中的自然度与智能水平。

前沿技术探索与落地

• 持续跟踪多模态大模型（如VLM/VLA）前沿技术，将大模型能力与具体业务场景结合，主导技术方案的设计与实现。

数据链路与偏好对齐

• 参与多体裁内容数据链路建设、指令微调、偏好对齐（如RLHF/RLAIF），确保模型输出的安全性、合规性与准确性。

系统工程与性能优化

• 参与大模型训练/推理系统研发，进行模型量化加速与分布式训练优化，提升大规模系统的稳定性与推理性能。
• 计算机/人工智能等相关专业，硕士及以上学历；
• 精通Python，具备多模态大模型（VLM/VLA）/跨模态融合/对齐训练（RLHF/RLAIF）开发经验；
• 熟练使用PyTorch/Transformers/DeepSpeed等框架，有Megatron/vLLM分布式训练与推理优化经验；
• 熟悉主流多模态架构（如CLIP/BLIP/LLaVA），了解大模型安全合规与数据飞轮建设者优先；
• 具备跨团队协作能力，能快速定位并解决多模态对齐与推理性能瓶颈问题。