智能数据平台架构师

Job description

岗位职责

• 设计和实施企业级大数据架构，支持复杂数据的采集、存储、处理、分析和可视化，构建覆盖数据全生命周期的管理能力。
• 制定数据治理规范，涵盖数据质量监控、元数据管理、数据血缘追踪、数据安全合规等，确保数据资产可信可用。
• 与业务部门紧密合作，理解业务需求，提供数据驱动的解决方案，深入挖掘大模型在业务场景的落地，推动业务智能化升级
• 根据项目需求，选择合适的技术栈，评估新技术可行性，推动平台智能化演进
• 指导团队成员完成技术方案的设计与实施，提升团队整体技术水平 任职资格

技术能力

• ① 熟悉大数据生态系统，掌握Hadoop、Spark、Flink、Hive、Kafka、HBase、Elasticsearch等技术。 ② 熟悉分布式系统原理，具备分布式系统设计和优化能力。 ③ 熟悉数据建模和数据仓库设计，具备数据治理经验。 ④ 熟悉大模型基本原理，熟悉LangChain等开发框架，了解RAG技术栈，有Prompt Engineering经验。

经验要求

• ① 5年以上大数据开发和设计工作经验 ② 参与过大型企业级大数据项目的设计和实施，具备丰富的实战经验。 ④ 有数据治理、数据仓库、数据湖等项目经验者优先 ⑤ 有大模型应用开发或微调经验者优先，有AI Agent、智能体开发经验者优先。

教育背景

• 计算机科学、软件工程、数学、统计学等相关专业