数据管理工程师

Job description

岗位职责

• 参与公司数据管理策略的制定，能针对业务目标及发展现状设计数据团队的定位、目标，整体发展路线，能进行数据体系的整体规划与设计，包括技术架构、数据模型、指标体系、报表与产品体系、数据治理等。
• 参与公司大数据平躺建设，建设各业务领域的通用数据集市。
• 参与数据全链路的开发，包括日志埋点、内部与外部数据的采集、数据同步、数据清洗与标准化、数据模型设计、离线数据处理、实时数据处理、数据服务化、数据可视化等。
• 参与数据治理工作，包括元数据管理、数据质量检查、数据分级管理等系统的设计、开发及应用，提升数据易用性、可用性及稳定性。
• 参与公司数据管理，在深入了解业务的基础上，制定系统性端到端的数据解决方案，通过数据+算法驱动业务优化，打造新零售应用标杆。 任职资格
• 计算机及相关专业毕业，本科及以上学历，3年以上工作经历（包含3年）
• 熟悉数据工厂、维度建模、数据湖等数据仓库相关理论，实际参与过2个以上的数据仓库项目，有实际模型设计及ETL开发经验；有数据仓库分层架构设定经验者优先；
• 熟悉Hadoop生态相关技术，如Hive、Spark、Flink、Kafka、Elasticsearch、Impala、HBase等，有基于分布式数据存储与计算平台应用开发经验，熟悉腾讯云、阿里云或CDH大数据平台组件（如DataX、hue等）者优先。了解kubernetes， docker等容器化技术。
• 掌握一门或多门编程语言优先，如Python、Scala、Java等，熟悉Linux系统及常规shell处理命令。

熟悉数据仓库领域知识和管理技能，包括但不局限于

• 元数据管理、数据质量、性能调优等。
• 有良好的业务Sense，对数据业务场景非常敏感，能够横向协同，跨界整合资源，有效结合业务和技术创新，形成完整的数据解决方案，全局地规划或完善数据服务体系以解决业务/产品的问题。