数据平台工程师

Job description

岗位职责 工作职责 1负责大数据平台建设、优化以及相关产品的开发，参与大数据基础平台的技术方向、技术选型、技术规格和关键特性的设计； 2负责分布式存储系统的设计和开发，构建高并发、高吞吐、低延时的数据存储服务； 3负责分布式计算系统的设计和开发，实现查询优化、运行优化、分布式调度优化等工作； 4参与攻克高并发、高性能和高稳定性等各种挑战以及技术难关； 5熟悉Linux操作系统的配置、管理及优化；熟悉Hadoop/Hbase/Hive/Yarn/Spark/Flink/Ambari/Greenplum等开源项目，熟悉气架构设计及原理； 6规划、设计和优化Hadoop集群，提升集群的高可用性、高性能、高扩展特性；实现大数据分析计算需求，支持海量数据挖掘； 7精通Java，熟练掌握Scala以及SQL和shell、Python脚本。 任职资格 工作要求

• 全日制本科及以上学历，3年以上数据平台开发及实施经验，有数据平台相关系统开发经验者优先；
• 有2年以上Hadoop工作经验，熟悉大数据组件原理与应用，熟悉hadoop生态；
• 精通至少一种主流关系数据库（Oracle/mysql），精通SQL编程；
• 了解常用的架构设计基础知识（高可用、高性能设计）
• 具备良好的数据分析能力和学习能力；有较强沟通能力，思维严谨；有一定项目管理经验。