大数据平台研发工程师

Job description

Responsibilities 【岗位职责】

• 负责 Hadoop+Doris大数据平台核心组件的研发与建设，提升平台的稳定性、可扩展性与易用性。
• 跟踪业界先进大数据技术，跟踪数据湖、存算分离、云原生数仓等前沿技术，完成调研、POC与技术文档输出。
• 参与制定湖仓一体大数据平台技术演进方案。
• 负责大数据平台的日常生产支撑、监控告警、故障处理与性能优化。 【任职要求】

学历要求

• 硕士及以上学历。

专业要求

• 计算机、电子信息、数学、统计学、自动化等相关专业。

技术要求

• （1）熟练掌握至少一门语言（如Python/Java/C++等）。 （2）掌握Linux系统的基本命令和操作，能编写自动化运维工具。 （3）了解HDFS、YARN、Hive、HBase、Spark、Flink、Doris等组件的基本原理。 （4）了解Kafka、Pulsar等分布式消息中间件技术及底层原理。 （5）了解云原生概念，了解或使用过容器化技术（如Docker）、容器编排工具（如Kubernetes）。 （6）深入理解分布式存储、计算、一致性协议（如Zookeeper/Paxos/Raft）。 （7）了解Lambda/Kappa架构，有数据湖（Iceberg/Hudi/Paimon）、存算分离架构或云原生数据平台经验者加分。

综合素质

• 责任心强，善于团队协作，主动思考，自我驱动力强；具备良好的系统分析能力、抽象思维和逻辑思维能力，能独立分析与解决问题。 Education 硕士 Job category 通信项目经理 Experience 不限 Address 山东省、济南市、历城区