数据平台Java高级开发工程师

Job description

岗位职责

OneService数据服务化架构设计

• 主导平台基于MPP架构（StarRocks为核心）的数据服务层设计，构建高并发、低延迟的统一数据查询入口，支撑业务侧的实时/离线数据按需调用。

StarRocks深度应用与优化

• 负责StarRocks的调优与二次开发，包括表结构设计（分区/分桶策略）、查询SQL优化、物化视图与 Bitmap 索引优化，解决亿级数据场景下的查询性能瓶颈。

数据服务封装与治理

• 基于StarRocks构建标准化数据服务接口，实现数据权限管控、查询限流、结果缓存等功能，保障数据服务的安全性、稳定性与高可用性。

跨架构数据融合

• 对接Hadoop、Spark、Flink等大数据组件与StarRocks的数据流同步（如通过Flink-CDC实现实时入湖入仓），设计离线批量导入+实时增量更新的混合数据处理方案。

业务协同与落地

• 深入理解业务数据需求，将复杂查询场景转化为StarRocks优化方案，配合业务团队完成数据服务上线与问题排查，支撑核心业务决策。 任职资格

Java基础与分布式架构

• 本科及以上学历，4年以上Java后端开发经验，精通多线程、集合、JVM原理，具备分布式系统设计与开发经验（如微服务架构、分布式缓存、消息队列）。

MPP架构与StarRocks深度经验

• 深刻理解MPP（Massively Parallel Processing）架构的核心原理，熟练掌握StarRocks的安装部署、集群管理、性能调优（查询计划优化、资源隔离、BE/FE节点配置调优）。 具备StarRocks表模型设计（明细模型、聚合模型、更新模型）、分区策略优化、导入导出（Broker Load/Stream Load/Routine Load）实战经验，能独立解决高并发查询下的慢查询、内存溢出等问题。 了解ClickHouse、Doris等其他MPP引擎，能对比分析不同引擎的适用场景，具备技术选型能力者优先。

数据处理与服务化能力

• 熟悉大数据生态组件（HDFS、Hive、Spark、Flink），具备数据同步、ETL开发、数据湖/数据仓库建设经验。 掌握RESTful API、gRPC等服务封装技术，有数据服务平台、A