一. 岗位职责
1. 主导大数据系统中实时分析和离线分析调度系统的重构与核心开发工作
2. 负责大数据实时推送框架的架构设计与主要开发任务
3. 参与Spark集群、数据湖、数据仓库等基础设施的维护与优化
4. 制定技术方案，协助团队成员开展开发工作，提升团队整体效能
二.任职要求
①技术能力
1. Java基础扎实，具备丰富的Java开发经验，有大规模应用JVM调优经验，有dolphinscheduler、xxl-job或airflow等开源调度框架二次开发经验
2. 熟练掌握Spark、Flink等计算框架及Kafka消息系统，能独立进行性能调优
3. 熟悉Hadoop生态体系，了解HDFS、YARN等核心组件，能承担基础运维工作
4. 具备大数据平台架构设计经验，能根据业务需求设计高可用、可扩展的技术方案
②综合素养
1. 具备5年以上大数据领域相关工作经验，有团队管理经验者优先
2. 拥有良好的架构设计能力，能从业务角度出发规划技术实现路径
3. 具备较强的问题解决能力和技术攻坚精神，能应对复杂技术挑战
4. 良好的沟通协调能力，能有效推动跨团队合作与项目落地