职位描述
岗位职责
1、负责企业级大数据平台架构设计、开发及性能优化,支撑日均PB级数据处理
2、主导实时计算(Slip Streaming/Flash Sync/Flink/Spark Streaming)与批处理系统的深度融合开发
3、构建基于TDC/TDH/Hadoop/ClickHouse等组件的行业解决方案,覆盖数据采集、清洗、存储到分析全链路
4、攻克高并发场景下的数据一致性、系统稳定性等技术难题
5、指导中级工程师,输出技术规范并推动团队能力提升
任职要求
硬性条件
1、计算机相关专业硕士5年+/本科7年+大数据开发经验
2、精通Java/Scala/Python至少两门语言,有分布式系统调优经验
3、深度掌握Spark/Flink原理,具备源码级问题定位能力
4、熟悉Kafka/Pulsar等消息中间件及数据湖技术(Delta Lake/Iceberg)
5、精通数据分仓、分库、建模、治理、挖掘技术项目一线实战及相关工具的使用
加分项
1、有金融/电商领域千亿级数据实战经验
2、主导过从0到1的大数据平台建设
3、发表过大数据相关技术专利或论文
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕