岗位职责
负责海量数据（TB/PB级）的采集、清洗、存储及实时/离线计算任务开发；设计并优化大数据处理架构，保障高并发、高可用性及低延迟；开发数据管道（Data Pipeline），支持数据仓库、数据湖及BI系统的建设；参与数据治理与质量监控，提升数据资产价值。
任职要求
本科及以上学历，计算机、软件工程等相关专业；精通Hadoop/Spark/Flink生态，熟悉Hive、Kafka、HBase等组件；熟练使用Java/Scala/Python开发，具备性能调优及故障排查能力；熟悉分布式系统原理，了解OLAP引擎（ClickHouse、Doris）或流批一体架构；有数据湖（Delta Lake、Iceberg）或实时数仓项目经验者优先。 加分项熟悉云原生大数据平台（AWS EMR、阿里云MaxCompute）；具备数据安全与隐私保护（如脱敏、加密）开发经验；熟悉DataOps理念，有自动化数据流水线构建经验。