职位描述
任职要求
1. **必备条件:**
* 本科及以上学历,计算机科学、软件工程、数学或相关专业。
* **3年以上大数据领域开发经验,1年以上数据中台或大数据平台建设相关经验。**
* 精通至少一门主流编程语言(Java/Scala/Python/Go)。
* 深入理解大数据技术栈,**熟练掌握以下至少两项**:Hadoop (HDFS, YARN), Spark, Flink, Kafka, Hive, HBase, Presto/Trino, ClickHouse, Elasticsearch等。
* 精通SQL,具备复杂SQL编写和优化能力。
* 熟悉Linux操作系统和Shell脚本。
* 熟悉数据仓库建模理论(如维度建模)和数据治理理念(元数据、数据质量、数据安全)。
* 具备良好的系统设计能力,理解分布式系统原理(高可用、容错、扩展性、一致性)。
* 具备优秀的**问题定位、分析解决和故障排查能力**。
* **强烈的责任心、自驱力、学习能力和团队协作精神。**
* 良好的沟通能力,能够清晰表达技术方案。
2. **优先考虑:**
* 有大型数据中台项目从0到1建设或核心模块重构经验者优先。
* 熟悉云原生大数据服务(AWS EMR/Redshift/S3/Glue, Azure HDInsight/Synapse/Databricks, GCP Dataproc/BigQuery等)者优先。
* 熟悉数据湖技术(Delta Lake, Apache Iceberg, Apache Hudi)者优先。
* 熟悉流式数据处理(Kafka Streams, Flink Streaming, Spark Streaming)和实时数仓建设者优先。
* 有数据治理平台(如Apache Atlas, Datahub, Amundsen等)开发或使用经验者优先。
* 有数据可视化或BI工具集成经验者优先。
* 了解容器化(Docker, Kubernetes)和自动化部署(CI/CD)者优先。
* 了解数据安全相关技术(权限控制、加密、脱敏)者优先。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕