岗位职责:
1. 负责大数据平台的设计与优化,确保数据架构与业务需求相匹配,支持业务决策和创新。
2. 指导大数据项目的技术选型和架构设计,推动技术方案的实施和落地。
3. 管理和维护大数据生态系统,包括数据存储、处理、分析工具的集成与优化。
4. 与业务部门紧密合作,识别数据价值点,制定数据驱动的业务策略。
5. 持续关注大数据领域的技术发展趋势,推动技术革新和创新应用。
任职要求:
1.本科及以上学历,计算机相关专业;
2.具有5年以上大数据架构经验;
3.熟悉HADOOP大数据平台架构:HDFS/HBase/Hive/MapReduce,熟练学握Mapeduce程序开发,了解实时计算,有使用过Fink,Spark streaming等开源实时流引擎
4.对数据仓库系统架构具有良好的认知,理解数据分层、数据倾斜、错峰调度等理念,并具有相关实战经验
附加项(加分项):
1、参与过大型开源项目,尤其是在Flink/Spark、Kafka等引擎方面或者云原生开源项目贡献过社区代码;
2、完整参与过企业级数仓建设,或有数仓平台化的经历;
3、熟悉java、python等开发语言。