职位描述
岗位职责
1. 参与大数据相关项目全流程开发,包括需求拆解、方案设计、落地实施,高效对接业务方与数据分析师,保障项目高质量交付。
2. 负责海量数据处理与加工,熟练编写SQL完成复杂查询、数据统计分析,优化数据处理性能,提升处理效率。
3. 运用Python/Java/Scala等语言及对应数据处理库,完成数据开发相关任务,保障数据处理准确性与稳定性。
4. 参与数据治理相关工作,落实数据脱敏、权限管控等数据安全方案,维护数据资产质量。
5. 熟练运用数据库核心功能(存储过程、函数、触发器等),适配不同数据库语法差异,保障数据存储与调用合规高效。
6. 配合大数据平台日常运维与优化,遵循平台开发流程,保障数据开发工作顺畅推进。
任职要求
1. 本科5年以上数据开发相关工作经验,有相关软考证书。具备大数据平台架构设计、复杂项目落地能力,有上千万级海量数据处理经验者优先。
2. 精通SQL,熟练掌握复杂查询、窗口函数、存储过程等,懂数据优化技巧;熟悉MySQL、Oracle、Hive等数据库SQL语法差异,熟悉Oracle数据库者优先,了解国产数据库者更优。
3. 精通Python/Java/Scala中的至少一种,熟练掌握对应数据处理库(Python的Pandas、NumPy;Java的Hadoop Common)。
4. 具备需求拆解与方案转化能力,能与业务方、数据分析师高效协作,保障业务需求精准落地。
5. 掌握数据库开发核心技能,熟练运用存储过程、函数、触发器等数据库功能,具备数据库运维基础。
6. 具备数据治理、数据安全相关知识,了解数据脱敏、权限管控等落地方案。
优先条件
1. 有软考证书,熟悉江西移动BDPAAS平台、数据资产平台开发流程者优先。
2. 有数据治理相关工作经验的数据技术人员优先级最高。
3. 熟练使用SHELL脚本者优先。
4. 持有阿里云ACP大数据认证、Cloudera CCA Spark/Hadoop认证等相关资质证书者优先。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕