岗位职责

￮ 根据业务需求完成公司级数据仓库开发；参与公司其他数据项目开发建设。

￮ 负责数仓到BI库之间的数据同步、作业稳定性监控。

￮ 熟悉pandas、pyspark有多个实际项目开发经验

￮ 使用帆软报表(FineReport)开发和优化。

￮ 开发和维护数据处理脚本或工具，对大规模数据进行清洗、转换和分析。

￮ 参与构建全链路质量监控体系，保障数据时效性和准确度，支持数据回溯及问题快速定位。

￮ 协助业务部门进行数据分析和数据挖掘工作，提供数据和技术支持。

任职要求

1. 教育背景

￮ 本科及以上学历，计算机科学、数据科学、统计学等相关专业。

2. 技术能力

￮ 2年以上大数据开发经验。

￮ 有扎实的SQL、PYTHON语言功底，了解java语言。

￮ 有Hive数仓的开发经验，掌握数据仓库的经典建模方法和理论。

￮ 熟练掌握Spark或TEZ优化；有执行任务分析、问题定位实战经验。

￮ 熟悉常用的OLAP分析引擎，如Doris，Impala等相关组件。

￮ 熟悉使用调度工具，如dolphin(海豚调度)、airflow等。

￮ 熟悉数据同步工具，如sqoop、datax、kettle。

￮ 熟练使用帆软报表平台。

￮ 有大数据云产品使用经验

￮ 了解 Linux 操作系统和 Shell 脚本编程。

3. 问题解决能力

￮ 具备较强的问题分析和解决能力，能够快速定位和解决数据处理过程中出现的问题。

￮ 有良好的代码调试和优化能力，能够提高数据处理的效率和性能。

4. 沟通协作能力

￮ 具备良好的沟通能力和团队合作精神，能够甲方人员进行有效的沟通和协作。

￮ 有较强的学习能力和自我驱动力，能够快速掌握新的技术和知识。