岗位职责
1、负责数据采集、清洗、整理与加工等流程的开发与维护
2、编写高效、可维护的python脚本，实现数据自动化处理
3、掌握高效数据仓库建模方法和技巧，能构建稳定且具有高扩展型的数据架构；
4、负责内部数据生产工作，编写大数据作业脚本，高质量完成数据需求
任职要求：
1、精通大数据相关技术Hadoop生态、Flink、Spark、Kafka、Flume等;
2、熟悉数据仓库实施方法论、熟悉数据仓库体系;
3、掌握Python/Java语言，可编写UDF及自动化脚本;
4、熟练使用SQL语言处理数据，有大批量数据性能优化经验
5、具有良好的沟通能力和学习能力
6、具备较强的责任心和上进心