职位描述
岗位职责:
参与数据接入、数据处理、数据入库的全流程工作,并保证数据质量
负责基于Hadoop/Spark/Flink生态的大数据实时/离线处理开发
能力要求:
1、能独立测试编写的大数据处理分析程序,并能判断计算结果的正确性;
2、熟悉分布式系统、分布式计算系统的工作机制,具有大规模数据平台,高并发大型系统,大数据等架构设计和开发经验;
3、熟悉大数据平台的搭建及数据处理流程,有TB级以上批量数据处理经验及实时数据处理经验;
4、有数据仓库建设的经验,能调优并维护Hadoop、Flink、Spark、HBase、Kafka、Redis、Zookeeper、Hive、Hudi等大数据基础设施;
5、具有高度责任感和主动性,良好的团队合作能力和沟通能力及自我管理能力,代码编写规范,技术扎实,逻辑思维能力强,乐于学习和分享新技术;
硬性要求:
本科,计算机相关专业,5年以上开发经验;
具备Hadoop、Spark、Flink大数据框架上的代码层面开发经验;
熟练掌握Java、Scala、Shell、SQL等开发语言,并具备实践经验;
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕