职位详情
高级ETL开发工程师
1.3-1.6万
北京久胜云数科技有限公司
北京
5-10年
本科
09-20
工作地址

华润时代中心-B座

职位描述
岗位职责:
熟悉Hadoop体系架构并有源码级开发经验,至少熟练使用Python、Java、Scala语言中的一种;
熟悉保险业务流程,主导过三个以上保险行业Hadoop大数据平台的规划、设计、开发和实施工作;
精通以下至少任意一项技术方向:
a) 熟悉Spark Streaming、Spark SQL或Spark MLlib,有Spark分布式开发、部署和实施经验;
b) 熟悉HDFS、Yarn、Kafka、HBase、Flume体系架构,并有相关开发、部署和实施经验;
c) 熟悉常见机器学习算法,并有一定的分布式算法实现经验;
d) 精通MapReduce(MR)/Hive开发,并有系统优化经验;
具备较强的自学能力、新技术研究探索能力和沟通交流能力,能够持续跟踪大数据领域前沿技术,并推动技术落地与业务创新。
任职要求:
1、本科及以上学历,计算机相关专业,5年以上ETL开发相关工作经验;
2、熟练掌握至少一类数据库的SQL使用,如GBASE、GAUSS、PostgreSQL优先;
3、熟练编写Python脚本进行ETL数据采集,熟悉Python的分布式框架,了解xmlrpc模块,有分布式组件搭建工作经验者优先;
4、熟练使用ETL工具,如Kettle、DolphinScheduler;
5、有保险金融行业相关项目经验者优先。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请