职位描述
岗位职责:
熟练掌握Suse、CentOS、RedHat等主流Linux操作系统管理,至少精通一门脚本语言(如Shell、Python);
熟练掌握CDH集群的安装部署、性能监控、数据备份、数据监控、报警、故障处理,以及Kerberos、LDAP等配置管理,具备保险行业CDH平台开发经验;
熟悉常用开源分布式系统如Hadoop、Hive、Yarn、HBase,熟悉Spark Streaming、Spark SQL或Spark MLlib,有Spark分布式开发、部署和实施经验;
至少在一家保险企业担任过开发或ETL工程师,对保险业务流程有良好的理解能力,具备较强的分析能力、动手解决技术问题的能力以及沟通能力;
熟练掌握某一类数据库的SQL使用,如GBASE、GAUSS、PostgreSQL优先;
熟练编写Python脚本进行ETL数据采集,熟悉Python的分布式框架,了解xmlrpc模块,有分布式组件搭建工作经验者优先;
熟练使用ETL工具,如Kettle、DolphinScheduler;
项目经验有保险金融行业的优先。
任职要求:
1、本科及以上学历,计算机相关专业,3年以上ETL开发经验;
2、熟练掌握至少一类数据库的SQL使用,有GBASE、GAUSS、PostgreSQL使用经验者优先;
3、熟练编写Python脚本进行ETL数据采集,熟悉Python的分布式框架,了解xmlrpc模块,有分布式组件搭建工作经验者优先;
4、熟练使用ETL工具,如Kettle、DolphinScheduler;
5、有保险金融行业相关项目经验者优先。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕