职位描述
岗位职责:
1、负责大数据平台离线、实时数据处理;
2、确保对各种数据源数据正确解析、入库;
3、知识图谱体系搭建;
4、对外提供数据支持。
任职要求:
1、大专或以上学历,3年以上相关工作经验;计算机相关专业毕业优先。
2、熟悉Linux开发环境,具备Linux系统分析能力;
3、熟悉常用的数据建模理论,了解数据仓库层级的设计;
4、熟练使用Python/Scala等语言进行开发,熟悉shell/perl等脚本语言,具有较强的开发能力;
5、熟悉Hadoop生态,熟悉hdfs、spark/flink、HBase、Hive、Pulsar、ES、Druid开发,熟悉MR、presto
6、了解yarn, Zookeeper、ELK等开源技术;
7、对设计和开发在线计算和离线计算系统,有实战经验;
8、对数据敏感,优秀的技术与业务结合能力;
9、思路清晰,善于思考,责任心强;
10、具备良好的工作态度及沟通表达能力,工作认真负责,具备较强的团队协作意识和能力。
11、有大型数据平台、数据中台搭建经验者优先,有知识图谱体系搭建经验者优先。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕