职位描述
主要工作职责
1. 参与公司大数据中心建设,核心代码开发等任务;根据要求编写相关技术文档;
2. 大数据平台的搭建、维护和优化工作;
3. 审核开发人员的系统设计和代码质量,书写技术文档和制定开发规范;
4. 系统性能优化,安全加固,保证系统的安全、稳定、快速运行;
5.参与公司外部项目建设和定制化开发;
6. 交付高质量的代码,迭代优化数据中心产品;
任职资格
1.计算机、软件工程、通信等相关专业,本科以上学历;
2.5年以上Java开发经历,1年以上Scala开发经历;
3.3年以上大数据开发经验,掌握Hadoop生态系统内常见项目的使用(Kafka、HDFS、Hive、HBase、Zookeeper、Yarn、ES等),具有MapReduce\Spark \Flink\Hudi\Ice berg\ES\关系图谱等的开发经验,熟悉DataX、Kettle等ETL工具,熟悉XXLJob、Azkaban等开源调度,有数据仓库开发经验,有大数据平台安装部署及调优经验,有实际大数据项目经验优先;
4.熟悉Spring Cloud/boot微服务体系,擅长分布式、搜索引擎、缓存、jvm调优、序列化、nio、RPC调用框架等;
5.熟练使用Oracle、Mysql、Sql Server、MongoDB、Postgre SQL、Redis、达梦、神舟通用、南大通用、高斯等数据库;
6.有良好的计算机和网络基础,熟悉Linux文件系统、内核、性能调优,熟悉掌握Linux常规命令,了解脚本编程(Shell/Perl/Python其中一种);
7.代码编写规范,思路清晰,逻辑性强,工作态度认真;
8.责任心强,有良好沟通能力和团队合作精神。有敏捷开发经验有限;
9.具备数据治理、数据资产管理、数据分析等相关项目经验者优先;
10.有开源背景的优先;
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕