职位详情
资深数据引擎技术专家
2.5-5万
浙江数新网络有限公司
杭州
10年以上
本科
05-21
工作地址

浙江省杭州市余杭区文一西路1218号

职位描述
岗位职责:
1、参与公司自主研发的大数据管理平台产品的设计、开发、优化及升级工作,主流引擎组件商业化版本的定制优化工作;
2、负责项目的技术方案制定与提交,调研与比较不同技术方案的优缺点,并根据实际条件选择合理的技术方案;
3、高质量完成项目的研发工作,组织项目组进行代码review;
4、发现项目组研发过程中出现的问题,并予以优化、解决,以提升研发效率和研发质量;
5、承担项目技术管理和架构规划职责,规划团队的技术演进方向,带领研发团队实现技术迭代升级;

任职要求:
1、计算机或软件工程相关专业本科及以上学历,5年及以上开发经验;
2、扎实的计算机基础知识,对操作系统、网络、数据结构及算法等有较为深入的理解;
3、扎实的编程基础,精通Java/Go一种或多种开发语言,熟练掌握JVM原理及调优,熟练掌握Web后端开发框架;
4、熟悉Hadoop大数据生态,有丰富的Hive/Spark/Flink/Flink CDC等引擎组件的稳定性和性能优化经验,熟练使用Gitlab/Jenkins/Harbor/Nexus/Minio等CI/CD工具;
5、熟悉云原生大数据技术,在Spark on K8s、Flink on K8s等方向有深入的实践和优化经验,有丰富的技术架构和项目经验;
6、熟悉Hudi/Iceberg/Delta Lake/Paimon等数据湖技术,熟悉数据仓库/数据湖的技术选型,具有实时数据开发平台、实时湖仓一体平台的开发和架构经验;
7、熟悉分布式系统的设计和应用,数据库、缓存、消息队列、RPC框架等中间件技术,能够合理做出技术选型;
8、熟悉Linux系统,熟练使用Linux常用命令及组件,熟悉常用的运维工具和问题排查方法;
9、有CDH/CDP/Ambari等大数据管理平台的架构、开发、优化、运维经验者优先;(加分项)
10、有企业级大规模集群(如:千节点集群、跨机房高可用等)的构建和生产优化经验者优先;(加分项)
11、具备良好的需求分析能力、业务和技术方案策划和设计能力;
12、善于排查解决复杂、困难的问题,并作出有效的短期、中长期解决方案;
13、能有效把控研发质量,全方位评估研发各环节可能出现的问题;
14、有较强的项目管理意识和能力,能够承担并发项目的技术管理与推进工作;
15、技术思路开拓,知识面广,有技术全局判断,能够不断地推动技术创新;​

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请