职位描述
一、岗位职责:
1、架构设计:构建支持离线、实时、交互式查询的多模态数据平台,满足PB级数据处理需求,并设计高可用、容错的分布式系统架构。
2、问题解决:解决大数据平台在高并发、海量数据场景下的性能瓶颈,主导集群调优、资源调度优化与成本控制。
3、业务融合:深入业务场景,将需求转化为可落地的技术方案,支撑数据分析、用户画像、智能推荐等应用。
4、技术创新:跟踪云原生、AI集成、流批一体等前沿技术,推动技术迭代与创新。
二、任职要求:
1、学历背景:计算机、数学、统计学等相关专业本科及以上学历;
2、工作经验:5年以上大数据研发经验,有大型分布式系统或大数据平台的实际项目经验者优先;
3、精通Hadoop、Spark、Flink、Kafka、Clickhouse等组件,掌握其核心原理,具备集群调优经验;
4、熟练使用Java、Scala、Python至少一门语言,具备分布式系统开发及性能优化能力;
5、熟悉数据仓库建模理论、实时/离线数仓建设,有大型数据平台从0到1搭建经验者优先;
6、能独立完成复杂业务场景下的技术方案设计,平衡性能、成本与可扩展性;
7、具备较强的逻辑思维能力和问题分析能力,能够独立解决复杂的技术问题;
8、良好的团队合作精神和沟通能力,能够清晰表达技术观点,推动跨部门协作;
9、加分项:
有参与知名大数据开源项目的贡献经历;
有互联网电视或媒体行业大数据经验。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕