招聘岗位：大数据开发

专业要求： 计算机科学、软件工程或相关专业

工作地点：北京

学历要求：本科及以上

工作职责：1、数据采集与传输：

使用Kafka和Netty构建高吞吐、低延迟的数据采集

和传输系统。

设计和优化数据管道，确保数据的实时性和可靠

性。

2、数据存储与管理：

使用HBase、TiDB、ClickHouse、Doris、 StarRocks等数据库进

行数据存储和管理。

设计和优化数据存储方案，确保数据的高效查询

和分析。

3、数据计算与处理：

使用Spark和Flink进行大规模数据的批处理和流

处理。

开发和优化数据处理算法，提升计算性能和效率。

4、系统优化与监控：

对现有系统进行性能调优，解决瓶颈问题。

设计和实施系统监控方案，确保系统的稳定运行。

5、团队协作与文档编写：

与团队成员紧密合作，参与技术讨论和代码评审。

编写技术文档，记录系统设计和实现细节。

职位要求：1、教育背景：

计算机科学、软件工程或相关专业本科及以上学历。

2、技术技能：

精通Kafka和Netty，具备大规模数据采集和传输系统的开发经

验。

熟悉HBase、TiDB、ClickHouse、Doris、StarRocks等数据

库，具备数据存储和管理的实际经验。

精通Spark和Flink，具备大规模数据批处理和流处理的实际经

验。

熟悉分布式系统原理，具备系统性能调优和故障排查的能力。

3、编程语言：

精通Java/Scala/Python等编程语言，具备良好的编码习惯。

4、工具与框架：

熟悉Linux操作系统，具备Shell脚本编写能力。

熟悉常用的开发工具和框架，如Maven、Git、Docker等。

5、软技能：

有大数据平台架构设计经验。

具备良好的沟通能力和团队协作精神。

具备较强的学习能力和问题解决能力。

薪资待遇：面议