【岗位职责】
1、负责大数据平台数据标注、治理等核心功能模块的代码开发与迭代优化，确保功能稳定性和性能指标达标；
2、针对平台性能瓶颈进行代码级调优，包括Spark/Flink任务优化、Hive SQL优化、存储格式优化等，提升数据处理效率；
3、负责大数据组件（Hadoop/Spark/Flink/Kafka等）的版本升级、功能扩展及安全漏洞修复相关开发工作；
4、开发基于Nebula Graph的图数据存储与计算功能，优化图查询性能，实现高效的关联关系分析；
5、开发基于Milvus的向量数据存储与检索功能，优化向量索引构建和相似度计算性能，支持AI场景应用；
6、编写平台监控告警、自动化运维等工具代码，提升平台可观测性和运维效率；
7、参与技术方案设计与代码评审，确保代码质量，编写规范的开发文档和API接口文档。
【任职要求】
1、专科及以上学历，计算机/互联网/通信相关专业；
2、具备3年以上开发经验，精通Java，精通面向web的平台开发，精通工程建设，有微服务建设经验，熟悉Maven/SpringBoot/SpringMVC/SpringCloud的使用；
3、熟悉Clickhouse/Hadoop/Hive/Ranger/HBase/Spark/Flink/Flume/Kafka/Zookeeper等常见大数据技术；
4、精通SQL，熟悉mysql等常用关系型数据库，了解备份、恢复、实时同步等技能、深入理解Milvus等AI关联数据库；
5、熟悉Linux操作系统的配置，管理及优化，能够独立排查及解决系统层的各类问题；
6、熟悉 Perl/Python/Shell脚本语言中的一种；
7、有大数据平台类开发经验优先，有大数据类别开源项目参与经验优先。