岗位职责:
1. 参与系统设计与架构优化:
- 参与公司数据平台的架构设计、技术选型和技术难题攻关。
- 设计和实现高可用性、高性能的大数据处理系统。
2. 数据管道建设:
- 构建和维护稳定的数据ETL流程，确保数据的质量和时效性。
- 整合来自不同来源的数据，为数据分析和机器学习提供支持。
3. 性能调优和故障排查:
- 分析和解决生产环境中出现的问题，进行性能瓶颈分析并提出改进建议。
- 对集群中的资源分配进行管理和优化，保证系统的稳定性。
任职要求:
1. 教育背景：
- 计算机科学或相关领域的本科及以上学历。
2. 工作经验：
- 至少5年以上Java开发经验。
- 有成功上线的大数据项目案例者优先考虑。
3. 技术技能:
- 深入理解Java编程语言，了解其并发模型、内存管理等底层机制。
- 熟练使用SpringBoot、Spring Cloud、Mybatis等，具备微服务开发经验。
- 熟悉Kafka、Flume或其他消息队列工具，用于实时数据流处理。
- 熟练掌握ETL开发工具、调度工具，熟练掌握BI报表开发工具，具有大型企业级数据类系统的项目经验者优先，熟悉MPP架构数据库的开发者优先。
4. 软技能:
- 具备良好的沟通能力和团队合作精神。
- 强烈的责任心和自我驱动力，能够在快速变化的环境中工作。