任职要求:
计算机科学、软件工程或相关领域的本科及以上学历,具备3年以上大数据开发经验。
- 精通Hadoop和Spark框架,具备大规模分布式计算系统的开发和维护经验。
- 熟悉SQL、Python等编程语言,具备良好的数据处理和分析能力。
- 具备政务或通信行业背景,有相关行业大数据项目开发经验者优先。
- 具备良好的问题解决能力和创新思维,能够独立分析和解决复杂的技术问题。
- 良好的沟通和团队协作能力,能够在多学科团队中高效工作。
- 对大数据技术有深入的理解,能够跟踪最新的技术发展动态
工作职责:
负责基于Hadoop和Spark的大数据平台架构设计与实施,确保平台的稳定性和高效性。
- 参与大数据项目的规划与执行,包括数据采集、存储、处理和分析全流程。
- 开发和优化数据处理流程及算法模型,提升数据处理效率和质量。
- 与业务团队紧密合作,理解业务需求,设计并实现定制化的数据分析解决方案。
- 对现有大数据系统进行性能调优,确保系统能够满足业务增长的需求。
- 支持数据可视化工作,提供数据支持,帮助决策层做出更明智的业务决策。