职位描述
岗位职责
1. 数据治理与开发
- 负责政务大数据平台的数据接入、清洗、治理全流程开发工作
- 使用ETL工具(如DataX、Kettle、Informatica等)进行数据集成与转换
- 基于数仓理论(ODS/DWD/DWS/ADS)进行数据分层建模与开发
- 设计和优化数据质量监控体系,提升数据准确性
2. 系统开发与优化
- 使用Java主流框架(SpringBoot/SpringCloud)开发数据服务API
- 负责大数据平台核心功能模块的设计与开发
- 优化数据处理性能,解决高并发、大数据量场景下的技术难题
3. 系统运维与问题排查
- 负责大数据平台的问题排查与修复,包括代码层优化
- 维护消息中间件(Kafka/RabbitMQ/Redis)的稳定运行
- 配合运维团队进行系统监控、性能调优
4. 前端开发支持
- 使用jQuery等前端技术配合完成管理后台开发
- 开发数据可视化相关功能
任职要求
1. 必备技能
- 3年以上大数据平台开发或数据治理相关经验
- 精通Java开发,熟练掌握SpringBoot/SpringCloud等主流框架
- 熟练使用ETL工具进行数据清洗与集成
- 熟悉数据仓库理论(维度建模、数据分层)
- 熟悉Kafka、RabbitMQ、Redis等消息中间件的开发应用
- 具备Linux环境下的问题排查能力
2. 技术栈要求
- 后端:Java8+、SpringBoot、MyBatis、SpringCloud
- 大数据:Hadoop、Hive、Spark、Flink(至少熟悉一种)
- 数据库:MySQL、Oracle、PostgreSQL
- 前端:jQuery、HTML5、CSS3(能独立完成简单页面开发)
3. 加分项
- 有政务大数据项目经验,熟悉政务数据标准
- 熟悉数据治理工具(如Atlas、DataHub)
- 了解微服务架构和容器化技术(Docker/K8s)
- 有数据可视化开发经验(Echarts等)
4. 软技能
- 良好的编码规范和文档习惯
- 较强的逻辑思维和问题解决能力
- 能承受一定工作压力,具备团队协作精神
备注:本岗位要求同时具备大数据治理能力和Java全栈开发能力,特别欢迎有政务行业经验或大型数据平台开发经验的候选人!
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕