职位描述
核心职责
1、参与设计、开发和维护数据中台的高性能、高可扩展分布式核心引擎。
2、负责关键后台功能的研发,包括但不限于:
① 智能元数据管理: 构建元数据自动采集、血缘分析、影响分析和知识图谱系统
② 统一数据访问层: 开发支持多协议(如SQL, GraphQL, REST)的数据虚拟化与联合查询引擎。
③ 数据安全与治理: 实现基于策略(Policy-as-Code)的动态数据掩码、访问控制与合规性检查。
④ 自动化编排与集成: 开发与各类数据源(数据库、数据湖、API等)的自动化连接、摄取与任务编排系统。
⑤ 持续优化系统性能,解决高并发、低延迟下的技术挑战,保障平台的稳定性和可用性。
⑥ 编写清晰、健壮、可维护的代码,进行代码审查,并积极参与技术决策和架构设计评审。
⑦ 与技术产品经理、前端工程师紧密合作,共同交付卓越的数据产品。
任职要求
必备条件:
1、计算机科学或相关专业本科及以上学历,5年以上后端开发经验。
2、精通 Spring Boot、Dropwizard、MyBatis 等主流 Java 开发框架,并具备丰富的实战经验。
3、拥有丰富的分布式系统设计开发经验,熟悉微服务架构、容器化(Docker)、编排(Kubernetes)及相关技术栈。
4、熟练掌握至少一种主流数据库(MySQL, PostgreSQL等)和一种NoSQL数据库(Elasticsearch, MongoDB, HBase等)。
5、对数据结构和算法有深刻理解,具备优秀的复杂问题分析及解决能力。
6、强烈的责任心和团队合作精神,优秀的学习能力和技术钻研精神。
优先考虑:
1、有数据平台、数据中台、数据治理、大数据基础架构(如Hadoop, Spark, Flink, Trino等)相关项目经验。
2、熟悉元数据管理、数据目录、数据血缘等概念及相关工具(如Apache Atlas, Amundsen, DataHub)。
3、有数据安全、访问控制策略引擎开发经验。
4、了解机器学习Ops(MLOps)流程,有相关平台开发经验者优先。
5、有从0到1构建复杂系统或核心模块的经验。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕