4-6万
绿地外滩中心T3
职位描述
作为数据架构师,您将负责设计和优化企业级数据架构,确保数据的高效存储、处理和分析,支持业务决策和数字化转型。您需要与数据工程师、分析师、业务团队紧密合作,构建可扩展、安全且高性能的数据生态系统。
主要职责
1. 数据架构设计与规划
• 设计企业级数据架构,包括数据仓库、数据湖、实时数据流等解决方案。
• 制定数据建模、存储、集成和治理的标准与规范。
• 确保架构支持业务需求,如数据分析、机器学习、BI可视化等。
2. 数据治理与标准化
• 建立数据质量管理框架,定义数据生命周期管理策略。
• 推动元数据管理、数据血缘追踪和数据安全策略(如权限控制、脱敏)。
3. 技术选型与实施
• 评估并引入大数据技术栈(如Hadoop、Spark、Flink、Kafka等)及云平台(AWS、Azure、GCP)。
• 优化ETL/ELT流程,设计高性能数据管道。
4. 跨部门协作
• 与业务团队沟通,将需求转化为技术方案。
• 指导数据工程师和开发团队实现架构目标,确保技术落地。
5. 性能优化与创新
• 监控数据系统性能,解决瓶颈问题,提升处理效率。
• 探索新技术趋势(如AI驱动的数据分析、实时处理、湖仓一体等)。
任职资格
必需条件:
l 本科及以上学历,计算机、数学、统计学等相关专业,3年以上大数据平台开发经验;
l 熟悉大数据生态技术栈(Hadoop/Spark/Flink/Hive/Kafka 等),具备分布式系统开发经验;
l 熟练使用JAVA/Python/Scala至少一门语言,熟悉SQL优化及数据仓库建模方法论;
l 熟悉云原生数据平台架构(AWS/Azure/阿里云等),有数据湖、实时数仓项目经验优先;
l 具备良好的逻辑思维,沟通能力和技术文档撰写能力;
l 熟悉数据治理体系(如DataOps, 数据血缘追踪,数据质量监控);
l 熟悉容器化技术(Docker/K8s)及自动化运维工具。
加分项:
• 拥有云平台认证(AWS/Azure/GCP数据专家)。
• 熟悉数据隐私法规(如GDPR、CCPA)。
• 有金融、电商、物联网等领域的行业经验。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕