escription and Location
4+ years in data operations, platform support or IT assurance roles.
•Working knowledge on data lake architecture and storage formats
•Understanding of data partitioning, schema evolution and reconciliation
•String proficiency in SQL for any Data quality checks verification
•Ability to write scripts for Data validation and verification during the migration
•Understanding of data governance principle, metadata management and regulatory principles
•Scripting and Automations skills (expertise in Spark, Hive using python)
4年以上工作经验 英语沟通
描述与地点
• 在数据运营、平台支持或IT审计相关岗位上有4年工作经验。
• 熟悉数据湖架构和存储格式
• 理解数据分区、模式演变及数据对账x
• 精通用于数据质量检查验证的SQL
• 能够在迁移过程中编写数据验证和核查脚本
• 理解数据治理原则、元数据管理及法规要求• 具备脚本编写和自动化技能(精通使用Python进行Spark和Hive操作)