职位描述
岗位职责:
1.数据抽取、转换与加载(ETL)流程设计与开发
分析业务需求,设计高效、可靠的 ETL 流程,从各类数据源(如关系型数据库、文件系统、云存储等)抽取数据。
运用数据转换技术,如清洗、去重、标准化等,确保数据质量,满足后续分析和应用需求。
2.数据库设计与优化
参与数据库架构设计,根据业务需求构建合理的数据库表结构、索引及关系模型。
对现有数据库进行性能优化,提升数据库的响应速度和吞吐量。
3.数据质量管控
制定数据质量标准和规则,建立数据质量监控机制,对 ETL 过程中的数据进行质量检查和评估。
4.数据安全管理
负责数据库的安全配置与维护,确保数据的保密性、完整性和可用性。
制定数据备份与恢复策略,定期执行数据备份操作,并在需要时能够快速、准确地恢复数据。
配合安全团队进行安全审计,及时发现并处理数据安全风险。
5.团队协作与技术支持
与数据分析师、数据科学家、业务团队等密切合作,理解业务需求,提供数据相关的技术支持和解决方案。
参与技术选型和评估,引入先进的数据处理技术和工具,提升团队整体技术水平。
任职要求:
精通至少一种关系型数据库(如 Oracle、MySQL、SQL Server),熟悉数据库设计、开发与管理,具备扎实的 SQL 编程能力。
掌握 ETL 工具(如 Informatica、Talend、Kettle 等)的使用,能够独立完成 ETL 流程的设计与开发。
了解数据仓库架构和建模方法,如星型模型、雪花模型等。
具备数据质量管控、数据安全管理相关知识和实践经验。
熟悉操作系统(如 Linux)的基本命令和操作,能够在 Linux 环境下进行数据库部署与运维。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕