岗位：数据工程师
主要职责：
1、设计并优化数据架构，包括数据仓库、数据湖、数据流等，确保数据的可扩展性、可靠性和安全性。
2、开发并维护数据管道，包括数据的抽取（ETL/ELT）、转换、加载过程，实现数据的自动化流动和集成。
3、制定并执行数据质量策略，监控数据质量，发现并解决数据不一致性、错误等问题，确保数据的准确性和完整性。
4、根据业务需求和数据特性，选择合适的存储解决方案（如关系型数据库、NoSQL数据库、分布式存储系统等），并优化数据索引和查询性能。
5、确保数据的安全性和合规性，遵守相关法律法规和公司政策，实施数据加密、访问控制、审计等措施。
6、对数据处理和查询过程进行性能调优，提升数据处理的效率和响应速度。
7、为数据分析师、数据科学家等团队成员提供技术支持，编写数据架构、数据管道等相关文档，促进知识共享和团队协作。
8、关注数据工程领域的新技术、新工具和新方法，评估其适用性，并推动在团队中的应用。
任职要求：
本科及以上学历，计算机科学、信息技术、数学、统计学等相关专业毕业。
具备3年以上数据分析或相关领域工作经验，有政府、公安、反欺诈、金融风控等领域经验者优先。
专业技能：
1.熟练掌握至少一种编程语言（如Java、Python、Scala等），具备良好的编程能力。
2.熟悉数据仓库和数据湖技术，了解Hadoop、Spark、Hive、Kafka等大数据处理框架。
3.熟悉关系型数据库（如MySQL、Oracle、PostgreSQL）和非关系型数据库（如MongoDB、Redis、Cassandra）的使用。
4.了解数据ETL/ELT过程，熟悉相关工具和框架（如Apache NiFi、Talend、Informatica等）。
4、具备数据架构设计能力，能够根据业务需求设计合理的数据架构和数据模型。
5、具备强大的问题解决能力，能够快速定位并解决数据处理过程中遇到的问题。
6、良好的沟通与协作能力，能够与团队成员、业务部门和其他利益相关者有效沟通，共同推动项目进展。
7、具备持续学习的能力，紧跟技术发展趋势，不断提升自己的技能水平。
8、对数据质量负责，具备较强的责任心和抗压能力，能够在高强度的工作环境下保持高效的工作状态。