岗位职责:
1、数据架构设计:设计并优化数据架构,确保数据的高效性、可扩展性和安全性。参与数据仓库、数据湖等数据存储解决方案的规划和实施。
2、使用SQL、Python、Java等编程语言进行数据处理、清洗和转换;运用Hadoop、Spark、Hive等大数据处理框架进行大规模数据处理和分析;开发数据ETL(Extract, Transform, Load)流程,实现数据的高效迁移和整合。
3、根据业务需求进行数据建模,设计适合的数据模型和结构;优化数据查询性能,提升数据处理的效率和准确性。
4、与产品、运营、开发等部门紧密合作,提供数据支持、数据分析报表和数据优化解决方案。参与制定数据相关的技术标准、流程和规范,推动数据治理体系的建立。
5、参与数据平台、数据服务等的开发和维护工作。监控系统运行状态,及时发现并解决潜在的技术问题。
6、关注数据领域的新技术、新工具和新方法,持续学习和研究;参与数据相关的创新项目,推动技术成果的应用和落地。
任职要求:
1、本科及以上学历,计算机科学、数学、统计学或相关专业,如有物流领域从业工作经历优先考虑。
2、技能要求:熟练掌握SQL语言,能够进行高效的数据库查询和操作;熟悉Python、Java等至少一种编程语言,具备良好的编程能力;了解Hadoop、Spark、Hive等大数据处理框架及其使用方法;熟悉数据仓库、数据湖等数据存储解决方案的设计和实现。
3、拥有5年以上数据工程师或相关领域的工作经验;有大型互联网企业、汽车主机厂等行业背景者优先考虑。
4、具备良好的逻辑思维能力、学习能力和团队合作精神;能够承受工作压力,具备较强的责任心和抗压能力;对数据敏感,具有数据驱动业务的意识和能力。