岗位职责
1. 参与公司数据仓库、数据中台或数据平台的开发与维护。
2. 根据需求完成数据清洗、转换、加载（ETL/ELT）任务的开发与调试。
3. 编写并优化 SQL，保证数据处理的正确性与高效性。
4. 协助数据分析师/产品同事，提供所需数据支持。
5. 参与数据质量检查，保障数据的准确性、完整性与一致性。
6. 编写相关技术文档。
任职要求
1. 计算机、软件工程、信息管理、数学等相关专业，本科及以上学历。
2. 熟悉 SQL，掌握基本的 SQL 优化技巧。
3. 熟悉 Python 用于数据分析处理,熟悉XPath语法,及逆向编程思维
4. 熟悉 常见数据库（如 MySQL、SQLServer），会基本的建表、索引设计。
5. 了解 Linux 基本命令，能进行数据脚本部署与日志排查。
6. 了解网页前端基础（HTML, CSS, JavaScript），能分析网页结构并提取数据
7. 具备一定的逻辑思维与数据敏感度，能快速理解业务需求。
8. 2年以上相关工作经验。
有如下经验者优先考虑
1. 熟悉 Hadoop/Spark/Flink 等大数据处理框架，有课程/实习项目经验。
2. 熟悉Python的常用框架和库（Flask、Pandas,Scrapy,Feapder,Selenium）。
3. 有数据抓取/数据分析相关实习或项目经验。
4. 熟悉HTTP、TCP/IP等网络通信协议以及数据抓包、分析;有一定的JS逆向能力，能解决普遍的移动端以及网页端加密问题。
5. 能构建稳健的抓取任务调度、分布式采集与监控告警体系