1、 负责多源数据采集（业务系统 / 互联网 / 传感器 / 合作伙伴数据）

2、负责对结构化数据（MySQL/Oracle）、非结构化数（HBase/MongoDB）、海量数据（HDFS ）做分布式存储。

3、实施数据清洗（去重 / 补全 / 纠错）、格式转换（类型 / 编码统一），保障数据质量。

4、运用数据挖掘算法（K-Means / 决策树 / Apriori 等）分析业务模式，输出可视化报告，

5、搭建大数据平台（Hadoop/Spark 生态），设计实时 / 离线处理架构（如 Spark Streaming）

6、监控平台性能，优化算法、参数及查询策略（如 Hadoop 任务调优 / Hive 索引优化）

任职要求：

1. 工作经验5年以上，其中至少有2年完成参与过的大数据的工作经验。
2. 熟悉至少一种主流编程语言（如 Python/Java/Scala），有扎实的编码能力。
3. 熟练掌握数据存储与管理或者数据处理与分析
4. 具备极强的团队协作能力和解决问题的能力。