岗位职责

1、 数据采集开发：设计并开发目标数据的自动化采集并解决采集对抗相关问题，确保数据获取的稳定性和效率；

2、 数据清洗与存储：对采集的原始数据进行清洗、去重、结构化处理，构建高质量数据仓库；

3、 数据挖掘与建模：基于业务场景构建数据分析模型，应用机器学习/自然语言处理技术挖掘数据价值。

任职要求：

1、 具备数据分析相关工作经历，本科以上学历，统计分析、大数据等相关专业背景；

2、 熟悉关系数据库，熟练运用SQL，有丰富的数据分析、挖掘、清洗和建模经验，可以设计实现数据分析模型；

3、 熟练使用JAVA/Python，能独立实现数据分析系统,有丰富的脚本处理数据经验；

4、 熟悉存储设计与优化，熟练使用NoSQL数据库如Redis等

5、 掌握分布式并行计算框架，包括Hadoop、Hive、Spark、流式计算、实时计算等大数据相关技术；

6、 熟悉知识图谱、图数据库，有图谱分析工作经验者优先；

7、 熟悉自然语言处理基础技术，有文本处理检索、NLP领域相关工作经验者优先；

8、 具备独立工作能力和解决问题的能力，具备高度自驱力，沟通协作能力优秀，对业务数据敏锐，逻辑严谨，热衷新技术。