工作职责：
1、负责基于大数据平台的数据处理和存储平台建设；
2、负责分布式存储系统构建和智能搜索引擎；
3、负责分布式数据平台框架下数据系统开发与新数据应用开发架构研究；
4、理解用户数据统计、分析和挖掘应用场景，抽象为数据产品需求，不断完善基础数据平台的建设；
5、负责大数据实施过程中相关技；术问题解决，包含数据采集、数据接入、数据迁移、数据转换、数据安全；
6、完成与工作相关的技术文档编写工作。
职位要求：
1、具备较强的数据敏感度以及数据抽象能力；
2、熟悉Java及相关大数据架构技术，特别是ES搜索引擎，具备良好的编码素养和习惯；
3、熟练掌握至少一种脚本语言，如Python、Shell等；
4、2年以上Hadoop项目或平台实际研发经验，如Zookeeper/HDFS/Hive/HBase/Spark/Impala/Gobblin/Flume/Kafka等其中一个或多个 ，以及GreenPlum，图数据库和搜索引擎；