工作职责：
1. 负责大数据平台的规划、建设及运维工作；负责数据仓库整体架构设计；
2. 负责大数据后端应用开发需求的分析设计、开发、实施，管理与维护，满足业务需要及确保系统稳定运行；
3. 负责建设基于Hadoop/Spark生态的大数据分析服务平台；负责hadoop、spark等环境性能优化调试；
4. 负责数据接入转换、存储、检索等组件化、工具化工作；负责平台数据存储、传输、任务调度系统的设计与研发；负责基于java、python、C++等的接口编写；
5. 负责文本分析、信息抽取等处理模块的设计与开发；负责文本数据的挖掘，包括数据的抓取、清洗、分类、对齐等；
6. 负责对业务场景中大规模数据进行处理、清洗，构建挖掘策略，深入分析数据价值；其他有关数据分析处理的设计与开发工作；
7. 参与模型建设方案编写、模型分析成果交流工作。
任职资格：
1. 本科及以上学历，计算机相关专业，4年以上开发经验，2年及以上大数据从业经验。
2. 熟悉分布式编程，精通JAVA语言程序设计，具有良好的架构规划能力。
3. 熟练掌握/Hadoop/Hive/Storm/Kafka/等技术；熟练使用dolphin/hue等工具,熟悉Flink/Spark；具备实际项目设计及开发经验。
4. 精通SQL，熟悉Mysql/Oracle等关系数据库；熟悉NOSQL，如Redis、Hbase、MongoDB等
5. 有Doris、Clickhouse 使用及性能优化经验者优先。
6. linux操作系统操作熟练，有能力进行复杂脚本（shell/PYTHON等）编程。
7. 工作态度端正，对技术充满热情具有钻研精神，有良好的问题分析和追踪能力，团队合作意识较好。