岗位职责：
1.与用户有效沟通大数据平台技术方案.项目计划和进度等，获得客户支持和认可；
2.正确理解、有效分析和管理用户大数据平台需求；
3.参与大数据平台的集群规划、部署、运维和优化工作，
4.参与和支持数据清洗、数据加载、流程调度、业务质量保障等工作
5.独立完成工作过程中问题定位、解决及复盘；

专业知识：
1、熟悉hadoop生态体系，具备hadoop集群运维经验
2、熟悉linux系统，熟悉shell、Python任意一种脚本语言。
3、熟悉hdfs、hbase、hive、flume、kafka、spark、yarn、ELK等主流大数据组件。