岗位职责:
1.为海量数据的处理和分析提供高效解决方案;
2.研究Hadoop/Spark/Hbase/Hive等开源项目,对线上任务进行调优,并开发通用组件;
3.维持线上服务高效稳定,支撑业务和数据量的快速扩张。
4.熟悉Elastic Search.熟悉kafka 的工作原理和应用方法。
5. 对数据仓库、数据中台有深入理解,并有丰富的实操经验
6. 熟悉文本数据的存储和处理,对标签体系有深入的理解。
任职要求:
1.扎实的计算机系统和算法基础知识;良好的英文阅读能力;
2.扎实的Java、Scala语言基础,对JVM运行机制有深入了解;
3.熟悉Hadoop、Spark并有丰富的开发经验;
4.对常见开源框架代码有研究;
5.熟悉SQL和noSQL的设计和开发;
6.熟悉企业应用设计模式、面向对象的分析和设计技术,包括设计模式、UML建模等;
7.善于思考,能独立分析和解决问题,热衷于互联网技术的研究和创新;
8.责任心强,具备良好的团队合作精神;
9.有深入研究过Hadoop/Spark源码者优先。
10.对elastic search 有深度了解。