岗位职责:
1.设计和实现高效的大数据处理方案，包括ETL。
2.使用Java和相关大数据技术开发可扩展的数据处理应用。
3.优化数据处理流程，提高系统性能和数据质量。
4.解决大数据相关技术难题，持续改进系统架构。
5.开展技术选型验证、核心技术问题攻关。
任职要求:
1.具备扎实的专业基础，如计算机体系结构、操作系统、计算机网络等。
2熟悉大数据生态相关技术，如Hdfs\HBase\Hive\Spark\Kafka\Flink\ES等 。
3.具备扎实的Java开发基础，熟悉Java生态常 用框架与技术。
4.熟悉SQL与NoSQL数据库技术。
5.具备良好的问题解决能力和创新思维。
6.良好的团队合作和沟通能力。
1.有万亿级、PB级数据处理实战经验;
2.有安全行业从业或研究经历;
3.熟悉Elastic Stack系列工具;
4.对机器学习深度学习神经网络AI等技术有研究或者有从业经验: