岗位职责：
1、负责梳理公司现有数据，整合归集公司各业务条线数据，搭建公司大数据平台；
2、负责大数据管理平台的开发及维护，大数据平台数据及相关的应用开发、调优及维护；
3、负责大数据分析需求设计和开发，承担数据抽取、清洗、转化等数据处理程序开发；
4、协同AI大模型、业务项目团队人员，提供数据开发支持及解决数据应用中的相关问题。
任职要求：
1、计算机相关专业本科及以上学历，2年以上大数据应用开发经验；
2、熟悉Linux系统环境，有shell等脚本编写经验，熟悉Mysql、Oracle等常用关系数据库，熟练编写SQL语句；
3、熟练掌握Java或Python编程语言，有良好的编程风格；
4、熟悉大数据架构体系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技术中的一个或者多个；
5、熟悉大数据平台的搭建过程，熟练使用Spark，Flink处理TB级数据优先；
6、具备ETL开发与运维能力，熟悉离线和实时数据处理流程，熟悉Sqoop、DataX等数据导入工具，并有实际的项目开发经验；
7、良好的团队合作与沟通能力，有证券行业大数据开发经验者优先。