工作职责:
1、针对产品的PRD文档涉及到技术进行前期可行性调研分析；
2、参加需求评审和测试用例评审；
3、根据评审结果，进行开发排期；
4、根据评审结果进行分层模型设计；
5、ETL代码编写；
6、根据数据需求周期设计调度定时任务
7、根据实时业务需求，负责实时计算流程设计；
8、负责实时流计算开发；
9、日常任务监控工作，并保证日常任务正常运行；
10、负责对相应失败任务进行恢复运行；
11、对其它部门提供支持请求进行及时响应；

任职资格:
1、3年以上相关领域工作经验，统计、数学、计算机、金融工程等相关专业本士及以上学历；
2、熟悉Python,有全面的Python语言使用基础和开发经验，良好的Python环境下数据结构经验,如pandas、numpy，对Django框架有一定有了解
3、掌握分布式存贮如HDFS的原理、掌握数据湖相关组件运行原理如Paimon、Hudi；
4、Hadoop技术栈有一定的了解,熟悉Flink多流join实时计算、Spark sql离线计算。
5、能够综合运用消息组件kafka、缓存数据库redis进行协调工作
6、良好的沟通能力、数据处理能力、工作规划能力；
7、工作主动性强，有良好的团队协作意识，有较强的抗压力；