部门
金融科技部
中心
数据企管研发中心
岗位
软件研发岗(数据开发方向)
岗位职责
1.负责大数据平台实时计算的技术落地及平台提升;
2.负责建设大数据平台数据实时接入服务,建设大数据平台的元数据信息服务,实现多源、异构化原始数据的元数据发现等能力。为上层计算,分析与建模提供数据基础能;
3.负责围绕实时计算引擎原生产品技术Flink,Spark,构建面向大数据应用场景的实时计算能力服务能力。实现流式与实时计算支持行内统一大数据平台数据实时接入的数据一体化能力;
4.负责实时计算全平台的稳定性建设和保障,构建面向平台和用户的稳定性管控能力,包括全链路,自动化,自助化的监控,日志,报警,诊断能力;
5.负责实时计算引擎的底层存储的维护和开发,打造稳健的消息总线,索引存储,以及大规模的键、值存储引擎,保障实时计算的底层技术建设的稳定性,可靠性。