兴业银行信用卡实时数据应用架构体系的设计与实践

建设背景

随着金融行业市场的快速变化和信用卡业务的飞速发展，离线数据已难以覆盖信用卡运营、风险防控和营销开展等诸多复杂场景需求，当前对应用数据的时效性要求越来越高，实时数据的处理及应用迫在眉睫。建设一套稳定高效的实时数据应用架构体系，是支撑和保障信用卡业务数字化转型和高效发展的关键。

目前，实时数据应用架构在同业中已有较为成熟的实践。兴业银行信用卡中心近年来积极探索创新，借鉴同业经验，结合业务实际发展需要，基于大数据技术、微服务架构，构建了一套实时数据应用全流程的架构体系，涵盖实时数据采集及消费模块、实时数据加工处理模块、实时数据对接渠道端投入应用的模块，打通了业务数据从生产到消费使用的实时高效链路。兴业银行信用卡的实时数据应用架构体系为业务开展提供及时、新鲜、全面的经营数据，以数据不断驱动业务创新，推动精细化运营管理。

系统整体架构

兴业银行信用卡实时数据应用架构体系（见图1和图2）从下到上一共四个模块，分别是实时数据采集层、实时数据处理层、实时数据存储分析层，以及实时数据应用层。首先，通过实时数据采集层的数据库实时采集、实时消息推送或者实时API采集等多种方式，采集获取数据源端的实时数据；再经由实时数据处理层通过Flink、SparkStreaming等流式计算引擎对数据进行实时加工处理；然后，将处理完的数据实时写入到Doris集群、HBase集群等，在实时数据存储分析层对数据进一步加工分析；最后，在实时数据应用层将加工出的实时数据成品通过数据API联机查询服务、实时消息推送服务，对接渠道端，投入业务应用。各层模块之间紧密联系、高效配合，极大缩短了数据从生产源头到