悦锦数科数据质量校验平台,高质量数据报送助力金融机构数字化转型
2023-07-17

一、政策背景

近年来,银保监会(现国家金融监督管理总局)高度重视监管数据的整体治理水平和质量控制机制。1月31日,上海银保监局办公室发布《关于开展EAST数据报送准备工作的通知(沪银保监办便函[2023]1号)》(简称《通知》,并转发了《银行业金融机构监管数据标准化规范(2021版)填报口径第四期)》(以下简称“规范”)的规范要求。对数据质量、数据标准化规范提出高要求。由于EAST5.0报送数据规范涉及范围广,数据质量要求高,银行业金融机构报送的数据质量存在数据不完整、数据结构不正确、数据不满足格式要求等问题。

中国银行保险监督管理委员会印发的《银行业金融机构数据治理指引》中明确银行业金融机构应将监管数据纳入数据治理范围,上报数据质量将直接与监管评级挂钩。

二、客户痛点

1.金融机构缺乏统一的数据质量管理平台,在统一监测、管理、分析、治理数据质量问题等方面落实有难度;

2.金融机构开展内部的现场检查、专项检查工作,耗时长、周期长、组织困难、全面落实到位难;

3.现有各类报送领域监管校验分散在各自的报送系统中,实现方式不统一,且都是单一解决各自领域的校验场景,缺少一个汇总、归类的平台;

4.现有校验大量耦合了业务逻辑,造成校验性能存在很大瓶颈,比如不能支撑超过1000万数据的业务场景;

5.现有校验配置不灵活,存在逻辑无法实现,只能通过硬编码解决。

三、悦锦数科校验平台

数字经济背景下,监管部门强化金融业数字化转型指导,监管趋严成为常态,监管数据建设与治理呈现出全局化、标准化、下沉式、跨应用的趋势。在严监管态势下,面对日益增多的监管报送内容以及频繁升级的监管制度,为满足银行业监管机构对于EAST报送数据高质量要求,悦锦数科以解决业务痛点为出发点,推出了校验平台,该平台包含了金融领域数据校验方法及校验系统,集分析、任务管理、日志管理、报表模板配置、校验配置等功能于一身。帮助业务部门及时发现问题、纠正问题、持续提升数据质量,从而避免低质量数据上报可能导致的数据上报返工或管理风险,同时为源头数据质量的不断提升提供依据。

同时,悦锦数科数据质量校验平台还拥有实现上述金融领域数据校验方法的数据校验系统,通过整合监管校验,实现监管校验配置,支持大数据校验,解决业务系统中针对数据量较大时的性能瓶颈,提供校验结果和校验质量报告,统一校验结果规范,能够便捷监控数据质量。

悦锦数科数据质量校验平台前端技术采用前端视图层采用TypeScript +Vue+SpreadJS+UI模板引擎,实现了ui多样化,开发灵活化,简便化,大大提高服务器系统吞吐量(TPS),界面更加友好,显示更加安全稳定可靠。后端技术:后台采用SpringBoot开发框架为基础,集成MyBatis-Plus等框架,实现了系统服务无限横向扩展(集群部署),以应对将来数据访问量的升级。

四、数据质量校验平台六大功能特点

1.数据分层

支持分库、分表;

2.分布式计算服务

  • 支持hive、支持presto
  • 支持分布式部署、调度、负载均衡;

3.数据源

多数据库支持:支持oraclemysqlsqlserverdb2等;

4.数据转换提取

支持悦锦数科 ETL、行方大数据平台、存储过程;

5.性能、部署

  • 支持亿级数据加载、亿级数据校验、亿级数据分析;
  • 支持单机jar部署(不依赖行方数据库等环境)、war部署、集群部署。

6.监控、日志

服务监控、硬件监控、异常预警、日志分级、日志检索。

五、数据质量校验平台优势

六大平台优势

  • 近七千条校验规则、规则持续化增加,支持自定义。支持数据关联性分析及比对;
  • 支持第一时间响应监管数据校验规则库;
  • 支持监管指定的各类校验结果报告及质量报告;
  • 具备数据格式化校验、关联性校验、内容校验、业务校验等能力;
  • 支持自动化校验、可视化校验结果展示,可区分业务条线,协助银行快速定位错误数据;
  • 支持数据校验质量对比和可视化结果分析。

五大增值服务

1.监管报表类校验

加强EAST数据、1104数据、客户风险数据等监管数据与行内业务系统数据的交叉校验。与1104校验范围包括:G01G0101G04G0102G1102G12G13G34等。

2.总分校验

支持总账、分账之间的数据关联性分析和比对。

3.个性化定制校验

根据行内自身情况、业务特点、系统特点及系统配置进行个性化配置校验。

4.银监专项校验

各地银监专项校验规则,紧跟监管步伐,时刻关注监管检核新动向。

5.自定义业务校验

悦锦数科根据数据业务特征、数据间的业务逻辑、业务间的关联性、丰富的银行业务经验等为支撑,通过EAST5.0报送数据结合自定义业务校验逻辑对数据质量进行检核。帮助业务部门及时发现问题、纠正问题、持续提升数据质量,从而避免低质量数据上报可能导致的数据上报返工或管理风险,同时为源头数据质量的不断提升提供依据。

六、客户案例

某外资法人行数据质量校验平台项目

需求背景:

EAST报送数据规范涉及范围广,数据质量要求高,银行内部业务数据及报送数据质量普遍存在一些问题,迫切需要提升报送数据质量及业务数据质量,从而避免数据质量问题导致的上报返工或管理风险。同时也能满足未来数字化转型所需的高质量数据要求。

解决方案

  • 通过导入报文数据,至数千条数据校验规则的数据质量校验平台中,导出各类校验结果报告及质量报告;
  • 支持自定义规则设定,上线前协助行方对个性化业务场景开展分析工作;
  • 可视化校验结果展示,协助银行快速定位错误数据及错误业务条线;
  • 支持数据校验质量对比和可视化结果分析。

客户收益

  • 提高报送数据质量及业务数据质量;
  • 防范数据质量问题引起的管理风险;
  • 方便银行开展数据质量管理工作,提高工作效率,快速匹配错误数据及错误数据涉及的业务条线;
  • 为未来数字化转型提供坚实的基础。

七、关于我们

悦锦数字科技(上海)股份有限公司是一家金融行业知名的金融监管与合规软件解决方案提供商。20138月成立,深耕监管科技领域10多年,为全球领先的金融机构提供覆盖监管数据治理、数据集市、风险与合规管理、征信、反洗钱及流动性风险控制等全流程一站式监管合规咨询及软件解决方案。

210+ 国内外金融机构客户

80% 外资银行客户市场占有率

50个 监管及行业专家团队

10年 监管科技领域经验

欢迎联系我们400-921-0806