京公网安备 11010802034615号
经营许可证编号:京B2-20210330
谈谈银行业的数据治理
数据价值链螺旋受阻
在我们对数据利用提出迫切需求的过程中,许多深层次的数据问题其实已经开始逐步暴露,例如,数据认责不明导致数据源头录入质量不高,数据标准缺失导致统计口径混乱,整体数据质量缺乏有效的监控和管理等等。
数据已经成为企业的资产,但是很遗憾的是它本身并不能直接产生价值,这也是大数据这么火但是很少有企业能够充分发挥数据的价值的原因。要明白如何让数据成为生产力,我们必须理解数据、信息、知识和智慧之间的关系。
数据:它是一种将客观事物按照某种测度感知而获取到的原始记录,未被加工解释,不能回答特定问题,它与其他数据之间也没有建立相互联系,是分散和孤立的。信息:对数据进行加工处理之后,是数据之间建立相互的联系,形成回答某个特定问题的文本,以及被解释具有某些意义的数字、事实、图像等形式的信息。知识:是知识工作者运用大脑对获取的信息进行系统化训练和提炼、研究、总结和分析之后的结果,知识能够精确的反映事物的本质。智慧:在已有的知识的基础之上,对信息进行分析、对比、演绎并找出有价值的部分,并将其深化到已有的知识框架中,则上升为智慧。
这是个螺旋上升的过程,其实也是我们数据产生价值的过程。在这个过程中,最重要的一步是将数据转化为信息,这一步做的成果的好坏,直接关系到整个数据价值链的成败。也就是说,要想让数据成为银行的生产力因素,就必须将数据治理放在全行战略的高度。
数据、信息、知识和智慧示意图
在帆软银行顾问近几个月走访江浙区域银行的过程中,能听到的一个明显的声音是,大家都知道数据的价值,也都能够发现数据质量对发挥数据价值的阻碍,但是当领导提出数据治理的期望时,科技部往往面面相觑。
大多数的科技部门对于数据治理还是停留在缺失数据补充,错误数据清洗等具体的事情上。诚然,这些具体的措施都是数据治理的一部分,但很遗憾这样的工作是没办法实现全面的数据治理的,也没办法通过这样的数据治理将数据应用和挖掘提升一个层次。
我国银行数据治理现状
经过多年的信息化银行的建设,我国各家银行积累了海量的、丰富的数据资源。在当今大数据时代,数据本身非常重要,其潜在资产价值对于银行而言更为关键。未来最善于利用数据分析来引导决策、控制风险、进行产品创新的银行将获得更多新的竞争优势。
帆软银行顾问了解到,当前很多银行纷纷将数据治理提上了日程,开展了一系列持续的治理工作,在业务发展模式上更加注重数据的管理提升和内部挖掘潜力,并取得了一定的成就,比如基本统一了全行编码规则,初步实现了客户和产品的主数据维护等。但是现阶段银行的数据治理还是存在管理维度、核心领域和技术维度三个层面的难度,要解决困境就需要对各个层面的问题进行分解、逐个突破。
在推进精细化管理和建立分析挖掘平台方面,银行的数据还存在数据基础薄弱,数据不完整不一致的问题。总结来看,当前我国银行特别是农商行体系数据治理存在的问题主要包括:
1.缺少数据治理企业文化
银行数据治理是一项庞大而复杂的工程,需要各个部门之间,尤其需要加强科技部门和业务部门之间的合作,才能最终高质量、高成效的完成数据治理工作。全行企业文化的建设必须考虑到数据资产管理这个层面,从战略角度启动 、开展和推进数据治理工作,建立一种以数据资产为导向的企业文化,将数据治理、科技治理和公司治理有机的结合起来。
2.没有完善的组织和制度
随着数据治理工作逐渐被重视,银行内部已离不开一个企业级的数据治理职能组织。目前,多数商业银行的数据治理组织和制度由科技部门牵头,整个组织体系业务参与度欠佳,但从数据问题分析的结果来看,业务部门是产生数据的最初、最大来源,数据治理的目的是使银行业务更好地被经营和管理,所以也需要业务部门对数据治理工作进行重视,深入参与和主动负责,保证数据治理的真正落地。
3.未建立数据治理流程和有效的认责管理制度
当前,使用数据的部门因具有明确的、迫切的数据需求,而成为处理问题的主要推动者。但是,在一般情况下,由于没有完整的流程管理机制,在推动工作中会出现以下问题:
(1)不同领域的数据分布在不同的系统中,并由不同的部门负责管理,当需要进行夸领域、跨系统的数据治理工作时,会出现沟通成本高,协调难度大的问题。
(2)解决数据问题时仅从局部考虑,为解决当前紧急问题,较少考虑数据复用和共享机制,不利于后续的系统整合工作。
(3)数据问题解决后,较少进行跟踪管理和规范治理,后续的认责机制不健全,不利于体现数据治理的重要性和必要性。
4.缺少数据治理各领域的管理体系
(1)缺少企业级数据标准管理体系。
虽然银行拥有了大量的数据资源,但是,也经常面临重要数据缺失,系统间数据不一致,统计口径和加工方法不一致,导致数据可信度降低的问题。深入分析后发现,出现这种现象的原因为缺乏有效的数据标准化。
(2)缺少企业级元数据管理体系。
目前,我国大多数银行的元数据管理仅限于少数系统和少数用户,尚未达到体系化的程度,也存在完备性不足的情况。
(3)缺少企业级数据质量管理体系。
数据的质量对银行业发展尤为重要,并且银行对数据质量的治理重视程度会直接影响数据治理的成效。银行的数据质量管理应当涵盖数据质量问题的防范、识别、度量、分析、监控、清洗等管理活动,以满足对数据质量的要求。
(4)缺少完备的数据生命周期管理体系。
当前我国银行大部分在系统无法支撑时才考虑数据清理备份的工作,难以做到对数据生命周期的统筹管理,并且对支付数据生命周期管理的系统和工具建设力度不够,不能很好的支撑全行数据生命周期管理工作。
(5)缺乏完善的系统支撑和技术手段。
现代的银行系统数据量庞大,各式系统多种多样,如果不依赖技术手段,没有相应的支撑平台和工具,就不可能理解如此庞大的数据量和看到其潜在价值。
要想达到数据开发、共享、使用和管理的全方位良性循环,就必须建立起全行级别的数据治理体系,整合行内人才资源,制定相应的管理制度和文化体系,完善数据治理流程管理,利用好科技力量进行各项工作支撑。
建立银行数据治理体系
做好数据治理是一项复杂、长期、系统性的工程,涉及思维、方法、组织、系统工具等多方面要素的综合运用。为了满足企业内部的信息使用需要,一般会通过成立专门的数据治理体系来保证数据的可用性、可获取性、高质量、一致性以及安全性。下面将对银行的数据治理体系架构进行介绍:
基于数据治理时代浮现的诸多机遇,以及面临的一系列问题,我们对商业银行数据治理体系进行研究分析,发现银行的数据治理体系也是一个金字塔结构,依次为战略、机制、领域、技术支撑,从上至下指导,从下而上推进,形成一个多层次、多维度、多视角的全方位框架,如下图:
商业银行数据治理体系
战略:需要进行目标和规划的蓝图设计,将数据治理提升到全行经营战略地位。机制:需要建立健全组织、制度、角色和流程等四个方面的机制,进行全方位可持久的数据治理工作。领域:数据治理的具体领域包括元数据、数据标准、生命周期管理、数据模型、数据存储、数据分布、数据交换、数据集成、数据服务和数据质量管理等内容。技术支撑:数据治理需要在技术层面对上面的各个领域进行管理和支持,比如有数据质量分析、数据建模工具、数据清洗工具、生命周期管理、质量检查工具、数据管理系统等。
从商业银行数据治理体系的金字塔结构可以看出,实际上银行的数据治理体系包含两个层面:一是数据治理核心领域,二是数据治理的保障机制。战略、机制及各领域的技术支撑是商业银行进行数据治理的全面概貌。其相互关系如下图:
商业银行数据治理的保障机制与核心领域
数据治理包含保障机制和核心领域两个部分,他们之间相互支撑,共同保障数据治理的全过程管理。保障机制提供制度和战略力量的支持,明确了组织架构、制度章程、流程管理和及时应用,用来规范数据治理的各个核心领域标准化实施;数据治理的核心领域提供了全方位的数据治理视角,从各个层面各个维度进行数据质量保障,通过相应的系统和技术对战略目标进行支撑和落地,两者之间应该是紧密配合的。
总结
从上面的介绍我们知道,数据治理的过程就是建立数据治理保障机制和完善数据治理核心领域的过程,这两个方面相辅相成,保障机制是数据治理的战略指挥,核心领域是数据治理的枪支弹药,要打好数据治理这场持久战,就必须双管齐下进行建设。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 四层结构 · 零件与房子 · 六大易错点 一、什么是指标体系 定义:指标体系是整套完整框架 ...
2026-10-13写在开头 先还原一个你大概率见过的场面。 立项会上有人说:我们得做用户画像。 于是团队关进会议室,白板写满便利贴,两小时后 ...
2026-10-13 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-10-13在统计学与数据分析研究中,相关性分析分为数值变量分析与分类变量分析两大类。针对身高、销量、分数等连续数值变量,通常采用皮 ...
2026-10-12在Power BI可视化分析体系中,常规表格仅能展示枯燥的数值数据,存在数据对比不直观、强弱规律不突出、维度交叉分析低效等问题。 ...
2026-10-12 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-10-12在传统零售行业同质化竞争激烈、大众营销转化率持续走低的背景下,依托经验与直觉的粗放式营销逐渐失效。美国塔吉特百货(Target ...
2026-10-10随着智能客服、数字化服务、用户精细化运营的快速普及,传统零散、非标准化的客户服务数据与业务体系逐渐难以支撑高效服务治理。 ...
2026-10-10 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-10-10CDA数据分析师 出品 作者:李诗怡 定义区别 · 场景举例 · 指标分类 · 计算方法 知识体系总览 模块 包含内容 一、核 ...
2026-10-09在数据分析工作流中,业务数据大多存储在各类关系型数据库内,例如MySQL、PostgreSQL、SQLite等。Pandas是Python生态中主流的数 ...
2026-10-09在数字化精细化运营时代,海量用户存在需求差异、行为差异、价值差异与偏好差异。如果企业采用“一刀切”的统一营销、统一服务、 ...
2026-10-09 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-10-09指标体系是企业数字化分析、业务监控、经营决策的核心基础框架,是将零散数据转化为可衡量、可对比、可落地业务价值的关键体系。 ...
2026-10-08随着市场竞争日趋饱和,同质化低价竞争逐渐陷入内卷僵局,传统以价格、渠道、促销为核心的营销模式边际效益持续递减。在此背景下 ...
2026-10-08 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-10-08你有没有想过,手机里点外卖、刷社交软件、转一笔账,背后到底是谁在替你"记着账"? 答案其实很简单:数据库,以及跟它对话的那 ...
2026-10-07CDA数据分析师 出品 作者:李诗怡 一、数据分析四大思维 1. 对比思维:没有对比就没有分析 核心观点:单独一个数字没有意义,有 ...
2026-10-05Kimball 是方法,星型模型是它产出的形状。 很多人把"Kimball vs 星型模型"当成一道选择题——这本身就是个误会:Kimball 是动词 ...
2026-10-05写在开头 老板在微信上甩来一句: "帮我看下为什么销量跌了。" ” 你回工位,打开 SQL,开始写。查订单表、拉近三个月、按 ...
2026-10-03