京公网安备 11010802034615号
经营许可证编号:京B2-20210330
如何才能将蕴藏于大数据内的潜能全部释放出来
如果没有适当的信息治理机制作为支撑,企业很可能与有价值分析结论失之交臂。
早在近三十年前,Sam Walton在创建沃尔玛这一全球零售巨头企业时就已经确立了大数据技术兴起的必然性。沃尔玛利用商品条形码收集复杂的消费者信息,这不仅为其带来了巨大的商业及市场竞争优势、同时也使沃尔玛成为了数据管理领域的先驱者。时至今日,Facebook、谷歌以及Amazon等企业都开始利用面向数据的收集、汇总以及分析机制帮助自身制定商业战略。如此一来,他们能够更具说服力地将大笔资金投入技术及流程方案,进而更透彻且更及时地掌握消费者购买模式并理解客户及用户的观点与情绪动态。在此基础上,数据分析技术帮助这些企业优化促销活动、改善客户体验、提升产品组合并迎来更多其它极具竞争优势的显著收益。
由于具以上种种切实回报,很长一段时间以来大部分企业开始纷纷推出自己的“大数据”技术举措。不过就当时的情况看,只有其中极少部分能够提供必要的资源来创建出真正的数据驱动型运营体系。然而时至今日,大数据解决方案的实施成本已经进入合理区间,这意味着来自不同行业、各种规模的企业——包括公共事业部门——都能够从大数据及分析机制当中获得收益。换句话来说,这是一场新时代下的竞赛,比的就是谁能更充分地利用数据内的有形价值并借此获取竞争优势。但话说回来,大家的企业真的已经准备好迎接数据泛滥这一新难题了吗?残酷的现实告诉我们,答案很可能是否定的。
大部分企业所采用的都是复杂性较高的异构分布式运营模式。在组织机构内,各种举措独立推出、技术各自部署、信息逐条收集。我们几乎很少看到一种具备集中性与统一性的数据收集方案,这意味着企业陷入了由大量非连接信息存储体系所构成的迷宫当中,而且这些信息几乎很难以有意义的方式加以共享。企业中的某个部门也许根本不知道其它部门到底在使用哪种信息管理机制,这将直接导致其在处理合规性与记录保存问题时遭遇资源浪费、政策一致性缺失以及流程重复等弊端。此外,企业收集的信息总量越大,这一问题就越严重、越具破坏性。
我们不妨考虑可能由此带来的难题,如果一家企业打算收购另一家完全使用不同类型CRM与ERP系统的公司,那么结果会如何?大量内容重复的联系人数据库可能带来数量庞大的非必要通信,并令客户对企业的能力及水平产生怀疑。由于对于存储在被收购对象的CRM及ERP系统中的信息内容缺乏了解,买方公司很可能会在收到发现请求时忽略掉这类系统。同样,一旦政府给出管理要求发生变化,买方虽然有意认真将其贯彻到收购对象的数据当中,但却可能受到数据认知水平的限制而无法被全面覆盖、进而带来潜在的违规可能性甚至因此面临罚款。最后,由于拿不出切实可行的方案可清理不必要的信息——也就是所谓“数据碎片”——那么法律条款与合规性要求也就得不到保障,这意味着收购方与被收购方将把一切原有信息保存起来。这不仅会从基础设施构建及维护成本的角度带来高达数十万美元的巨额资金浪费,同时也使企业客户更难找到自己所需要的高价值信息。
要应对上述难题或者其它更为复杂的状况,最理想的解决方案在于采取全面的信息管理机制,从而在业务、法律、合规与IT等部门的不同需求及流程之间找到平衡点。要实际这个目标,企业需要以自上而下的方式来开发出一套信息治理(简称IG)规程。
信息治理
信息治理规程的目标非常简单,但其实现过程却往往没那么容易:
将信息的全部相关者纳入考量,包括商业用户、法务人员、信息管理记录(简称RIM)、隐私与安全以及IT部门等等,并将其整体创建为一套单一的集中化规程。开发必要的流程并部署必要的技术方案,从而改进数据质量、评估现有以及新型信息技术能够为利益相关者带来的实际价值。其中必须包括能够遵循法律及合规要求的信息识别及保留机制,且需要符合各类新型隐私条例对于信息管理的要求。消息数据孤岛并缓解其彼此之间的沟通障碍,从而保证以集中化方式进行信息管理。在整个企业体系内部创建一套面向信息资产的通用型参考词库。随着信息生命周期的推进、其访问需求也将不断下降,因此需根据实际情况将信息移动至成本较低的存储层。根据企业运营所在司法辖区内的适用法律条款指导数据片段的管理事务。在大多数企业当中,人们可能并不认同这类任务繁重的协调性尝试以及对新型技术方案的投资决策,这往往导致相关项目预案遭到冷遇甚至无疾而终。但是从历史角度来看,无所作为才是风险的主要根源,而成功的信息治理规程需要在企业内得到高层管理团队的直接支持。考虑到这一点,许多企业正在积极物色优秀的首席数据官(简称CDO)——这一职位通常负责领导大数据相关项目——并由其担任信息治理计划的主要推动者。
将信息治理工作纳入CDO权限极具实际意义。毕竟,CDO的最大愿望就是从数据分析工作中获得精确可信的结论,而质量糟糕的数据将使这一切成为空谈。作为高管团队中的一分子,CDO是理解信息治理实际需求并将其纳入企业文化体系的最理想人选。成功的信息治理项目绝不仅仅是提供必要的技术与流程方案。让相关人员为其所创建的信息负责才是将信息治理性转型真正贯彻到整个企业当中的根本性前提。
目前人们已经开始越来越多地对这一观点表示认同。举例来说,根据Gartner公司发布的一篇新闻稿,Gartner将CDO职位定义为“一位负责打理企业内整体数据与信息战略、治理、控制、政策发展以及高效运用等事务的高层领导者。CDO这一角色需要负责信息保护与隐私、信息治理、数据质量与数据生命周期管理等事务,并切实将数据资产转化为商业价值。”
那么这是否意味着担任CDO的人选必须拥有信息治理工作背景?这倒不一定。尽管这样的背景积累确实值得肯定,但其并不足以证明该CDO在其主要分析工作中已经切实了解到信息治理的价值所在。输入分析引擎的数据的实际质量决定着最终输出结果以及据此制订出来的决策的准确性。简而言之,高质量输入才能高质量输出(简称QIQO)。作为CDO,他们需要掌握信息治理机制所能带来的价值与效益,以领导者身份将合适的团队与技术方案落实到位(或者与现有团队进行协作),只有这样才能最终迎来成功。
在非数据驱动领域当中,企业中的高层管理者们往往纯粹凭借着自己的智慧与洞察力进行工作,并借此克服措施不力、信息质量低下或者质量内容不一致等负面因素的束缚。但如今情况已经不同于以往。企业无法在大数据时代之下凭借依靠着差距显著而且管理不善的数据基础设施继续茁壮成长。如果能够让CDO切实成为信息治理工作的负责人——甚至是个中大师——那么无论是CDO本身还是所在企业都将获得巨大收益。请不要犹豫,马上行动起来。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19在零售行业大数据分析与精细化运营领域,纸尿裤旁摆放啤酒是最经典、最具代表性的商业案例。两种看似毫无关联的商品,一个是婴幼 ...
2026-08-19 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-08-19在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17在Python数据清洗、文本校验、账号密码规则校验、脏数据过滤、字符串规整化处理中,正则表达式是最高效、最常用的文本匹配工具。 ...
2026-08-17 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-08-17手游行业具备用户迭代快、竞争激烈、用户粘性易流失的典型特征。随着新游持续上线、玩家审美升级、玩法疲劳等问题出现,存量用户 ...
2026-08-14在数字化产品运营、商业数据分析、业务增长管理中,零散的指标统计无法支撑系统性的业务决策。单一的点击率、转化率、销量数据只 ...
2026-08-14 很多数据分析师每天都在写SQL,但当被问到“数据查询语言(DQL)的本质是什么”“SELECT语句中各子句的书写顺序与实际执行顺 ...
2026-08-14在数据库数据分析、数据清洗、报表统计与业务查询场景中,日期时间是最高频、最核心的基础字段。数据库中存储的日期格式多样,包 ...
2026-08-13在数据统计分析与数据清洗工作中,箱线图是一种简洁高效、客观性强的数据可视化图表,能够直观呈现数据集的分布特征、离散程度和 ...
2026-08-13 很多数据分析师写过无数个SELECT查询,但当被问到“如何新建一张表来固化中间数据”“创建视图和创建物理表有什么区别”“视 ...
2026-08-13在自动化办公、数据采集、定时统计、日志清理、系统监控等场景中,程序往往需要按照固定时间间隔重复执行指定任务,这种运行机制 ...
2026-08-12在数据分析日常工作中,Excel数据筛选是数据清洗、数据提取、样本筛选的核心基础操作。传统Excel手动筛选、函数筛选方式,面对多 ...
2026-08-12 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-08-12在数据分析、统计建模、数据挖掘与商业调研过程中,原始数据往往无法做到绝对干净规整。受系统故障、人工录入失误、设备误差、突 ...
2026-08-11在数据分析工作中,聚类分析是典型的无监督学习方法,核心作用是依据数据自身的多维特征,将相似样本自动划分为若干类别,实现“ ...
2026-08-11