京公网安备 11010802034615号
经营许可证编号:京B2-20210330
成功数据分析所面临的5项挑战_数据分析师考试
怎样才能使企业升级到一个新的水平,并开始一个大数据发展战略的部署呢?本文将介绍企业成功实现大数据策略所需要克服的5个关键挑战问题:
大数据将增加企业对IT部门的依赖
在过去几年里,IT部门在企业中的重要性越发突显,而在未来几年,我们将看到,随着物联网和工业网络的出现,许多目前未连接的设备将变得数据化,并开始产生大量数据。而对于那些仅仅只开发线下产品,仅仅利用IT进行企业的网站建设的企业来说,这将意味着一项重大的变革。在未来几年,IT部门将成为企业所有业务部门的核心部分。大数据将以不同的工作方式渗透和影响到企业内的所有部门。
所以除了能够访问数据,大数据项目将成为企业不同部门的重要组成部分,因此各个业务部门也将需要他们自己的IT员工。对于多数企业,IT部门将成为企业中的一个更为重要的组成,那些目前仍然只是开发线下产品的公司而言,这无疑是他们将需要克服的一个重大转变。
大数据的商业案例难以从一开始就确定
几乎在任何企业,在一个大数据项目开始部署之前,先建立一个商业案例都是非常重要的。然而,大数据项目所面临的挑战是确定其投资回报率(ROI)是相当困难的,因为大数据项目需要投资新的硬件和软件,并采用一种新的工作方式。在任何行业内地任何企业,大数据带来了不同的可能性,其结果也必然会不同。为了能够确定投资回报率,企业应该启动一个试点项目,其也可以被当作是一次经验的学习,以便能够在以后的大数据项目中提供相关的ROI遵循见解。
因此,企业所需要克服的挑战是,在一个大数据项目完成之前,很难确定其有效的投资回报率的。但是,没有一个明确的投资回报率,又会使得大数据项目的执行变得相当困难。为了克服这一挑战,企业最好从一个小的、定义良好的试点项目开始着手,将该试点项目视为本身不会带来投资回报的项目,但您会从中学到很多关于大数据对于您企业的意义。通过您企业在试点项目中所取得的经验,并吸取相关的教训,进而可以用来更好地确定企业未来大数据项目的ROI。
企业内的数据通常存储在筒仓
为了充分利用大数据,企业需要将所有不同的数据源的数据进行合并。虽然大数据的特性之一便是其庞大的数据量,而其正是来源对对海量数据进行合并的结果。大数据发展的趋势便是成为混合数据。然而,问题在于,如果一家企业内的不同部门分别进行数据收集(毕竟,各部门单独进行数据收集是最有可能做到的)这会造成使企业内的数据难以共享的局面,尽管很可能并不是故意的。以耐克公司为例,该公司曾经在整个企业范围内进行数据储存,从而限制了可以用数据来完成的工作。然后他们去掉了筒仓将所有数据合并到一个中央平台,所有员工均可以基于其职位角色访问。这使耐克保持了创新,进而保持了领先于竞争对手的优势。
除了企业内的数据仓,企业也应该注意外面的世界,并开始思考可以使用的新的数据集。结合开放的社交媒体数据和公共数据可以提供很大的启示和见解。企业在开发一个大型数据策略时,应该开始跳出企业范围内进行思考,不要让并没有自己被限制在企业内的数据。
保证客户的隐私,同时充分利用现有数据
在斯诺登事件之后,隐私泄露的问题似乎已经是过去的事了,但如果企业那个妥善处理他们的数据,这其实也并不构成太大的问题。隐私权仍然是消费者的一个非常重要的权利,而且应该得到保护。企业应努力在寻求利润最大化和客户隐私数据使用之间的平衡。
为了做到这一点,企业应该公开透明的告知他们的客户,他们收集了客户哪些方面的数据,为什么要收集、存储和分析这些数据。另外,企业应该尽可能简单的让客户明白:企业收集和调整了哪些数据,以及数据是如何被使用的。最后,数据的安全性应该是企业的关键,企业应该做些什么才能防止数据泄露。在过去几年,我们已经看到太多的数据泄露对消费者的隐私带来的负面影响。
在保护客户数据的隐私和获得收集分析数据的回报之间取得适当的平衡是困难的,但在长期而言,如果您的企业成功地保护客户的隐私,收集分析数据的回报肯定是可观的。
大数据项目需要文化的转变
在许多企业中,有一些不相信数据的力量的管理者,这阻碍了企业向以数据驱动的信息为中心的企业方面的转型。他们不信任大数据,做决策时宁愿依靠自己的直觉,因此他们不认为企业有必要转向更加以数据为驱动的。事实上,据IBM的调查发现,有三分之一的企业领导者不信任他们收到的数据信息来做出决策。
因此,数据的准确性是非常重要的。这意味着企业需要确保实际收集的数据是正确的,以及分析的算法是正确的,以确保从数据中得出的信息结论是正确的。这需要一种企业文化的转变,其需要能够说服所有的企业领导者相信大数据,并在制定大数据策略时,积极的面对派生信息这一个重大的挑战。为了克服这一挑战,企业应该花费足够的时间和精力来教育员工和经理们如何处理数据和使用数据,以做出正确的决策。这一工作是相当费时的,但却能逐步建立起企业对于大数据的信任。
虽然开发一个大数据策略是困难的,但企业不应该止步。企业应该从或大或小的项目中开始发掘出企业所拥有的数据的价值,并结合企业内数据与其他数据集来分析其中蕴含的信息和见解。对于那些已经成功地实施了大数据战略的企业而言,其过程从来都不是一件容易的事,但其带来的结果绝对是令人印象深刻的。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-08-24 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-08-21在数据分析与数据可视化工作中,直方图是展示数据分布特征、离散程度、集中区间的核心图表,能够直观呈现数值数据的频次分布规律 ...
2026-08-20在数据分析领域有一句核心准则:垃圾数据进,垃圾数据出。数据清洗是数据分析、数据建模、数据可视化之前的必经前置工序,也是保 ...
2026-08-20 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-08-20在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19在零售行业大数据分析与精细化运营领域,纸尿裤旁摆放啤酒是最经典、最具代表性的商业案例。两种看似毫无关联的商品,一个是婴幼 ...
2026-08-19 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-08-19在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17