京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代的危害性与局限性_数据分析师
2月3日消息,白宫去年曾发表书面声明称,“大数据将作为历史性的驱动因素,帮助美国持久性地促进社会与经济活力”,其创造的社会价值与经济价值得以遵从该国提倡的“隐私、公正、平等、自主”。然而事实真的如此吗?大数据时代的危害性与局限性又是否会赶超其效益性?
某知名评论人表示,白宫这一努力平衡大数据成本与收益的举措,实则阻碍了其长远发展的大局观。此外,雅虎首席执行官玛丽萨·梅耶尔(Marissa Mayer)表示,数据驱动技术仅仅是政府、工业企业、民间社会做出重大决定的因素之一,而误用或滥用数据甚至比无数据所造成的结果更糟糕。
梅耶尔还指出,其公司内部许多人总是不断收集并解释某些数据,这不仅会导致另外一些重要因素的缺失,还会使被测算的系统发生不好的转变。
不当负担
大数据到底是否利大于弊并不是我们现阶段所关心的问题,而能否识别其益处的非显性局限才是技术人员最应该关注的。
大数据支持者的核心主张是,但凡数据,必定有正面价值。然而这个想法是错误的,对公司管理层而言,看起来似乎无伤大雅的信息搜寻,却往往对数据收集的主体带来了不当负担。
比如,全球大学排名与联邦量刑指南是两大复杂社会系统演变而成的量化值,该方面的相关人员均表示,这样的全方位大数据归集整理无疑损害了他们原本系统的秩序。
而第一个提出“大数据时代”这一概念的麦肯锡公司(McKinsey)也曾坦言,“事实上,截至目前,并没有有效的证据表明数据的强度与特定部门生产力之间存在一定积极的联系。”在随后的几年内,尽管信息量化的浪潮已开足马力,但相关证据依然少之又少。
易被操控
数据往往比人们想象的更易被操控。据Target前经理表示,公司管理部门曾尝试通过收集分析顾客问卷打分表以期提升顾客满意度,然而此举却造成员工伪造客户信息以夸大自己的工作表现。不受监管的可编制数据一旦被伪造,那么用它分析出的结果便不具任何意义。
而先前拥有自主执行权的负责数据编制的员工,此时却倍感压力重重,因为他们不得不接受不间断的中央监控。
不可量化
许多重要的问题是根本不适合也无法定量分析的,它们需要对价值、驱动力、所处环境及其他种种核心因素的评判。而找到一个绝对中立不偏不倚并受众人尊重信任的人,制定量化指标来对所有因素进行评定打分,是决计无法实现的。这便是一切社会机制中固有的难题。
衡量知识?
新基础科学知识对经济结构的影响过于分散和复杂,经济学家很难进行量化衡量。
当然,社会和经济制度的定量分析在最近几年存在系统性的缺陷,但这并不意味着未来的深入研究会遭遇同样的短板。然而,若是沿袭相同的基础方法论,那么即便收集再多的数据,这些缺陷也将持续存在。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
随着新零售模式的快速普及,零售行业从传统的“货品驱动”全面转向“用户驱动”。门店交易数据、线上消费记录、浏览轨迹、复购频 ...
2026-08-27在数据分析、爬虫采集、接口开发、数据归档等场景中,JSON与CSV是两种使用率最高的数据存储格式。JSON为键值对结构化格式,适配 ...
2026-08-27 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-08-27在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-08-24 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-08-21在数据分析与数据可视化工作中,直方图是展示数据分布特征、离散程度、集中区间的核心图表,能够直观呈现数值数据的频次分布规律 ...
2026-08-20在数据分析领域有一句核心准则:垃圾数据进,垃圾数据出。数据清洗是数据分析、数据建模、数据可视化之前的必经前置工序,也是保 ...
2026-08-20 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-08-20在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19在零售行业大数据分析与精细化运营领域,纸尿裤旁摆放啤酒是最经典、最具代表性的商业案例。两种看似毫无关联的商品,一个是婴幼 ...
2026-08-19 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-08-19在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18