京公网安备 11010802034615号
经营许可证编号:京B2-20210330
该对大数据立规矩了吗?
随着移动互联网的普及,社交生活网络化的泛滥,我们每个人在享受信息技术带来的便利时,每分每秒也在留下自己的数字足迹(digital footprint),包括现在或过去任何一个时点所在的位置、移动轨迹等等,平台、应用等商品和服务提供者有能力搜集并分析利用,以了解我们的活动范围、生活习惯、各种偏好,并最终描绘出我们每个人的“数字画像”(digital profiling)。正如法官Alsup所担心的,互联网公司把基于大数据的精准定位和营销,“创造性”地用到庭审诉讼双方的辩论中,很可能会左右陪审团的判断,控制庭审的结果。
事实上,描绘出个人的数字画像进而“投其所好”,还是大数据一种“相对保守”的利用方式。毕竟在微信朋友圈中,是看到豪车还是饮料的广告,顶多成为我们吹牛或自嘲的谈资。但随着基于大数据的自动化决策科技 (automated decision-making) 在个人对健康、教育、工作、信用、商品和服务的取得上,扮演着逐渐重要的角色,甚至是“生杀予夺”的权重时,我们就应该对大数据、自动化决策过程的影响高度重视起来。
例如,当大数据和算法判断求职者为男性时,为其推送高薪主管职位消息的概率远大于同等条件的女性求职者;利用大数据计算参与恐怖主义活动的概率,并采取各种不同程度限制出行或监控的措施;在缺乏直接信用记录和数据的情况下,基于其他信息(如电话账单、教育背景、社交网络等)预估信用评分,最终导致特定群体的人无法申请小额贷款;信用卡发卡银行降低某人信用额度的原因并非基于该持卡人的消费与还款记录,而是基于该持卡人被归为“同一类型”之消费者所共同拥有的记录与特征等等。
2016年1月6日,美国联邦交易委员会公布报告《大数据:吸纳或排他的工具?》(Big Data: A Tool for Inclusion or Exclusion? Understanding the Issues)中还举了这样一个例子:
2012年,当桑迪飓风肆虐美国时,短短时间,推特上产生了超过2000万条相关的消息,其中包含了大量关于飓风和受灾人群的信息。为了做到救灾资源的有效配置,美国当局决定对推特上的消息进行实时分析,以此判断哪些地区、哪些人群最需要帮助。可是事后分析回顾发现,因为电力供应受到严重影响,导致重灾区人群无法发出大量的网络消息,所以恰恰是受灾最重地区的推特消息最少。对推特消息的分析形成了不准确的数据视图,无法正确指向受灾最重的地区以及最需要帮助的人群。
被大数据歧视了怎么办?
为避免大数据可能带来的歧视或偏差,美国政府从2014年开始发布了多份报告,希望引起社会各界对此问题的重视。2014年5月1日,美国白宫发表报告《大数据:抓住机会、保存价值》(Big Data: Seizing Opportunities, Preserving Values)。报告建议:“联邦政府主要的公民权利和消费者保护机构,包括司法部、联邦贸易委员会、消费者金融保护局和公平就业机会委员会,应当主动研究有可能对特定阶级带来歧视性影响的大数据分析的做法和结果,并制定计划调查和解决违反法律的此类事件。”
上文提到的美国联邦交易委员会的报告建议,在进行分析之前,首先要确保数据具有代表性;企业必须谨防数据模型中隐藏的偏差,厘清统计关联性和因果性之间的区别;企业需要详尽审视相关模型所依赖的因子,把握好预测分析与公平性之间的平衡关系;在流程建设上,允许消费者能访问自身数据并就错误或遗漏提出异议。
2016年5月4日,美国白宫发布报告《大数据:关于算法系统、机会、公民权利的报告》(Big Data: A Report on Algorithmic Systems, Opportunity, and Civil Rights)。报告提出通过算法和系统的设计来实现平等权利(a principle of “equal opportunity by design”),并建议研究机构和行业一起,开展算法审计和对大数据系统的外部测试以保证人们被公平对待。
欧洲在这方面走在了其他国家的前面。将于2018年5月25日正式生效的欧盟《一般数据保护条例》,在第22条明确规定了对于仅仅以自动化方式(包括数字画像)做出的、对个人能够产生法律效果的或其他类似的显著影响的决定,个人有权免受这样决定的制约。
在我国,大数据和自动化算法高歌猛进,与此同时,我们是不是也应该放慢下脚步,仔细想想如何将其可能的负面影响降到最低?
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在日常办公中,数据透视表是Excel、WPS等表格工具中最常用的数据分析利器——它能快速汇总繁杂数据、挖掘数据关联、生成直观报表 ...
2026-02-28有限元法(Finite Element Method, FEM)作为工程数值模拟的核心工具,已广泛应用于机械制造、航空航天、土木工程、生物医学等多 ...
2026-02-28在数字化时代,“以用户为中心”已成为企业运营的核心逻辑,而用户画像则是企业读懂用户、精准服务用户的关键载体。CDA(Certifi ...
2026-02-28在Python面向对象编程(OOP)中,类方法是构建模块化、可复用代码的核心载体,也是实现封装、继承、多态特性的关键工具。无论是 ...
2026-02-27在MySQL数据库优化中,索引是提升查询效率的核心手段—— 面对千万级、亿级数据量,合理创建索引能将查询时间从秒级压缩到毫秒级 ...
2026-02-27在数字化时代,企业积累的海量数据如同散落的珍珠,若缺乏有效的梳理与分类,终将难以发挥实际价值。CDA(Certified Data Analys ...
2026-02-27在问卷调研中,我们常遇到这样的场景:针对同一批调查对象,在不同时间点(如干预前、干预后、随访期)发放相同或相似的问卷,收 ...
2026-02-26在销售管理的实操场景中,“销售机会”是核心抓手—— 从潜在客户接触到最终成交,每一个环节都藏着业绩增长的关键,也暗藏着客 ...
2026-02-26在CDA数据分析师的日常工作中,数据提取、整理、加工是所有分析工作的起点,而“创建表”与“创建视图”,则是数据库操作中最基 ...
2026-02-26在机器学习分析、数据决策的全流程中,“数据质量决定分析价值”早已成为行业共识—— 正如我们此前在运用机器学习进行分析时强 ...
2026-02-25在数字化时代,数据已成为企业决策、行业升级的核心资产,但海量杂乱的原始数据本身不具备价值—— 只有通过科学的分析方法,挖 ...
2026-02-25在数字化时代,数据已成为企业核心资产,而“数据存储有序化、数据分析专业化、数据价值可落地”,则是企业实现数据驱动的三大核 ...
2026-02-25在数据分析、机器学习的实操场景中,聚类分析与主成分分析(PCA)是两种高频使用的统计与数据处理方法。二者常被用于数据预处理 ...
2026-02-24在聚类分析的实操场景中,K-Means算法因其简单高效、易落地的特点,成为处理无监督分类问题的首选工具——无论是用户画像分层、 ...
2026-02-24数字化浪潮下,数据已成为企业核心竞争力,“用数据说话、用数据决策”成为企业发展的核心逻辑。CDA(Certified Data Analyst) ...
2026-02-24CDA一级知识点汇总手册 第五章 业务数据的特征、处理与透视分析考点52:业务数据分析基础考点53:输入和资源需求考点54:业务数 ...
2026-02-23CDA一级知识点汇总手册 第四章 战略与业务数据分析考点43:战略数据分析基础考点44:表格结构数据的使用考点45:输入数据和资源 ...
2026-02-22CDA一级知识点汇总手册 第三章 商业数据分析框架考点27:商业数据分析体系的核心逻辑——BSC五视角框架考点28:战略视角考点29: ...
2026-02-20CDA一级知识点汇总手册 第二章 数据分析方法考点7:基础范式的核心逻辑(本体论与流程化)考点8:分类分析(本体论核心应用)考 ...
2026-02-18第一章:数据分析思维考点1:UVCA时代的特点考点2:数据分析背后的逻辑思维方法论考点3:流程化企业的数据分析需求考点4:企业数 ...
2026-02-16