京公网安备 11010802034615号
经营许可证编号:京B2-20210330
该对大数据立规矩了吗?
随着移动互联网的普及,社交生活网络化的泛滥,我们每个人在享受信息技术带来的便利时,每分每秒也在留下自己的数字足迹(digital footprint),包括现在或过去任何一个时点所在的位置、移动轨迹等等,平台、应用等商品和服务提供者有能力搜集并分析利用,以了解我们的活动范围、生活习惯、各种偏好,并最终描绘出我们每个人的“数字画像”(digital profiling)。正如法官Alsup所担心的,互联网公司把基于大数据的精准定位和营销,“创造性”地用到庭审诉讼双方的辩论中,很可能会左右陪审团的判断,控制庭审的结果。
事实上,描绘出个人的数字画像进而“投其所好”,还是大数据一种“相对保守”的利用方式。毕竟在微信朋友圈中,是看到豪车还是饮料的广告,顶多成为我们吹牛或自嘲的谈资。但随着基于大数据的自动化决策科技 (automated decision-making) 在个人对健康、教育、工作、信用、商品和服务的取得上,扮演着逐渐重要的角色,甚至是“生杀予夺”的权重时,我们就应该对大数据、自动化决策过程的影响高度重视起来。
例如,当大数据和算法判断求职者为男性时,为其推送高薪主管职位消息的概率远大于同等条件的女性求职者;利用大数据计算参与恐怖主义活动的概率,并采取各种不同程度限制出行或监控的措施;在缺乏直接信用记录和数据的情况下,基于其他信息(如电话账单、教育背景、社交网络等)预估信用评分,最终导致特定群体的人无法申请小额贷款;信用卡发卡银行降低某人信用额度的原因并非基于该持卡人的消费与还款记录,而是基于该持卡人被归为“同一类型”之消费者所共同拥有的记录与特征等等。
2016年1月6日,美国联邦交易委员会公布报告《大数据:吸纳或排他的工具?》(Big Data: A Tool for Inclusion or Exclusion? Understanding the Issues)中还举了这样一个例子:
2012年,当桑迪飓风肆虐美国时,短短时间,推特上产生了超过2000万条相关的消息,其中包含了大量关于飓风和受灾人群的信息。为了做到救灾资源的有效配置,美国当局决定对推特上的消息进行实时分析,以此判断哪些地区、哪些人群最需要帮助。可是事后分析回顾发现,因为电力供应受到严重影响,导致重灾区人群无法发出大量的网络消息,所以恰恰是受灾最重地区的推特消息最少。对推特消息的分析形成了不准确的数据视图,无法正确指向受灾最重的地区以及最需要帮助的人群。
被大数据歧视了怎么办?
为避免大数据可能带来的歧视或偏差,美国政府从2014年开始发布了多份报告,希望引起社会各界对此问题的重视。2014年5月1日,美国白宫发表报告《大数据:抓住机会、保存价值》(Big Data: Seizing Opportunities, Preserving Values)。报告建议:“联邦政府主要的公民权利和消费者保护机构,包括司法部、联邦贸易委员会、消费者金融保护局和公平就业机会委员会,应当主动研究有可能对特定阶级带来歧视性影响的大数据分析的做法和结果,并制定计划调查和解决违反法律的此类事件。”
上文提到的美国联邦交易委员会的报告建议,在进行分析之前,首先要确保数据具有代表性;企业必须谨防数据模型中隐藏的偏差,厘清统计关联性和因果性之间的区别;企业需要详尽审视相关模型所依赖的因子,把握好预测分析与公平性之间的平衡关系;在流程建设上,允许消费者能访问自身数据并就错误或遗漏提出异议。
2016年5月4日,美国白宫发布报告《大数据:关于算法系统、机会、公民权利的报告》(Big Data: A Report on Algorithmic Systems, Opportunity, and Civil Rights)。报告提出通过算法和系统的设计来实现平等权利(a principle of “equal opportunity by design”),并建议研究机构和行业一起,开展算法审计和对大数据系统的外部测试以保证人们被公平对待。
欧洲在这方面走在了其他国家的前面。将于2018年5月25日正式生效的欧盟《一般数据保护条例》,在第22条明确规定了对于仅仅以自动化方式(包括数字画像)做出的、对个人能够产生法律效果的或其他类似的显著影响的决定,个人有权免受这样决定的制约。
在我国,大数据和自动化算法高歌猛进,与此同时,我们是不是也应该放慢下脚步,仔细想想如何将其可能的负面影响降到最低?
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据指标体系搭建工作中,从业者常困惑于指标搭建的核心逻辑:究竟是依托一线零散数据自下而上汇总指标,还是基于战略目标自上 ...
2026-07-31在数据分析、问卷研究、实验复盘、业务建模的工作中,大多数人最关注的是“用什么统计方法”:是做T检验、方差分析、卡方检验, ...
2026-07-31 许多数据分析师精通Excel函数和SQL查询,但当面对一张上万行的销售明细表,要快速回答“哪个地区销量最高”“哪款产品增长最 ...
2026-07-31在问卷调研的数据分析流程中,“先检验信效度,再开展进阶统计分析”是通用的规范逻辑。很多从业者会听到“问卷效度高,后续可以 ...
2026-07-30【核心关键词】大数据、统计学、专业、毕业生、论文、课程、计算机、建模、知识、数据分析、机器学习、数据科学、大数据技术、 ...
2026-07-30 很多数据分析师掌握了Excel函数、会写SQL查询,但当被问到“数据从哪里来”“数据加工有哪些步骤”“如何使用分析工具连接数 ...
2026-07-30在业务数据分析中,按天拆分统计夜间时段的数据是高频需求——比如电商夜间订单监测、平台夜间用户活跃度分析、运维系统夜间异常 ...
2026-07-29在机器学习建模与特征工程实践中,判断不同特征对模型预测效果的贡献度,是特征筛选、模型解释、业务归因的核心环节。特征置换重 ...
2026-07-29 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-07-29【核心关键词】岗位、数字化、经验、课程、方法论、决策、企业、大方向、数据分析、销售管理、理论知识、思维方式、分析销售、 ...
2026-07-28在问卷调研、用户分群、效果对比等业务数据分析中,分类变量的关联性与差异性验证是高频需求。卡方检验作为针对离散分类数据的经 ...
2026-07-28 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-07-28在Excel数据分析与报表制作中,数据透视表是快速完成多维度汇总、分组统计的核心工具。很多从业者在得到透视表汇总结果后,为了 ...
2026-07-27 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-07-27当下,我们已然步入数据要素价值全面释放的智能时代。数据不再只是零散的数字记录,更是驱动新质生产力运转的核心动能、滋养人工 ...
2026-07-27【核心关键词】客户、数据分析、指标体系、数据采集、数据指标、业务数据、分析思路、业务需求、分析方法 【专访摘要】本次 CDA ...
2026-07-24在数据分析、业务建模与数字化运营体系中,原始业务数据普遍存在缺失、重复、异常、口径不一致等质量问题,直接用于分析与建模会 ...
2026-07-24 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-07-24在数据驱动的精细化运营体系中,指标是业务判断、效果复盘、策略优化的核心依据。随着企业数据化程度提升,指标数量持续膨胀,但 ...
2026-07-23在用户运营与产品增长体系中,留存是衡量产品真实价值与用户粘性的核心标尺,也是决定用户生命周期价值、获客投产比的底层因素。 ...
2026-07-23