京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据应用的四个战场_数据分析师
如今,当人们谈到欺诈时,可能第一个想到的是银行,事实也是如此——银行是最容易受到威胁的行业。但过去Interac Association的一份报告显示在加拿大借记卡欺诈损失实际上已经下降了62%,而且到了2013年受益于芯片和PIN技术的发展,随着一些安全性高、欺诈检测机制发展起来,可以帮助企业实时检测到欺诈行为,提升惩治犯罪机率。
对于欺诈率下降是个好消息,但是相比好消息,技术的发展不可能消除诈骗犯罪,欺诈者仍然能够利用许多其他方法从个人和企业那里谋取金钱和资产。
幸运的是,通过收集起来了大量的数据,分析这些数据能够检测出正在进行的诈骗行为,或许能够帮助公司和执法者从中找到解决方案。作为SAS加拿大安全情报实践的负责人,Dan Nagle针对目前存在四个领域,在检测欺诈行为方面对这四个领域的技术进行分析。
一、医疗卫生领域
正如分析所讲,很多人通过伪造医药处方来获取限制药物(如Oxycontin),犯罪分子通常强迫弱势人群填写相关医药处方,然后获取这些限制药物进而转售获利。
医疗卫生组织要建立一个系统,确保药房及其他一些人的行为合法,可以将正常药品购买行为和违法行为区分开。大数据系统需要审查处方内容以及购买的地点,确定在每次交易中存在欺诈的潜在可能性。并通过分析软件使用复杂的算法来发现非法活动中的一般模式,以及时对违法行为作出行动。
这一套系统为系统管理员提供了实时报警功能,帮助在监控中发现存在药品滥用的违法行为——通常从业人员(如:医生或药店),或者是病人是受到勒索被迫填假处方的受害者。
二、能源领域
能源领域中也因欺诈造成了巨额损失。非法(有些还披着“合法”的外衣)企业或组织通过各种途径从避免电费的支出,或是通过盗取其他组织的电力,或通过迂回的方式直接连接到馈电线路。
电力公司需要实时测量,了解每个客户使用电源的情况,以便可以更准确地预测需求和对电量进行调整。而面对大量的数据困扰,需要从中找到电力盗窃的证据,而他们面临的最大挑战是如何从大量数据中筛选出来进而寻找证据,而且事实上数据无法长时间保存,这意味着电力公司必须做到实时的欺诈检测。
解决方案:基于智能电表的分析系统,通过监测电力系统中不正常的表现,并将分析工具和工程系统发出的信号相结合来检测违规行为。SAS公司通过这个方案意外地发现了测定大麻生长所在位置的方法。
三、金融信用卡领域
正如开篇提到欺诈的首要行业——金融,解决信用卡和借记卡欺诈仍然需要欺诈检测技术,尽管欺诈犯罪在下降,但金融欺诈仍是一个急需解决的问题,加拿大的两大银行汇丰和Laurentian通过数据分析来解决这一难题。
汇丰银行重点是评估出每一次信用卡交易潜在的风险。拒绝一个合法用户的操作和允许非法交易都是系统所不想得到的效果,因此数据分析需要很高的可靠性和实时性,避免客户合法交易被阻止转向其他家银行的尴尬。
另一个案例,Laurentian系统则致力于利用数据挖掘出周期性诈骗行为(如:洗钱)。为了做到这一点,Laurentian将欺诈检测与其他系统整合到一起,了解每一个客户交易的详细信息、用户之间的关联等信息,无论资金流动情况如何复杂,银行都能通过分析来确定交易是否合法。
四、赌博业
看过Oceans 11(十一罗汉)电影会感受到在线和离线的赌场相对于金融企业存在着更多的欺诈风险,诈骗者侵入合法玩家的账户,通过侵入这些账户进行盗窃或洗钱等违法行为。由此,分析系统为每个赌徒建立了相应的信息文档,可以实时了解信息,甚至指纹信息。在出现异样时候,该系统就可以立即向赌场发出警报。
可见,大数据分析系统对欺诈行为进行积极主动的打击区别于传统方法,传统方法只能在欺诈发生后,依靠取证来打击犯罪。随着网络犯罪的增长,未来通过大数据分析预测犯罪、制止犯罪将成为重要的发展趋势。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 1. 销售漏斗阶段判断 题目:销售漏斗模型中,通过广告、社交媒体等方式触达品牌信息(如浏览品 ...
2026-09-07在Python数据分析中,Pandas库的DataFrame是最核心、最常用的结构化数据表对象,类似于Excel的二维表格,具备规整的行列结构、字 ...
2026-09-07在数据分析、经营复盘、业绩预测与经济统计工作中,平均增速(平均增长率)是衡量数据长期变化趋势、业务发展快慢的核心指标。不 ...
2026-09-07 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-09-07随着大数据技术的快速发展,商业竞争逐步从传统的经验式经营转变为数据驱动的精细化运营。海量的用户行为数据、交易数据、运营数 ...
2026-09-04CDA数据分析师 出品 作者:李诗怡 1. 波士顿矩阵(BCG Matrix) 定义: BCG于1970年提出的业务组合分析工具,以"市场增长率"(纵 ...
2026-09-04 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-09-04数据透视表是Excel与Power BI中最核心的数据分析工具,具备快速汇总、维度拆分、动态筛选的能力,可高效完成数据归类与统计展示 ...
2026-09-03在Power BI数据分析可视化场景中,堆积柱状图+折线图是最常用的复合图表组合。堆积柱状图适合展示各细分维度当期数值、结构占比 ...
2026-09-03 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-09-03CDA数据分析师 出品 作者:李诗怡 一、8个核心数据清洗函数 1. TRIM:一键清除多余空格(最常用) 作用:仅保留文本中"单词/字 ...
2026-09-02数据分析的核心并非单纯操作工具、整理报表或绘制图表,而是依靠科学的思维逻辑挖掘数据价值、解释业务现象、指导经营决策。在完 ...
2026-09-02在社会经济、产业研究、区域治理与大数据实证分析中,面板数据是最具研究价值的数据类型。面板数据同时包含截面维度与时间维度信 ...
2026-09-02 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-09-02在数据驱动决策的体系中,数据分析按照分析目的可分为描述性分析、诊断性分析、预测性分析与指导性分析四大类型。其中,诊断性分 ...
2026-09-01网络请求是Python爬虫开发、接口测试、数据拉取的核心基础功能,Python生态中主要依靠 urllib 和 requests 两大库实现HTTP请求操 ...
2026-09-01 很多数据分析师面对业务问题时,常常感到“知道要分析,却不知道用什么方法”。其实,数据分析并非无章可循——从三大基础范 ...
2026-09-01在数据库设计与业务数据维护中,自增ID是数据表最常用的主键字段,用于唯一标识每一条业务数据,正常状态下ID应保持连续递增。但 ...
2026-08-31在数理统计、数据分析、经济测算与日常量化评估中,平均值是刻画数据集中趋势、反映整体水平的基础核心指标。在实际应用中,最常 ...
2026-08-31在数据驱动的时代,数据分析早已不是“凭经验、靠感觉”的零散操作,而是一套具备固定逻辑、标准化流程的系统方法——这就是数据 ...
2026-08-31