京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据与情感分析:言多必得与言多必失
SmogFarm从事的是基于大数据的情绪分析,衡量、跟踪、聚合数百万人的情绪,然后做出全球第一份衡量群众心理的定量指标—地球脉搏。为什么要这么做?因为数据就是未来,情感是笔大买卖,选举、调查结果、流行新闻故事乃至于股市都会受到 “群众” 情绪的影响。
言多必得
相比之下,KredStreet则找到了另一个似乎更容易变现的垂直商业模式并已开始进行不公开测试:社会化股票交易员排名(The Social Stock Trader Rankings)。The Social Stock Trader Rankings 对 StockTwits 的数据进行情绪分析,对 Twitter 数据流进行采样,以便确定交易员总体看涨还是看跌。它还会将当前的股市表现与交易员过去的涨跌判断进行比对,进而依据交易员的准确率对其进行评分和排名。
这个排名系统的创意的确好。因为这里一切都是靠实力和结果说话,无名之辈只要预测准确率高也能把夸夸其谈的知名人士压倒。实际上,这一思路完全可以推广到许多领域,比方说倡导声音有力则不需名气的舆论网络初创企业 State的做法。说实话,这套东西有时候的确比文凭和砖家管用。
当然 SmogFarm/KredStreet 之流所从事的情绪分析,以及Summly从事的自然语言处理,还有Palantir从事的数据挖掘等尚处在早期阶段,还很不成熟。但请你设想一下 5年 之后。如果他们的大数据、高能量探照灯打在Facebook timeline这样的东西上,会有多少东西被他们洞悉?
几年前,EFF(电子前沿基金会)发现,哪怕是像浏览器设置这么简单的东西都会让你的匿名性下降到无法想象的地步。上一周,一项新研究又发现人的移动轨迹具有高度的独特性,按照这份研究的说法,从各人匿名提供的手机方位数据中只需抽取四个时空点就能识别出该用户,识别率高达 95%。好的软件能够从这些看似稀疏、空白的数据中挖掘出甚多宝物。
言多必失
随着语言和图像处理软件的不断进化,一旦被运用到 Facebook timeline 这样的东西上,就有可能产生出你意想不到的效果。你所说的话、发出去的图、玩过的游戏等,都会逐渐勾勒出你本人的一幅准确得令人恐怖的肖像,那些东西可能是你从来都不曾想公开的隐私。
更糟的是这件事有可能容易得出奇。老板可能根本就不需要通读你的 Facebook timeline,只需将档案分析软件往你的头像一点,半分钟之后,你的工作习惯、神经衰弱、人生受挫、情绪不稳、对老板的态度等悉数就被推断出来—你的照片、评论、喜欢、顶等,这些信息从个体上看虽然毫无意义,但是拼凑起来就能形成你的拼图。
这是一笔大买卖。前不久,IBM 开发的新型安全工具就能够运用大数据来识别安全威胁和不满员工。Facebook 之流显然也指望此类大数据应用为其定向广告挖掘出大金矿。
但是这会受到用户的反制。我们可以设想,一旦这样的工具成熟起来,大家在网上的表现一定不会再像以前那样直率,会变得更加小心翼翼。或者甚至只看不说。这样的网络到头来也许只有两种结果:死气沉沉、人人自危,或者只谈风月、口是心非。
扎克伯格定律认为互联网用户共享的信息每年都会翻番。但是一旦大家都意识到言多必失时这条规律还能不能延续?
工具无所谓好坏,言多必得还是言多必失,要看用者做不做恶,对于用户和商家来说结果只有两个:双赢或双输,善用则情感成为好买卖,滥用则数据没有未来。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在大数据时代背景下,海量行业数据亟需通过专业化工具挖掘潜在价值,辅助企业业务决策、优化运营模式、规避经营风险。Python凭借 ...
2026-08-28SQL是数据分析领域最基础、最核心的工具,承担着取数、清洗、统计、分层、归因的全流程工作。不同于单纯的语法练习,实战化SQL数 ...
2026-08-28 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-08-28随着新零售模式的快速普及,零售行业从传统的“货品驱动”全面转向“用户驱动”。门店交易数据、线上消费记录、浏览轨迹、复购频 ...
2026-08-27在数据分析、爬虫采集、接口开发、数据归档等场景中,JSON与CSV是两种使用率最高的数据存储格式。JSON为键值对结构化格式,适配 ...
2026-08-27 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-08-27在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-08-24 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-08-21在数据分析与数据可视化工作中,直方图是展示数据分布特征、离散程度、集中区间的核心图表,能够直观呈现数值数据的频次分布规律 ...
2026-08-20在数据分析领域有一句核心准则:垃圾数据进,垃圾数据出。数据清洗是数据分析、数据建模、数据可视化之前的必经前置工序,也是保 ...
2026-08-20 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-08-20在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19