京公网安备 11010802034615号
经营许可证编号:京B2-20210330
导读:自Twitter创建以来,各路学者纷纷涌向这一微博平台,不是去发帖,而是去从事研究工作。在学术界看来,Twitter拥有最为丰富,也许是前所未有的数据集。它就相当于一个实时大数据的虚拟培养皿,吸引着各个学科的学者开展五花八门的研究。
两三年前,伊利诺伊州大学(University of Illinois)健康经济学家雪莉•埃默里在Twitter上看到谈论“吸烟辣妹”的帖子,也有一些帖子谈论“熏制肋骨”、“抽大麻”,以及教皇选举会 议的象征——“冒烟的烟囱”。如果她幸运的话,还能看到那些明显与香烟有关的帖子,例如“吸烟广场”或者仅仅是“吸烟”。
多年来,埃默里一直在研究烟草广告的影响。直到前不久,这项工作还意味着查看电视或广播插播广告,跟踪尼尔森收视率(Nielsen Ratings)和地区吸烟率。但是2011年的一天晚上,她在浏览视频网站Netflix时冒出了一个想法:如果她在上网,那么其他人也是一样——而且 他们很可能会在Twitter等社交平台上发表自己对吸烟的看法。
2011年9月,美国国家癌症研究所(National Cancer Institute)为埃莫里拨款720万美元,用于开展此项研究。就这样,她进入了Twitter学(Twitterology)这一纷繁的新领域,成为了同行中第一个吃螃蟹的人。
现在,她并不是孤军奋战。自Twitter于2006年创建以来,各路学者纷纷涌向这一微博平台——不是去发帖(尽管有些人也这么做了),而是去研究这些帖子。 每天有2.25亿Twitter用户发表5亿条帖子,在学术界看来,Twitter拥有最为丰富,也许是前所未有的数据集。它就相当于一个实时数据的虚拟 培养皿,吸引着各个学科的学者开展五花八门的研究。物理学家利用Twitter研究网络;心理学家则用它来研究自恋心理;语言学家用它来研究语言的地区差 异。其中也有一些论文利用Twitter来跟踪牙痛、空气质量和公众对流感的忧虑——也有人研究Twitter在预测美国橄榄球联盟(NFL)比赛结果, 诊断创伤后应激障碍,以及衡量全球幸福指数方面的潜力。总之,据学术刊物数据库Scopus的统计,已有约2,000篇期刊文章和3,000篇会议论文在研究Twitter(或至少在文章标题、关键词或摘要中包含Twitter一词)。《文献工作杂志》(Journal of Documentation)于2013年发表了一篇论文,其标题就是“人们研究Twitter时是在研究什么?对Twitter相关学术论文进行分类”。
社交网站不大像是能够令学术界动心的工具。那么,Twitter,一家要求每条留言最多为140个字节,把两大流行歌星凯蒂•佩里(拥有5,560万粉丝)和贾斯汀•比伯(拥有5,360万粉丝)奉为最具影响力用户的网站,是如何成为学术界眼中的香饽饽?
在以传染为主题的系列文章中,我和《财富》杂志(Fortune)的同事决定探究事物是如何蔓延的——从并购传闻,到市场恐慌,再到“自拍”。作为 该系列的最后一篇文章,我们决定追本溯源。毕竟,Twitter是当今研究传染力的首选工具之一,而剖析传染这种社会流行病的最好方法,莫过于研究 Twitter本身为何在其研究者中如此具有传染力。
这个故事的开篇距现在并不遥远,最初的主角是计算机科学家。相较于大多数学者,数据对于计算机科学家甚至更为重要——多年来,他们一直在挖掘他们各种稀奇古怪的数据集。 例如,安然公司(Enron)的电邮【大约600,000条讯息,分属于158名安然雇员,美国联邦能源监管委员会(Federal Energy Regulatory Commission)在结束对安然公司的调查后将其公布于众】于2003年公布后,就成为该领域的流行素材。
看上去,社交媒体显然是学者们挖掘数据的下一个前沿阵地,但在2003年,当计算机科学家詹妮弗•戈尔贝克受到MySpace启示,首次开始研究这 些社交平台时,人们并不认为这些研究是有前途,或严肃的工作。她的高科技领域同事将这一研究嗤之为“社交科学”;而在社交网络的萌芽阶段,规模最大的网站 是拥有两千万会员的成人交友网站AdultFriendFinder。
作为一名博士研究生,戈尔贝克看到了此类平台中蕴含的巨大潜力。她说:“在这些平台上可以做大量有趣的计算工作”。然而,甚至当她在2005年拿到学位的时候,她依然没有说服计算机科学系认同这种观点。
现如今,已经成为马里兰州大学帕克分校(University of Maryland, College Park)教授,并兼任人机互动实验室负责人的戈尔贝克,继续利用社交媒体研究人和人际关系。 她的著述颇丰,曾以“YouTube上的社区感与社区结构”、国会议员如何使用Twitter、以及人与宠物关系等主题发表论文。而使她尤其受到追捧的是 她在TED大会上的发言:《扭扭薯条谜题:社交媒体点赞泄露的信息超乎你想象的原因何在》,自2013年10月以来,该视频的观看次数已经多达120万 次。
另一名先驱是密歇根州大学(University of Michigan)信息与计算机科学助理教授埃伊坦•阿达尔。数年前,他利用博客来研究模因的蔓延机制,2007 年,他参与创立了“网络博客与社交媒体国际大会”(International Conference on Weblogs and Social Media),其目的是为从事类似工作的研究者建立一个生态圈。同年的活动吸引了145人参与,大会主题包括《在公司博客上建立信任》和《Flickr上 的社交探索》等等,其主旨演讲人埃文•威廉姆斯不是别人,正是当时羽翼未丰的Twitter公司的创始人。
研究Twitter的首批学者,往往是像戈尔贝克和阿达尔这样的计算机科学家,他们既懂Twitter,同时也具备收集并处理数据的技术。此外,首 批学者中还包括对网络效应特别感兴趣的物理学家以及信息科学和通讯学者。早期的研究往往以Twitter为中心,对该服务的使用方式和目的进行统计分析。 然后出现了一些更复杂的研究,其重点是研究Twitter的机制:比如“取消关注的动态情况”、“瞬时群体发现”、或者“Twitter主题内用户及消息 集群的模式”。新加入研究大军的人多为埃默里这样的社会科学家,他们提出了数据应用的构想,比如预测选举的结果,或者阐明Twitter大学年龄用户自恋 情节。但这些人往往并不是收集和处理数据的行家里手。(正因如此,大量跨学科研究工作层出不穷,戈尔贝克的实验室就从事类似研究)。
研究报告《人们研究Twitter时是在研究什么?》指出,专注于Twitter的论文数量在2007年有3篇,2008年增加到了8篇,2009年增加到了36篇,此后便一路显著上升。
Texifter公司CEO斯图尔特•舒尔曼表示,“一些在社会科学研究中较早使用Twitter研究数据的研究人员遭到了嘲笑。”该公司是一家文 本分析工具开发商,也是一家通常向学者授权使用Twitter数据的供应商。他说,资深学者往往不信任这些同事(大多数是年轻人)。“你为什么要这么做? 难道你可以靠这些数据获得终身教职?而现在,即将从研究生院毕业的整整一代人都准备撰写与社交平台数据有关的硕士论文。”
如今,成为一名社交数据博士似乎不愁没事做。随着Twitter研究论文的数量不断增长,邀请学者提交其研究成果的会议数量也在迅速增多。实际上,阿达尔的网络博客与社交媒体国际大会正面临多个同类会议的竞争压力。
Twitter在学者们中如此受欢迎,不仅仅是因为它是一个海量公共数据集,还因为它是一个带有时间刻度的海量公共数据集——捕捉特定时间中(在一些情况下,也是在特定空间中)数百万人关于所有主题事项的想法。如 果你认为人们在公共舞台上谈论或推送的内容是有限制的,那你就大错特错了,实际情况绝非如此。而如果你认为人们在公共舞台上几乎可以谈论、推送任何内容, 那么你就对了:人们在Twitter上无话不谈,实际上,卫生研究者正在利用这个平台跟踪爆发性食物中毒。(可以花点时间想象一下……)
这些特性使得Twitter有别于其他数据丰富的社交网站。例如,Facebook拥有隐私政策,其内容不是按照时间顺序,而是按照动态消息(NewsFeed)的新颖算法排列。
这并不是说,利用Twitter开展学术研究就特别容易。尽管Twitter是一个公共平台,但仅有很小一部分——约占Twitter数据流的 1%,Twitter将其称为“汽酒”(spritzer)——是公众可以通过Twitter应用程序编程接口(API)免费获取的。一些特定合作伙伴 (其中一些是学者)经协商可以通过Twitter的“浇水管”(garden hose)略微扩大数据获取量(占数据流的10%)。若要通过Twitter 的“消防带”(firehose)进行完全访问,甚至取得特定搜索查询的无限访问权,则需付出高昂的费用,且只能通过少数几家供应商获得。【尽管国会图书 馆(Library of Congress)存储有整个Twitter档案,但它并没有能力满足它收到的大量数据请求。】
今年早些时候,在一片群情激动的欢呼声中,Twitter宣布了一项数据授权计划,以减轻学者开展此类研究的成本负担。但事实上,该公司的授权数量极其有限:在1300个申请人中,仅有6人获得了授权,占0.5%。Texifter公司目前向36个研究团队提供类似授权。
现在,学者们在使用这个平台从事研究时显然更加得心应手。数据过滤技术正在变得愈发精确和复杂。同时,学者们正逐渐了解Twitter 最适合哪类研究。阿达尔称,该平台的数据最适合了解某时某地正在发生什么,但依然不是一个特别靠谱的预测工具。
也有人仍在担心Twitter数据样本的代表性。正如一位涉猎Twitter研究的学者对我所说的那样,你很难判断你所观察到的有多少是人类行为,有多少是Twitter上的人类行为。
Texifter公司的舒尔曼表示,“这可能是一时的风潮,可能我们会认为,以对Twitter500万活跃用户的研究概括整个世界完全是一种愚蠢的行为”。“但我不这样认为。如果有人声称Twitter无足轻重,那才是真正的愚蠢。”
或者,也许Twitter的确不容小觑,但它仍然是一时的风潮。阿达尔已经注意到了这样的迹象:学者对该平台的青睐程度已不如从前。他指出,“仍然 有大量关于Twitter的研究。但有人已将目光投向其他社交媒体。当研究同一事物的人数过多时,我们就不得不转移目标了,尝试着做出更加新颖的贡献。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17在Python数据清洗、文本校验、账号密码规则校验、脏数据过滤、字符串规整化处理中,正则表达式是最高效、最常用的文本匹配工具。 ...
2026-08-17 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-08-17手游行业具备用户迭代快、竞争激烈、用户粘性易流失的典型特征。随着新游持续上线、玩家审美升级、玩法疲劳等问题出现,存量用户 ...
2026-08-14在数字化产品运营、商业数据分析、业务增长管理中,零散的指标统计无法支撑系统性的业务决策。单一的点击率、转化率、销量数据只 ...
2026-08-14 很多数据分析师每天都在写SQL,但当被问到“数据查询语言(DQL)的本质是什么”“SELECT语句中各子句的书写顺序与实际执行顺 ...
2026-08-14在数据库数据分析、数据清洗、报表统计与业务查询场景中,日期时间是最高频、最核心的基础字段。数据库中存储的日期格式多样,包 ...
2026-08-13在数据统计分析与数据清洗工作中,箱线图是一种简洁高效、客观性强的数据可视化图表,能够直观呈现数据集的分布特征、离散程度和 ...
2026-08-13 很多数据分析师写过无数个SELECT查询,但当被问到“如何新建一张表来固化中间数据”“创建视图和创建物理表有什么区别”“视 ...
2026-08-13在自动化办公、数据采集、定时统计、日志清理、系统监控等场景中,程序往往需要按照固定时间间隔重复执行指定任务,这种运行机制 ...
2026-08-12在数据分析日常工作中,Excel数据筛选是数据清洗、数据提取、样本筛选的核心基础操作。传统Excel手动筛选、函数筛选方式,面对多 ...
2026-08-12 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-08-12在数据分析、统计建模、数据挖掘与商业调研过程中,原始数据往往无法做到绝对干净规整。受系统故障、人工录入失误、设备误差、突 ...
2026-08-11在数据分析工作中,聚类分析是典型的无监督学习方法,核心作用是依据数据自身的多维特征,将相似样本自动划分为若干类别,实现“ ...
2026-08-11 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-08-11AB实验是互联网产品迭代、营销优化、功能升级的核心科学验证手段,通过流量随机分组、对照组与实验组对比,科学验证策略、功能、 ...
2026-08-10在MySQL数据库优化中,索引是提升查询效率、降低数据库IO开销、优化系统性能的核心手段。普通单列索引仅适配简单查询场景,面对 ...
2026-08-10