京公网安备 11010802034615号
经营许可证编号:京B2-20210330
导读:自Twitter创建以来,各路学者纷纷涌向这一微博平台,不是去发帖,而是去从事研究工作。在学术界看来,Twitter拥有最为丰富,也许是前所未有的数据集。它就相当于一个实时大数据的虚拟培养皿,吸引着各个学科的学者开展五花八门的研究。
两三年前,伊利诺伊州大学(University of Illinois)健康经济学家雪莉•埃默里在Twitter上看到谈论“吸烟辣妹”的帖子,也有一些帖子谈论“熏制肋骨”、“抽大麻”,以及教皇选举会 议的象征——“冒烟的烟囱”。如果她幸运的话,还能看到那些明显与香烟有关的帖子,例如“吸烟广场”或者仅仅是“吸烟”。
多年来,埃默里一直在研究烟草广告的影响。直到前不久,这项工作还意味着查看电视或广播插播广告,跟踪尼尔森收视率(Nielsen Ratings)和地区吸烟率。但是2011年的一天晚上,她在浏览视频网站Netflix时冒出了一个想法:如果她在上网,那么其他人也是一样——而且 他们很可能会在Twitter等社交平台上发表自己对吸烟的看法。
2011年9月,美国国家癌症研究所(National Cancer Institute)为埃莫里拨款720万美元,用于开展此项研究。就这样,她进入了Twitter学(Twitterology)这一纷繁的新领域,成为了同行中第一个吃螃蟹的人。
现在,她并不是孤军奋战。自Twitter于2006年创建以来,各路学者纷纷涌向这一微博平台——不是去发帖(尽管有些人也这么做了),而是去研究这些帖子。 每天有2.25亿Twitter用户发表5亿条帖子,在学术界看来,Twitter拥有最为丰富,也许是前所未有的数据集。它就相当于一个实时数据的虚拟 培养皿,吸引着各个学科的学者开展五花八门的研究。物理学家利用Twitter研究网络;心理学家则用它来研究自恋心理;语言学家用它来研究语言的地区差 异。其中也有一些论文利用Twitter来跟踪牙痛、空气质量和公众对流感的忧虑——也有人研究Twitter在预测美国橄榄球联盟(NFL)比赛结果, 诊断创伤后应激障碍,以及衡量全球幸福指数方面的潜力。总之,据学术刊物数据库Scopus的统计,已有约2,000篇期刊文章和3,000篇会议论文在研究Twitter(或至少在文章标题、关键词或摘要中包含Twitter一词)。《文献工作杂志》(Journal of Documentation)于2013年发表了一篇论文,其标题就是“人们研究Twitter时是在研究什么?对Twitter相关学术论文进行分类”。
社交网站不大像是能够令学术界动心的工具。那么,Twitter,一家要求每条留言最多为140个字节,把两大流行歌星凯蒂•佩里(拥有5,560万粉丝)和贾斯汀•比伯(拥有5,360万粉丝)奉为最具影响力用户的网站,是如何成为学术界眼中的香饽饽?
在以传染为主题的系列文章中,我和《财富》杂志(Fortune)的同事决定探究事物是如何蔓延的——从并购传闻,到市场恐慌,再到“自拍”。作为 该系列的最后一篇文章,我们决定追本溯源。毕竟,Twitter是当今研究传染力的首选工具之一,而剖析传染这种社会流行病的最好方法,莫过于研究 Twitter本身为何在其研究者中如此具有传染力。
这个故事的开篇距现在并不遥远,最初的主角是计算机科学家。相较于大多数学者,数据对于计算机科学家甚至更为重要——多年来,他们一直在挖掘他们各种稀奇古怪的数据集。 例如,安然公司(Enron)的电邮【大约600,000条讯息,分属于158名安然雇员,美国联邦能源监管委员会(Federal Energy Regulatory Commission)在结束对安然公司的调查后将其公布于众】于2003年公布后,就成为该领域的流行素材。
看上去,社交媒体显然是学者们挖掘数据的下一个前沿阵地,但在2003年,当计算机科学家詹妮弗•戈尔贝克受到MySpace启示,首次开始研究这 些社交平台时,人们并不认为这些研究是有前途,或严肃的工作。她的高科技领域同事将这一研究嗤之为“社交科学”;而在社交网络的萌芽阶段,规模最大的网站 是拥有两千万会员的成人交友网站AdultFriendFinder。
作为一名博士研究生,戈尔贝克看到了此类平台中蕴含的巨大潜力。她说:“在这些平台上可以做大量有趣的计算工作”。然而,甚至当她在2005年拿到学位的时候,她依然没有说服计算机科学系认同这种观点。
现如今,已经成为马里兰州大学帕克分校(University of Maryland, College Park)教授,并兼任人机互动实验室负责人的戈尔贝克,继续利用社交媒体研究人和人际关系。 她的著述颇丰,曾以“YouTube上的社区感与社区结构”、国会议员如何使用Twitter、以及人与宠物关系等主题发表论文。而使她尤其受到追捧的是 她在TED大会上的发言:《扭扭薯条谜题:社交媒体点赞泄露的信息超乎你想象的原因何在》,自2013年10月以来,该视频的观看次数已经多达120万 次。
另一名先驱是密歇根州大学(University of Michigan)信息与计算机科学助理教授埃伊坦•阿达尔。数年前,他利用博客来研究模因的蔓延机制,2007 年,他参与创立了“网络博客与社交媒体国际大会”(International Conference on Weblogs and Social Media),其目的是为从事类似工作的研究者建立一个生态圈。同年的活动吸引了145人参与,大会主题包括《在公司博客上建立信任》和《Flickr上 的社交探索》等等,其主旨演讲人埃文•威廉姆斯不是别人,正是当时羽翼未丰的Twitter公司的创始人。
研究Twitter的首批学者,往往是像戈尔贝克和阿达尔这样的计算机科学家,他们既懂Twitter,同时也具备收集并处理数据的技术。此外,首 批学者中还包括对网络效应特别感兴趣的物理学家以及信息科学和通讯学者。早期的研究往往以Twitter为中心,对该服务的使用方式和目的进行统计分析。 然后出现了一些更复杂的研究,其重点是研究Twitter的机制:比如“取消关注的动态情况”、“瞬时群体发现”、或者“Twitter主题内用户及消息 集群的模式”。新加入研究大军的人多为埃默里这样的社会科学家,他们提出了数据应用的构想,比如预测选举的结果,或者阐明Twitter大学年龄用户自恋 情节。但这些人往往并不是收集和处理数据的行家里手。(正因如此,大量跨学科研究工作层出不穷,戈尔贝克的实验室就从事类似研究)。
研究报告《人们研究Twitter时是在研究什么?》指出,专注于Twitter的论文数量在2007年有3篇,2008年增加到了8篇,2009年增加到了36篇,此后便一路显著上升。
Texifter公司CEO斯图尔特•舒尔曼表示,“一些在社会科学研究中较早使用Twitter研究数据的研究人员遭到了嘲笑。”该公司是一家文 本分析工具开发商,也是一家通常向学者授权使用Twitter数据的供应商。他说,资深学者往往不信任这些同事(大多数是年轻人)。“你为什么要这么做? 难道你可以靠这些数据获得终身教职?而现在,即将从研究生院毕业的整整一代人都准备撰写与社交平台数据有关的硕士论文。”
如今,成为一名社交数据博士似乎不愁没事做。随着Twitter研究论文的数量不断增长,邀请学者提交其研究成果的会议数量也在迅速增多。实际上,阿达尔的网络博客与社交媒体国际大会正面临多个同类会议的竞争压力。
Twitter在学者们中如此受欢迎,不仅仅是因为它是一个海量公共数据集,还因为它是一个带有时间刻度的海量公共数据集——捕捉特定时间中(在一些情况下,也是在特定空间中)数百万人关于所有主题事项的想法。如 果你认为人们在公共舞台上谈论或推送的内容是有限制的,那你就大错特错了,实际情况绝非如此。而如果你认为人们在公共舞台上几乎可以谈论、推送任何内容, 那么你就对了:人们在Twitter上无话不谈,实际上,卫生研究者正在利用这个平台跟踪爆发性食物中毒。(可以花点时间想象一下……)
这些特性使得Twitter有别于其他数据丰富的社交网站。例如,Facebook拥有隐私政策,其内容不是按照时间顺序,而是按照动态消息(NewsFeed)的新颖算法排列。
这并不是说,利用Twitter开展学术研究就特别容易。尽管Twitter是一个公共平台,但仅有很小一部分——约占Twitter数据流的 1%,Twitter将其称为“汽酒”(spritzer)——是公众可以通过Twitter应用程序编程接口(API)免费获取的。一些特定合作伙伴 (其中一些是学者)经协商可以通过Twitter的“浇水管”(garden hose)略微扩大数据获取量(占数据流的10%)。若要通过Twitter 的“消防带”(firehose)进行完全访问,甚至取得特定搜索查询的无限访问权,则需付出高昂的费用,且只能通过少数几家供应商获得。【尽管国会图书 馆(Library of Congress)存储有整个Twitter档案,但它并没有能力满足它收到的大量数据请求。】
今年早些时候,在一片群情激动的欢呼声中,Twitter宣布了一项数据授权计划,以减轻学者开展此类研究的成本负担。但事实上,该公司的授权数量极其有限:在1300个申请人中,仅有6人获得了授权,占0.5%。Texifter公司目前向36个研究团队提供类似授权。
现在,学者们在使用这个平台从事研究时显然更加得心应手。数据过滤技术正在变得愈发精确和复杂。同时,学者们正逐渐了解Twitter 最适合哪类研究。阿达尔称,该平台的数据最适合了解某时某地正在发生什么,但依然不是一个特别靠谱的预测工具。
也有人仍在担心Twitter数据样本的代表性。正如一位涉猎Twitter研究的学者对我所说的那样,你很难判断你所观察到的有多少是人类行为,有多少是Twitter上的人类行为。
Texifter公司的舒尔曼表示,“这可能是一时的风潮,可能我们会认为,以对Twitter500万活跃用户的研究概括整个世界完全是一种愚蠢的行为”。“但我不这样认为。如果有人声称Twitter无足轻重,那才是真正的愚蠢。”
或者,也许Twitter的确不容小觑,但它仍然是一时的风潮。阿达尔已经注意到了这样的迹象:学者对该平台的青睐程度已不如从前。他指出,“仍然 有大量关于Twitter的研究。但有人已将目光投向其他社交媒体。当研究同一事物的人数过多时,我们就不得不转移目标了,尝试着做出更加新颖的贡献。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在分类变量关联分析中(如 “吸烟与肺癌的关系”“性别与疾病发病率的关联”),卡方检验 P 值与 OR 值(比值比,Odds Ratio)是 ...
2025-11-05CDA 数据分析师的核心价值,不在于复杂的模型公式,而在于将数据转化为可落地的商业行动。脱离业务场景的分析只是 “纸上谈兵” ...
2025-11-05教材入口:https://edu.cda.cn/goods/show/3151 “纲举目张,执本末从。” 若想在数据分析领域有所收获,一套合适的学习教材至 ...
2025-11-05教材入口:https://edu.cda.cn/goods/show/3151 “纲举目张,执本末从。” 若想在数据分析领域有所收获,一套合适的学习教材至 ...
2025-11-04【2025最新版】CDA考试教材:CDA教材一级:商业数据分析(2025)__商业数据分析_cda教材_考试教材 (cdaglobal.com) ...
2025-11-04在数字化时代,数据挖掘不再是实验室里的技术探索,而是驱动商业决策的核心能力 —— 它能从海量数据中挖掘出 “降低成本、提升 ...
2025-11-04在 DDPM(Denoising Diffusion Probabilistic Models)训练过程中,开发者最常困惑的问题莫过于:“我的模型 loss 降到多少才算 ...
2025-11-04在 CDA(Certified Data Analyst)数据分析师的工作中,“无监督样本分组” 是高频需求 —— 例如 “将用户按行为特征分为高价值 ...
2025-11-04当沃尔玛数据分析师首次发现 “啤酒与尿布” 的高频共现规律时,他们揭开了数据挖掘最迷人的面纱 —— 那些隐藏在消费行为背后 ...
2025-11-03这个问题精准切中了配对样本统计检验的核心差异点,理解二者区别是避免统计方法误用的关键。核心结论是:stats.ttest_rel(配对 ...
2025-11-03在 CDA(Certified Data Analyst)数据分析师的工作中,“高维数据的潜在规律挖掘” 是进阶需求 —— 例如用户行为包含 “浏览次 ...
2025-11-03在 MySQL 数据查询中,“按顺序计数” 是高频需求 —— 例如 “统计近 7 天每日订单量”“按用户 ID 顺序展示消费记录”“按产品 ...
2025-10-31在数据分析中,“累计百分比” 是衡量 “部分与整体关系” 的核心指标 —— 它通过 “逐步累加的占比”,直观呈现数据的分布特征 ...
2025-10-31在 CDA(Certified Data Analyst)数据分析师的工作中,“二分类预测” 是高频需求 —— 例如 “预测用户是否会流失”“判断客户 ...
2025-10-31在 MySQL 实际应用中,“频繁写入同一表” 是常见场景 —— 如实时日志存储(用户操作日志、系统运行日志)、高频交易记录(支付 ...
2025-10-30为帮助教育工作者、研究者科学分析 “班级规模” 与 “平均成绩” 的关联关系,我将从相关系数的核心定义与类型切入,详解 “数 ...
2025-10-30对 CDA(Certified Data Analyst)数据分析师而言,“相关系数” 不是简单的数字计算,而是 “从业务问题出发,量化变量间关联强 ...
2025-10-30在构建前向神经网络(Feedforward Neural Network,简称 FNN)时,“隐藏层数目设多少?每个隐藏层该放多少个神经元?” 是每个 ...
2025-10-29这个问题切中了 Excel 用户的常见困惑 —— 将 “数据可视化工具” 与 “数据挖掘算法” 的功能边界混淆。核心结论是:Excel 透 ...
2025-10-29在 CDA(Certified Data Analyst)数据分析师的工作中,“多组数据差异验证” 是高频需求 —— 例如 “3 家门店的销售额是否有显 ...
2025-10-29