
大数据将有助于提高医疗保健行业的效率,促进在该行业推行问责制。然而到目前为止,其他行业在这方面要成功得多:通过对多种数据源进行大规模的整合和分析,获得了实用价值。
那些成功行业弄明白了一个问题,那就是:当不同的数据集在具体某个人的层面上连接起来时,大数据就会产生变革性的价值。相比之下,生物医学大数据分散在研究机构中,而且被特意地隔离起来,目的是为了保护病人的隐私。连接这些分散的数据,既有技术方面的挑战,也有社会方面的挑战。只有迎接两个方面的挑战,才能使生物医学大数据对医疗保健行业发挥充分的作用。在今天的“观点”栏目中,我们要着重分析这种连接所带来的挑战。CDA数据分析师:http://cda.pinggu.org/
竞选活动、政府和企业利用大数据尽可能更多地了解选民或客户情况,然后利用先进的估算方法来制定策略。2012年奥巴马竞选的时候,把来自脸谱网(Facebook)、人口普查、选民列表以及积极推广等多种渠道的数据综合起来,以确认、接近和影响那些犹豫不决的选民。国家安全局通过电话公司和互联网公司来确认恐怖分子。CDA数据分析师:http://cda.pinggu.org/
通过用户的上网历史和地理环境,谷歌公司将每个人的搜索结果进行了个性化处理。在所有的这些事例中,关键是已经超出了综合数据的范围,将信息连接到了具体的人。知道在某个行政区域内有很多犹豫不决的选民是有所帮助的,但是跟这些具体的人们获得联系可能有助于赢得一场竞选。
获得大数据可能会使医生和研究人员验证新的假设,并确认那些可能遭受干预的领域。例如,通过从不同地区的商店所获得的杂货购买模式,能否预测出公共卫生数据库中肥胖症和2型糖尿病的患病率呢?能否像配药时对后续配方进行测量那样,将家庭监视装置所记录的运动量跟降胆固醇药物的疗效相互关联起来呢?病人的脸谱网网友在多大程度上能够影响他们对生活方式的选择和对医学治疗的依从呢?至于这些相互关联的推断是否真正地存在于大数据中,以及医生们将如何利用这些信息,这些情况都还不清楚。
然而,将数据连接到具体病人的层面上来,是探索这些可能性的先决条件。
在有效利用生物医学大数据方面,首要的挑战就是要确定卫生保健信息的潜在来源是什么,以及确定将这些数据连接起来之后所带来的价值如何。将数据集按照“大小”从不同的方面进行条理化,这个大数据就会提供解决问题的潜在方案。
一些大数据,如电子健康记录(EHRs),提供详尽资料,包括病人接受诊断时的多种资料(如:图片、诊断记录等)。尽管如此,其他大数据,如保险理赔数据,提供纵深资料——顾及病人在很长一段时间里、在某个狭窄的疾病类型范围内所经历的病史。当连接数据有助于填补空白的时候,这些大数据才会增加价值。CDA数据分析师:http://cda.pinggu.org/
只有记住这些,才能更容易明白如何将卫生保健系统之外非传统来源的生物医学数据融入这些情况之中。尽管数据的质量有所不同,但社会媒体、信用卡购物、人口普查记录以及大量其他类型的数据,都会有助于收集一个病人的历史资料,特别是有助于揭示可能对健康产生影响的社会因素和环境因素。
英语原文:
Finding the Missing Link for Big Biomedical Data
It has been argued that big data will enable efficiencies and accountability in health care. However, to date, other industries have been far more successful at obtaining value from large-scale integration and analysis of heterogeneous data sources. What these industries have figured out is that big data becomes transformative when disparate data sets can be linked at the individual person level. In contrast, big biomedical data are scattered across institutions and intentionally isolated to protect patient privacy. Both technical and social challenges to linking these data must be addressed before big biomedical data can have their full influence on health care. It is this linkage challenge that we address in this Viewpoint.
Political campaigns, government, and businesses use big data to learn everything possible about their constituents or customers, and then apply advanced computation to hone strategy. The 2012 Obama campaign identified, approached, and influenced swing voters using data fused from Facebook, census, voter lists, and active outreach. The National Security Agency employs massive data on individuals from phone and Internet companies to identify terrorists. Google personalizes search results with the user’s web history and geographic context. In all these examples, the key has been to go beyond aggregate data and link information to individual people. Knowing that there are many swing voters in a zip code is helpful, but contacting those specific individuals may help to win an election.
Linking big data will enable physicians and researchers to test new hypotheses and identify areas of possible intervention. For example, do grocery shopping patterns obtained from stores in various areas predict rates of obesity and type 2 diabetes in public health databases? Does level of exercise recorded by home monitoring devices correlate with response rates of cholesterol-lowering drugs, as measured by continued refills at the pharmacy? Does increased physical distance from patients’ homes to hospitals and pharmacies affect utilization of health care and result in distinct patterns in claims data? To what extent do patients’ Facebook friends influence lifestyle choices and compliance with medical treatments? It is unknown whether these types of correlative inferences will really be found in big data and how physicians would use that information. However, being able to link data at the patient level is a prerequisite to exploring the possibilities.
The first challenge in using big biomedical data effectively is to identify what the potential sources of health care information are and to determine the value of linking these together. The Figure presents a potential way of approaching this problem by organizing data sets along different dimensions of “bigness.” Although some big data, such as electronic health records (EHRs), provide depth by including multiple types of data (eg, images, notes, etc) about individual patient encounters, others, such as claims data provide longitudinality—a view of a patient’s medical history over an extended period for a narrow range of categories. Linking data adds value when they help fill in the gaps. With this in mind, it becomes easier to see how nontraditional sources of biomedical data outside of the health care system fit into the picture. Social media, credit card purchases, census records, and numerous other types of data, despite varying degrees of quality, can help assemble a holistic view of a patient, and, in particular, shed light on social and environmental factors that may be influencing health.
CDA数据分析师:http://cda.pinggu.org/
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
训练与验证损失骤升:机器学习训练中的异常诊断与解决方案 在机器学习模型训练过程中,“损失曲线” 是反映模型学习状态的核心指 ...
2025-09-19解析 DataHub 与 Kafka:数据生态中两类核心工具的差异与协同 在数字化转型加速的今天,企业对数据的需求已从 “存储” 转向 “ ...
2025-09-19CDA 数据分析师:让统计基本概念成为业务决策的底层逻辑 统计基本概念是商业数据分析的 “基础语言”—— 从描述数据分布的 “均 ...
2025-09-19CDA 数据分析师:表结构数据 “获取 - 加工 - 使用” 全流程的赋能者 表结构数据(如数据库表、Excel 表、CSV 文件)是企业数字 ...
2025-09-19SQL Server 中 CONVERT 函数的日期转换:从基础用法到实战优化 在 SQL Server 的数据处理中,日期格式转换是高频需求 —— 无论 ...
2025-09-18MySQL 大表拆分与关联查询效率:打破 “拆分必慢” 的认知误区 在 MySQL 数据库管理中,“大表” 始终是性能优化绕不开的话题。 ...
2025-09-18DSGE 模型中的 Et:理性预期算子的内涵、作用与应用解析 动态随机一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明确:TIF 中的地名有哪两种存在形式? 在开始提取前,需先判断 TIF 文件的类型 —— ...
2025-09-17CDA 数据分析师:解锁表结构数据特征价值的专业核心 表结构数据(以 “行 - 列” 规范存储的结构化数据,如数据库表、Excel 表、 ...
2025-09-17Excel 导入数据含缺失值?详解 dropna 函数的功能与实战应用 在用 Python(如 pandas 库)处理 Excel 数据时,“缺失值” 是高频 ...
2025-09-16深入解析卡方检验与 t 检验:差异、适用场景与实践应用 在数据分析与统计学领域,假设检验是验证研究假设、判断数据差异是否 “ ...
2025-09-16CDA 数据分析师:掌控表格结构数据全功能周期的专业操盘手 表格结构数据(以 “行 - 列” 存储的结构化数据,如 Excel 表、数据 ...
2025-09-16MySQL 执行计划中 rows 数量的准确性解析:原理、影响因素与优化 在 MySQL SQL 调优中,EXPLAIN执行计划是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 对象的 text 与 content:区别、场景与实践指南 在 Python 进行 HTTP 网络请求开发时(如使用requests ...
2025-09-15CDA 数据分析师:激活表格结构数据价值的核心操盘手 表格结构数据(如 Excel 表格、数据库表)是企业最基础、最核心的数据形态 ...
2025-09-15Python HTTP 请求工具对比:urllib.request 与 requests 的核心差异与选择指南 在 Python 处理 HTTP 请求(如接口调用、数据爬取 ...
2025-09-12解决 pd.read_csv 读取长浮点数据的科学计数法问题 为帮助 Python 数据从业者解决pd.read_csv读取长浮点数据时的科学计数法问题 ...
2025-09-12CDA 数据分析师:业务数据分析步骤的落地者与价值优化者 业务数据分析是企业解决日常运营问题、提升执行效率的核心手段,其价值 ...
2025-09-12用 SQL 验证业务逻辑:从规则拆解到数据把关的实战指南 在业务系统落地过程中,“业务逻辑” 是连接 “需求设计” 与 “用户体验 ...
2025-09-11塔吉特百货孕妇营销案例:数据驱动下的精准零售革命与启示 在零售行业 “流量红利见顶” 的当下,精准营销成为企业突围的核心方 ...
2025-09-11