京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据:核心问题是“人”不是“技术”_数据分析师
“要解决数字孤岛,现在的核心问题不是技术问题,而是管理问题,法律问题。”上海超级计算中心副主任李根国博士对中国青年报记者说。
“你注意到没有,每个人的手机都变成采集器了。”这位数学专家很清楚阿里巴巴等商业公司的大数据发展异常红火。手机拥有者刚显示出对某个商品表示兴趣,30秒钟之内精确的广告就会投放过来。
李根国所在的超级计算中心一直为高精尖的科研项目提供模拟和运算的平台。2014年,上海大数据中心将在超级计算中心挂牌。李根国介绍说,政府主导的大数据将会有广泛的用途。除了人口管理外,还有空间管理,绘制城市地图,建立导航系统。上海市成立了一个和航天局合作的北斗应用有限公司,注册资金两个亿,推动北斗应用落地。在相应的信息系统里,有了传感信息后,救护车、公交车走到哪里了,管理者看得清清楚楚。此外,用大数据搜集经济运行的数据也改变着传统的政府统计。从抽样调查抽取几个样本到大数据的全样本,管理系更强,更准确。
像上淘宝一样挂号看病
何萍所在的上海申康医院发展中心,就是大数据用于公共服务的典型范例。
“我们的医疗预约平台每天产生的数据是P级。”申康医疗事业部的高级工程师、医联中心主任何萍说。1P相当于20万部5G大小的高清电影。
据何萍观察,老百姓通常是一大早看病,但往往是早上出门,真正看上病已是下午,挂号排队太慢了。有时没看上,一天就要跑几家医院。而现在,挂号可以仅需一部手机。
何萍所在的申康团队指导开发的上海三级医院预约平台上有上海所有区县的38家医院的专家信息,精确到哪个科、哪天排班都清楚可查。市民可以直接预约感兴趣的专家,预约精确到一个小时,不用过分排队。每次挂号信息的变动就会进入HIS(医院信息系统)信息里,预约成功短信知会。医保卡一刷实时互通。
市民在联网的任何一家医院看病,医生都可以在数据库中调出住院小结和处方等患者信息,医院之间并无壁垒,信息联通包括影像互认。比如病人在某家医院做过CT, 在另一家医院看病时,片子和报告会详细地显示出来。如果医生判断病情并无特别需要再做检查,比如CT显示在一个月内,他可以直接以这份非本医院的报告作为诊断依据,免去病人再受辐射之苦。
“医疗专家是紧缺资源。有时候老百姓只认大牌的专家,其他的都不知道。这就是医疗信息不对称造成的,也是通过平台可以改善的。”何萍说。他们参考淘宝的做法,为预约的市民推荐“你同样喜欢”。在有号的情况下,市民可以同步选择同类医疗专家。看完病还可以打星和评价。比方病人都想看血液专家吴孟超,但他90多岁的人了,一周就来一次,何萍他们就会推荐吴孟超的学生和师弟师妹,也都是很好的专家,患者满意,医院也实现了分流。
最大的突破还是在管理机制上
李根国认为,政府主导的大数据服务将更侧重对社会管理提供公共服务。在他看来,大数据未来发展面临的壁垒,更多来自于技术之外。他发现,一个人的基础人口数据有五十几个字段,包含年龄、性别、社保,户籍等信息。各主管单位各自掌握,往往并不共享,一个人的信息在一处更改后,在另一处不能同步更改,就会造成很多麻烦。而基层街道、区县需要弄清楚自己小区内的户籍人口,流动人口以进行管理,但却无法从掌握数据的上级部门获得相关数据。
在医疗系统工作多年的何萍觉得,最大的突破还是在管理机制上。
医疗领域多年来有着固有的思维,医院各有所属互不相认,这曾经是“搬不动的大山”。上海市基于电子信息档案的卫生系统工程,是国内首例采用美国HIS标准来运行的信息平台。这个项目在2006年启动,2008年23家市级医院联通起来,2010年卫生部和总后勤部所属的10家医院也加入进来,紧接着连接着的是4家郊区医院和属于宋庆龄基金会的医院,形成了现在38家的规模。
从社区医院一层层打通到一二三级医院,数据不能有断档。打破信息的壁垒,也对医院的管理规范提出了更高的要求。排班涉及科室、病房、门诊、查房,合理协调好以后需要提前一个月上传平台。预约精确到一个小时,牵一发动全身。一旦要变更,要把短消息及时推送出去。
“大数据在带来我们产业发展的时候,怎么防止不法分子利用?系统安全是第一位的。包括运行的物理安全,和信息安全。”李根国说。
而为公共服务时,管理上的疏忽有时会带来安全隐患。
接受采访前一天,何萍就接到一个患者的投诉电话:他的乙肝病人身份在社区医院看小毛病时显示在系统上,病人既尴尬又愤怒。实际上,系统早有规定:为了避免歧视,对于传染病的一些数据共享要求是有严格保护的,只有在问诊相关病症时才会有所显示。但在一二三级联动过程中,数据推到基层,区里没有管理好。
“上层设计好了,技术才有支撑。”何萍感慨说。这个本科硕士都攻读信息工程的标准工科女,博士选择了管理学。
大数据是台综合大戏
2003年,从测绘专业毕业的毛炜青在一线工作了一段时间以后,3天内开发完成了一个基于服务的带有GIS分析功能的地名处理软件工具,在民防办信息中心的服务器上运行,这个基于地理位置的系统为当时社会管理者提供了整个上海市的流动与常驻人口的信息地图。
“地理信息本来就是综合的。”这位上海市测绘员基础信息地理中心的总工程师、国家注册测绘师对中国青年报记者说。在测绘一线工作时,他需要对测绘地的地质、水文甚至建筑、文化都有所了解才能做到精确。而如今,他越来越多地需要与其他政府部门合作,将地理信息与人口等信息相连。据他介绍,随着一个个cbd的兴起,现在的行业新热点是获取楼内的位置信息,用数据再造一座虚拟的热闹大楼,方便火灾监控等一系列的社会管理。
他的团队并不需要如阿里巴巴等商业公司一样,24小时在线为涌进来的数据准备着,他们所做的工作主要是利用超强的计算能力,汇集和加工数据。首先,从网络上搜集的和政府提供的数据。通过技术和人工的手段来甄别:哪些有用,哪些是垃圾;接着,对汇集的数据以应用的不同进行分类,打上标签,用特定的关键字就能查到。
何萍团队近期的工作是与银联的合作。从2010年起,上海许多医院开始推行各自的充值卡,用于院内消费。和银联合作后,一张卡可以在所有医院使用,既方便患者看病,又减轻窗口工作量。卡片轻松一划完成交易,需要涉及银行之间、医院之间划拨与结算。
“我们自己做一套结算体系,既费精力,又不专业,这需要行业间的融合。”何萍说。巧的是,在不久前的一次科研性奖项的竞争中,这两家是对手。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-08-24 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-08-21在数据分析与数据可视化工作中,直方图是展示数据分布特征、离散程度、集中区间的核心图表,能够直观呈现数值数据的频次分布规律 ...
2026-08-20在数据分析领域有一句核心准则:垃圾数据进,垃圾数据出。数据清洗是数据分析、数据建模、数据可视化之前的必经前置工序,也是保 ...
2026-08-20 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-08-20在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19在零售行业大数据分析与精细化运营领域,纸尿裤旁摆放啤酒是最经典、最具代表性的商业案例。两种看似毫无关联的商品,一个是婴幼 ...
2026-08-19 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-08-19在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17