
大数据发展的瓶颈多多,完美的数据你等不来
大数据的发展是个循序渐进的过程,基于已有数据做好分析也很重要。“完美的数据永远是等不来的,碎片化的数据也可以整合起来做分析,做数据分析的出发点是有多少数据可以做多少事。”鄂维南说
研究院的一个方向,就是推动科研和人才培养。鄂维南多次表示:“发展大数据的最大瓶颈是人才。”他介绍,新成立北京大数据研究院,希望能够打造世界一流的大数据教育、科研创新和成果转化的国际化平台,吸引一些最有才华,最有进取心的一流人才。
鄂维南希望,用5-10年把北京大数据研究院建成国中国乃至世界大数据产业发展的一面旗帜。不过,他也直言,研究院虽然挂牌了,但“万里长征,才走完第一步”。
挂牌是大数据研究院“长征第一步”,但鄂维南自己,却已在数据之路“行军”多年。
学术+实践的“跨界者”
先后毕业于中国科技大学数学系、中科院计算数学所的鄂维南,获得美国加州大学洛杉矶分校博士学位,还是首届美国总统青年科学家与工程师奖、国际工业与应用数学协会科拉兹奖、冯康科学计算奖得主。
他的研究领域极其广泛,分布在数学、力学和理论物理的诸多方向,并均有重要的发现和贡献。非专业人士,还真难懂鄂维南研究的深奥内容,如“研究了弹性理论的微观基础,从量子力学和分子动力学模型出发导出了宏观层面下的非线性弹性理论,得到了经典的 Cauchy-Born 准则成立的稳定性条件。”目前,鄂维南为中国科学院院士,北京大学、普林斯顿大学教授,致力于大数据技术的科学研究和产业化,主持国家973重点项目《非结构化数据分析》并任首席科学家。
事实上,作为“大牛”,鄂维南不仅是数据科学的研究者,更是大数据的实践者。
2014年,普林科技成立,鄂维南任董事长。这是一家为金融、移动运营商、交通、物流和医疗等相关领域提供大数据建模和数据分析服务行业的综合咨询服务公司。
普林科技基于大数据技术,为客户提供模型、算法和系统支持,已合作公司包括美国第一大P2P公司Lending Club、国内P2P公司人人贷、内地三大运营商、中证信用等。
如普林科技运用大数据技术,联合三大运营商打造的基于13亿人手机通讯数据和精准评分模型,推出了能够自动化输出全面标签系统和深度用户画像的产品“普林号码分”,该产品被2016大数据技术与应用推进大会评为“大数据优秀解决方案奖”。
数据隐私是个无底洞
近年,越来越多学界、业界人士推动着中国大数据的发展。鄂维南直言,中国这么大的市场,我们做大数据在国际上竞争,至少要在某些领域领先。他也提醒,中国发展大数据,存在数据开放、数据质量、数据隐私和分析技术等“瓶颈”。
他提及两个故事:一位研究地质学的院士无奈感慨“地质研究只能研究外国的,不能研究中国的”,因为地质数据都在国家部门手中,却不对外开放;一位统计学的教授去气象局寻找一些最普通的气象数据,都吃了闭门羹。
一提数据开放,必谈数据隐私。鄂维南强调:“数据脱敏远远不够,隐私问题是一个无底洞。”
他举例,有人拿到了另一个人3个月的美国信用卡数据后发现,如果知道那个人昨天在某地买了一点东西,前天在另外一个商场买了东西;找到所有消费数据,并进一步了解消费习惯,就能了解消费方面的隐私。“这是脱敏的数据,没名字、没号码,但可以通过算法找到一个人的消费习惯。想靠法律办法解决隐私问题,严格来说不可能。”鄂维南说。
大数据发展的“瓶颈”多多,开放、质量、技术等都亟待突破,在鄂维南看来,大数据的发展是个循序渐进的过程,基于已有数据做好分析也很重要。“完美的数据永远是等不来的,碎片化的数据也可以整合起来做分析,做数据分析的出发点是有多少数据可以做多少事。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化时代,用户的每一次行为 —— 从电商平台的 “浏览→加购→购买”,到视频 APP 的 “打开→搜索→观看→收藏”,再到银 ...
2025-10-11在机器学习建模流程中,“特征重要性分析” 是连接 “数据” 与 “业务” 的关键桥梁 —— 它不仅能帮我们筛选冗余特征、提升模 ...
2025-10-11在企业的数据体系中,未经分类的数据如同 “杂乱无章的仓库”—— 用户行为日志、订单记录、商品信息混杂存储,CDA(Certified D ...
2025-10-11在 SQL Server 数据库操作中,“数据类型转换” 是高频需求 —— 无论是将字符串格式的日期转为datetime用于筛选,还是将数值转 ...
2025-10-10在科研攻关、工业优化、产品开发中,正交试验(Orthogonal Experiment)因 “用少量试验覆盖多因素多水平组合” 的高效性,成为 ...
2025-10-10在企业数据量从 “GB 级” 迈向 “PB 级” 的过程中,“数据混乱” 的痛点逐渐从 “隐性问题” 变为 “显性瓶颈”:各部门数据口 ...
2025-10-10在深度学习中,“模型如何从错误中学习” 是最关键的问题 —— 而损失函数与反向传播正是回答这一问题的核心技术:损失函数负责 ...
2025-10-09本文将从 “检验本质” 切入,拆解两种方法的核心适用条件、场景边界与实战选择逻辑,结合医学、工业、教育领域的案例,让你明确 ...
2025-10-09在 CDA 数据分析师的日常工作中,常会遇到这样的困惑:某电商平台 11 月 GMV 同比增长 20%,但究竟是 “长期趋势自然增长”,还 ...
2025-10-09Pandas 选取特定值所在行:6 类核心方法与实战指南 在使用 pandas 处理结构化数据时,“选取特定值所在的行” 是最高频的操作之 ...
2025-09-30球面卷积神经网络(SCNN) 为解决这一痛点,球面卷积神经网络(Spherical Convolutional Neural Network, SCNN) 应运而生。它通 ...
2025-09-30在企业日常运营中,“未来会怎样” 是决策者最关心的问题 —— 电商平台想知道 “下月销量能否达标”,金融机构想预判 “下周股 ...
2025-09-30Excel 能做聚类分析吗?基础方法、进阶技巧与场景边界 在数据分析领域,聚类分析是 “无监督学习” 的核心技术 —— 无需预设分 ...
2025-09-29XGBoost 决策树:原理、优化与工业级实战指南 在机器学习领域,决策树因 “可解释性强、处理非线性关系能力突出” 成为基础模型 ...
2025-09-29在标签体系的落地链路中,“设计标签逻辑” 只是第一步,真正让标签从 “纸上定义” 变为 “业务可用资产” 的关键,在于标签加 ...
2025-09-29在使用 Excel 数据透视表进行多维度数据汇总时,折叠功能是梳理数据层级的核心工具 —— 通过点击 “+/-” 符号可展开明细数据或 ...
2025-09-28在使用 Pandas 处理 CSV、TSV 等文本文件时,“引号” 是最容易引发格式混乱的 “隐形杀手”—— 比如字段中包含逗号(如 “北京 ...
2025-09-28在 CDA(Certified Data Analyst)数据分析师的技能工具箱中,数据查询语言(尤其是 SQL)是最基础、也最核心的 “武器”。无论 ...
2025-09-28Cox 模型时间依赖性检验:原理、方法与实战应用 在生存分析领域,Cox 比例风险模型(Cox Proportional Hazards Model)是分析 “ ...
2025-09-26检测因子类型的影响程度大小:评估标准、实战案例与管控策略 在检测分析领域(如环境监测、食品质量检测、工业产品合规性测试) ...
2025-09-26