京公网安备 11010802034615号
经营许可证编号:京B2-20210330
百度大数据实验室范伟:如何打造大数据生态圈
在日前举行的百度世界大会上,百度喊出了近来互联网界颇为流行的“生态”口号。百度的“生态”与视频、手机、电视没有关系,它要建立的是连接3600行的大数据生态圈。
“百度是天然的大数据公司,覆盖全网6亿网民,每天响应60亿次搜索请求,150亿次定位请求。”百度大数据实验室副主任范伟表示。然而,然而如何在海量信息中准确甄别信息、计算相关信息、快速反馈信息,仍是技术研发人员面临的严峻考验。
大数据问诊
百度日前发布了慧医疗、慧城市、慧创业三款应用。能否以“慧医疗”为例,为我们介绍下,百度采用了哪些技术?大数据又是如何应用的呢?
慧医疗其中的一项应用是深度医疗对话机器人,通过语音输入或在应用界面输入文字,用户可以和机器人进行对话。你输入自己的疾病症状,她可以对你的疾病进行分析,并根据你的需求提供建议或帮助。重要的是,当用户意图和信息不明确时,深度对话机器人会智能的揣摩用户意图,引导用户。在充分理解,用户需求后,提供用户需要的信息。
机器人对用户问题的回答都是以大数据为基础的。网上有两类医疗信息,一类是病人之间的信息共享,一类是医生之间的信息交流。专业的医疗信息虽然能在网上和医书里获取,但内容十分有限。比如网上关于心脏病、糖尿病的信息很多,但是关于心脏搭桥的信息就很少。这些信息鱼龙混杂,重要的是进行信息甄别,对信息的可信度进行分析。可信度分析也是通过数据计算出来,比如有多少人参考了这个答案,这个人回答过多少问题,他(她)回答问题的所用的词汇分析等等。核实后的信息会整合成一个类似的知识库,每条信息都有个0-1间的可信度。用户提出的问题,都用库里的信息作为基础回答。
提问和回答之间如何做到信息匹配呢?
用户提问的意图也有很多种,我们系统里大概有数十种用户意图的分类,比如说你想知道是什么病,还是想知道吃什么药,自己怎样调养。但是有时候用户提问的意图并不明确,例如“我今天不舒服”。这样我们的系统会和用户进一步揣摩、明确意图,例如问他(她)是想获得治疗信息、疾病知识,还是医生信息,再提供服务。我们的意图模型,利用基于深度学习的建模,精准率达到了90%多。
目前市场上移动医疗的应用程序也很多。慧医疗所应用的技术处于什么水平呢?
通过大数据和人工智能等技术实现自然语言问诊,问诊答复的精准率超过了70%,据我了解我们是业内第一家做到这个准确率的。我们机器人会确认用户意图,当意图不明确时她会揣摩和追问,以保证答案的是用户需要知道的信息。
百度大数据实验室目前的整体情况是怎样的?
大数据实验室成立于去年4月,关注大规模机器学习算法和应用、大数据预测分析和垂直行业应用探索、带结构大数据的算法研究、智能系统的研究等方向。实验室分为北京和美国硅谷两个分部。实验室采用承诺承包制,你选择的项目你负责。我负责关键架构,关键技术攻关和方向性的问题,路不能走错。我们的大规模机器学习算法、深度学习技术、人机对话技术在业界都处于领先水平。
方兴未艾
国内大数据产业方兴未艾,国务院不久前也印发了《大数据发展行动纲要》。你如何看国内大数据产业的发展?
从创业者角度讲,你要了解用户需求,解决用户的痛点,才能能带动产业、解决就业,还能把很多技术出口到国外去。我们实验室的大规模机器学习算法、搜索技术、图像识别、深度学习等都是世界级水平的。
美国在很多方面迭代比较慢,因为它是已经发展的比较成熟了,欧洲公司也比较慢。但我觉得百度迭代非常非常快。现在很多新概念都是在中国、在以色列等地区出现的。这是思维比较活跃的国家。
国内大数据产业很火,有些是真的,有些是忽悠。要看大数据技术应用之后能否实现对现有模式的改变,能改变多少,这些改变是否有帮助。
你理想中未来的数据生活是怎样的?
手机真正成为你的生活秘书。比如今天我加班晚了,通过定位信息等和手环的健康信息检测,手机能知道我没吃饭,会主动推送说,“要不要点个外卖?”我去葡萄牙出差,手机知道我平时喜欢跑步,会推送给我当地最适合跑步的地方。这种智能化服务会让用户觉得生活质量都提高了。你能专注于你喜欢的事情,这是我期待看到的。
你描述的场景应该如何去努力实现呢?
定位信息、健康数据检测、地图位置信息等,这些在技术上都不难。但这些靠一家公司无法完成,需要多个企业、部门进行合作,打破一些壁垒,包括政策性的壁垒和行业间的壁垒,这样1+1的效果就大于2。我希望我们的技术不仅仅是服务于某家公司,而是服务360行,带动整个社会进步。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在Python数据分析中,Pandas库的DataFrame是最核心、最常用的结构化数据表对象,类似于Excel的二维表格,具备规整的行列结构、字 ...
2026-09-07在数据分析、经营复盘、业绩预测与经济统计工作中,平均增速(平均增长率)是衡量数据长期变化趋势、业务发展快慢的核心指标。不 ...
2026-09-07 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-09-07随着大数据技术的快速发展,商业竞争逐步从传统的经验式经营转变为数据驱动的精细化运营。海量的用户行为数据、交易数据、运营数 ...
2026-09-04CDA数据分析师 出品 作者:李诗怡 1. 波士顿矩阵(BCG Matrix) 定义: BCG于1970年提出的业务组合分析工具,以"市场增长率"(纵 ...
2026-09-04 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-09-04数据透视表是Excel与Power BI中最核心的数据分析工具,具备快速汇总、维度拆分、动态筛选的能力,可高效完成数据归类与统计展示 ...
2026-09-03在Power BI数据分析可视化场景中,堆积柱状图+折线图是最常用的复合图表组合。堆积柱状图适合展示各细分维度当期数值、结构占比 ...
2026-09-03 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-09-03CDA数据分析师 出品 作者:李诗怡 一、8个核心数据清洗函数 1. TRIM:一键清除多余空格(最常用) 作用:仅保留文本中"单词/字 ...
2026-09-02数据分析的核心并非单纯操作工具、整理报表或绘制图表,而是依靠科学的思维逻辑挖掘数据价值、解释业务现象、指导经营决策。在完 ...
2026-09-02在社会经济、产业研究、区域治理与大数据实证分析中,面板数据是最具研究价值的数据类型。面板数据同时包含截面维度与时间维度信 ...
2026-09-02 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-09-02在数据驱动决策的体系中,数据分析按照分析目的可分为描述性分析、诊断性分析、预测性分析与指导性分析四大类型。其中,诊断性分 ...
2026-09-01网络请求是Python爬虫开发、接口测试、数据拉取的核心基础功能,Python生态中主要依靠 urllib 和 requests 两大库实现HTTP请求操 ...
2026-09-01 很多数据分析师面对业务问题时,常常感到“知道要分析,却不知道用什么方法”。其实,数据分析并非无章可循——从三大基础范 ...
2026-09-01在数据库设计与业务数据维护中,自增ID是数据表最常用的主键字段,用于唯一标识每一条业务数据,正常状态下ID应保持连续递增。但 ...
2026-08-31在数理统计、数据分析、经济测算与日常量化评估中,平均值是刻画数据集中趋势、反映整体水平的基础核心指标。在实际应用中,最常 ...
2026-08-31在数据驱动的时代,数据分析早已不是“凭经验、靠感觉”的零散操作,而是一套具备固定逻辑、标准化流程的系统方法——这就是数据 ...
2026-08-31在大数据时代背景下,海量行业数据亟需通过专业化工具挖掘潜在价值,辅助企业业务决策、优化运营模式、规避经营风险。Python凭借 ...
2026-08-28