
百度大数据实验室范伟:如何打造大数据生态圈
在日前举行的百度世界大会上,百度喊出了近来互联网界颇为流行的“生态”口号。百度的“生态”与视频、手机、电视没有关系,它要建立的是连接3600行的大数据生态圈。
“百度是天然的大数据公司,覆盖全网6亿网民,每天响应60亿次搜索请求,150亿次定位请求。”百度大数据实验室副主任范伟表示。然而,然而如何在海量信息中准确甄别信息、计算相关信息、快速反馈信息,仍是技术研发人员面临的严峻考验。
大数据问诊
百度日前发布了慧医疗、慧城市、慧创业三款应用。能否以“慧医疗”为例,为我们介绍下,百度采用了哪些技术?大数据又是如何应用的呢?
慧医疗其中的一项应用是深度医疗对话机器人,通过语音输入或在应用界面输入文字,用户可以和机器人进行对话。你输入自己的疾病症状,她可以对你的疾病进行分析,并根据你的需求提供建议或帮助。重要的是,当用户意图和信息不明确时,深度对话机器人会智能的揣摩用户意图,引导用户。在充分理解,用户需求后,提供用户需要的信息。
机器人对用户问题的回答都是以大数据为基础的。网上有两类医疗信息,一类是病人之间的信息共享,一类是医生之间的信息交流。专业的医疗信息虽然能在网上和医书里获取,但内容十分有限。比如网上关于心脏病、糖尿病的信息很多,但是关于心脏搭桥的信息就很少。这些信息鱼龙混杂,重要的是进行信息甄别,对信息的可信度进行分析。可信度分析也是通过数据计算出来,比如有多少人参考了这个答案,这个人回答过多少问题,他(她)回答问题的所用的词汇分析等等。核实后的信息会整合成一个类似的知识库,每条信息都有个0-1间的可信度。用户提出的问题,都用库里的信息作为基础回答。
提问和回答之间如何做到信息匹配呢?
用户提问的意图也有很多种,我们系统里大概有数十种用户意图的分类,比如说你想知道是什么病,还是想知道吃什么药,自己怎样调养。但是有时候用户提问的意图并不明确,例如“我今天不舒服”。这样我们的系统会和用户进一步揣摩、明确意图,例如问他(她)是想获得治疗信息、疾病知识,还是医生信息,再提供服务。我们的意图模型,利用基于深度学习的建模,精准率达到了90%多。
目前市场上移动医疗的应用程序也很多。慧医疗所应用的技术处于什么水平呢?
通过大数据和人工智能等技术实现自然语言问诊,问诊答复的精准率超过了70%,据我了解我们是业内第一家做到这个准确率的。我们机器人会确认用户意图,当意图不明确时她会揣摩和追问,以保证答案的是用户需要知道的信息。
百度大数据实验室目前的整体情况是怎样的?
大数据实验室成立于去年4月,关注大规模机器学习算法和应用、大数据预测分析和垂直行业应用探索、带结构大数据的算法研究、智能系统的研究等方向。实验室分为北京和美国硅谷两个分部。实验室采用承诺承包制,你选择的项目你负责。我负责关键架构,关键技术攻关和方向性的问题,路不能走错。我们的大规模机器学习算法、深度学习技术、人机对话技术在业界都处于领先水平。
方兴未艾
国内大数据产业方兴未艾,国务院不久前也印发了《大数据发展行动纲要》。你如何看国内大数据产业的发展?
从创业者角度讲,你要了解用户需求,解决用户的痛点,才能能带动产业、解决就业,还能把很多技术出口到国外去。我们实验室的大规模机器学习算法、搜索技术、图像识别、深度学习等都是世界级水平的。
美国在很多方面迭代比较慢,因为它是已经发展的比较成熟了,欧洲公司也比较慢。但我觉得百度迭代非常非常快。现在很多新概念都是在中国、在以色列等地区出现的。这是思维比较活跃的国家。
国内大数据产业很火,有些是真的,有些是忽悠。要看大数据技术应用之后能否实现对现有模式的改变,能改变多少,这些改变是否有帮助。
你理想中未来的数据生活是怎样的?
手机真正成为你的生活秘书。比如今天我加班晚了,通过定位信息等和手环的健康信息检测,手机能知道我没吃饭,会主动推送说,“要不要点个外卖?”我去葡萄牙出差,手机知道我平时喜欢跑步,会推送给我当地最适合跑步的地方。这种智能化服务会让用户觉得生活质量都提高了。你能专注于你喜欢的事情,这是我期待看到的。
你描述的场景应该如何去努力实现呢?
定位信息、健康数据检测、地图位置信息等,这些在技术上都不难。但这些靠一家公司无法完成,需要多个企业、部门进行合作,打破一些壁垒,包括政策性的壁垒和行业间的壁垒,这样1+1的效果就大于2。我希望我们的技术不仅仅是服务于某家公司,而是服务360行,带动整个社会进步。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
2025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-06-052025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-05-27CDA数据分析师证书考试体系(更新于2025年05月22日)
2025-05-26解码数据基因:从数字敏感度到逻辑思维 每当看到超市货架上商品的排列变化,你是否会联想到背后的销售数据波动?三年前在零售行 ...
2025-05-23在本文中,我们将探讨 AI 为何能够加速数据分析、如何在每个步骤中实现数据分析自动化以及使用哪些工具。 数据分析中的AI是什么 ...
2025-05-20当数据遇见人生:我的第一个分析项目 记得三年前接手第一个数据分析项目时,我面对Excel里密密麻麻的销售数据手足无措。那些跳动 ...
2025-05-20在数字化运营的时代,企业每天都在产生海量数据:用户点击行为、商品销售记录、广告投放反馈…… 这些数据就像散落的拼图,而相 ...
2025-05-19在当今数字化营销时代,小红书作为国内领先的社交电商平台,其销售数据蕴含着巨大的商业价值。通过对小红书销售数据的深入分析, ...
2025-05-16Excel作为最常用的数据分析工具,有没有什么工具可以帮助我们快速地使用excel表格,只要轻松几步甚至输入几项指令就能搞定呢? ...
2025-05-15数据,如同无形的燃料,驱动着现代社会的运转。从全球互联网用户每天产生的2.5亿TB数据,到制造业的传感器、金融交易 ...
2025-05-15大数据是什么_数据分析师培训 其实,现在的大数据指的并不仅仅是海量数据,更准确而言是对大数据分析的方法。传统的数 ...
2025-05-14CDA持证人简介: 万木,CDA L1持证人,某电商中厂BI工程师 ,5年数据经验1年BI内训师,高级数据分析师,拥有丰富的行业经验。 ...
2025-05-13CDA持证人简介: 王明月 ,CDA 数据分析师二级持证人,2年数据产品工作经验,管理学博士在读。 学习入口:https://edu.cda.cn/g ...
2025-05-12CDA持证人简介: 杨贞玺 ,CDA一级持证人,郑州大学情报学硕士研究生,某上市公司数据分析师。 学习入口:https://edu.cda.cn/g ...
2025-05-09CDA持证人简介 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度、美团、阿里等 ...
2025-05-07相信很多做数据分析的小伙伴,都接到过一些高阶的数据分析需求,实现的过程需要用到一些数据获取,数据清洗转换,建模方法等,这 ...
2025-05-06以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda.cn/g ...
2025-04-30CDA持证人简介: 邱立峰 CDA 数据分析师二级持证人,数字化转型专家,数据治理专家,高级数据分析师,拥有丰富的行业经验。 ...
2025-04-29CDA持证人简介: 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度,美团,阿里等 ...
2025-04-28CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-27