京公网安备 11010802034615号
经营许可证编号:京B2-20210330
百度大数据实验室范伟:如何打造大数据生态圈
在日前举行的百度世界大会上,百度喊出了近来互联网界颇为流行的“生态”口号。百度的“生态”与视频、手机、电视没有关系,它要建立的是连接3600行的大数据生态圈。
“百度是天然的大数据公司,覆盖全网6亿网民,每天响应60亿次搜索请求,150亿次定位请求。”百度大数据实验室副主任范伟表示。然而,然而如何在海量信息中准确甄别信息、计算相关信息、快速反馈信息,仍是技术研发人员面临的严峻考验。
大数据问诊
百度日前发布了慧医疗、慧城市、慧创业三款应用。能否以“慧医疗”为例,为我们介绍下,百度采用了哪些技术?大数据又是如何应用的呢?
慧医疗其中的一项应用是深度医疗对话机器人,通过语音输入或在应用界面输入文字,用户可以和机器人进行对话。你输入自己的疾病症状,她可以对你的疾病进行分析,并根据你的需求提供建议或帮助。重要的是,当用户意图和信息不明确时,深度对话机器人会智能的揣摩用户意图,引导用户。在充分理解,用户需求后,提供用户需要的信息。
机器人对用户问题的回答都是以大数据为基础的。网上有两类医疗信息,一类是病人之间的信息共享,一类是医生之间的信息交流。专业的医疗信息虽然能在网上和医书里获取,但内容十分有限。比如网上关于心脏病、糖尿病的信息很多,但是关于心脏搭桥的信息就很少。这些信息鱼龙混杂,重要的是进行信息甄别,对信息的可信度进行分析。可信度分析也是通过数据计算出来,比如有多少人参考了这个答案,这个人回答过多少问题,他(她)回答问题的所用的词汇分析等等。核实后的信息会整合成一个类似的知识库,每条信息都有个0-1间的可信度。用户提出的问题,都用库里的信息作为基础回答。
提问和回答之间如何做到信息匹配呢?
用户提问的意图也有很多种,我们系统里大概有数十种用户意图的分类,比如说你想知道是什么病,还是想知道吃什么药,自己怎样调养。但是有时候用户提问的意图并不明确,例如“我今天不舒服”。这样我们的系统会和用户进一步揣摩、明确意图,例如问他(她)是想获得治疗信息、疾病知识,还是医生信息,再提供服务。我们的意图模型,利用基于深度学习的建模,精准率达到了90%多。
目前市场上移动医疗的应用程序也很多。慧医疗所应用的技术处于什么水平呢?
通过大数据和人工智能等技术实现自然语言问诊,问诊答复的精准率超过了70%,据我了解我们是业内第一家做到这个准确率的。我们机器人会确认用户意图,当意图不明确时她会揣摩和追问,以保证答案的是用户需要知道的信息。
百度大数据实验室目前的整体情况是怎样的?
大数据实验室成立于去年4月,关注大规模机器学习算法和应用、大数据预测分析和垂直行业应用探索、带结构大数据的算法研究、智能系统的研究等方向。实验室分为北京和美国硅谷两个分部。实验室采用承诺承包制,你选择的项目你负责。我负责关键架构,关键技术攻关和方向性的问题,路不能走错。我们的大规模机器学习算法、深度学习技术、人机对话技术在业界都处于领先水平。
方兴未艾
国内大数据产业方兴未艾,国务院不久前也印发了《大数据发展行动纲要》。你如何看国内大数据产业的发展?
从创业者角度讲,你要了解用户需求,解决用户的痛点,才能能带动产业、解决就业,还能把很多技术出口到国外去。我们实验室的大规模机器学习算法、搜索技术、图像识别、深度学习等都是世界级水平的。
美国在很多方面迭代比较慢,因为它是已经发展的比较成熟了,欧洲公司也比较慢。但我觉得百度迭代非常非常快。现在很多新概念都是在中国、在以色列等地区出现的。这是思维比较活跃的国家。
国内大数据产业很火,有些是真的,有些是忽悠。要看大数据技术应用之后能否实现对现有模式的改变,能改变多少,这些改变是否有帮助。
你理想中未来的数据生活是怎样的?
手机真正成为你的生活秘书。比如今天我加班晚了,通过定位信息等和手环的健康信息检测,手机能知道我没吃饭,会主动推送说,“要不要点个外卖?”我去葡萄牙出差,手机知道我平时喜欢跑步,会推送给我当地最适合跑步的地方。这种智能化服务会让用户觉得生活质量都提高了。你能专注于你喜欢的事情,这是我期待看到的。
你描述的场景应该如何去努力实现呢?
定位信息、健康数据检测、地图位置信息等,这些在技术上都不难。但这些靠一家公司无法完成,需要多个企业、部门进行合作,打破一些壁垒,包括政策性的壁垒和行业间的壁垒,这样1+1的效果就大于2。我希望我们的技术不仅仅是服务于某家公司,而是服务360行,带动整个社会进步。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
【核心关键词】客户、数据分析、指标体系、数据采集、数据指标、业务数据、分析思路、业务需求、分析方法 【专访摘要】本次 CDA ...
2026-07-24在数据分析、业务建模与数字化运营体系中,原始业务数据普遍存在缺失、重复、异常、口径不一致等质量问题,直接用于分析与建模会 ...
2026-07-24 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-07-24在数据驱动的精细化运营体系中,指标是业务判断、效果复盘、策略优化的核心依据。随着企业数据化程度提升,指标数量持续膨胀,但 ...
2026-07-23在用户运营与产品增长体系中,留存是衡量产品真实价值与用户粘性的核心标尺,也是决定用户生命周期价值、获客投产比的底层因素。 ...
2026-07-23 很多数据分析师精通Excel、SQL、Python等工具,但当被问到“面对一个具体的业务问题,该用什么分析方法”“描述性分析和诊断 ...
2026-07-23【核心关键词】埋点、产品、互联网、数据库、决策、数据分析、产品经理、商业模式、移动互联网、指标体系、运营模块、大数据平 ...
2026-07-22在高并发、大数据量的业务系统中,单表数据量达到千万级甚至亿级后,会出现查询性能骤降、索引维护成本飙升、存储扩容困难等问题 ...
2026-07-22 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-07-22在金融风控、企业运营、行业研究等数据分析场景中,大量数据以面板数据形态存在:例如多家分支机构连续多个季度的风险指标、多位 ...
2026-07-21 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-07-21一、活动介绍 2026暑期CDA备考冲刺季,为想利用假期拿证的你量身打造。考点胶囊内容搭配多重硬核福利,让你在旅行、实习、居家 ...
2026-07-21金融行业的运营风险贯穿业务全流程,涵盖交易欺诈、操作违规、流程漏洞、合规偏差、客户信用异常等多元场景,是银行、保险、证券 ...
2026-07-17财产保险作为金融行业的核心板块,涵盖车险、家财险、责任险、企财险等多元品类,是个人与企业抵御财产风险、经营风险的重要保障 ...
2026-07-17 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-07-17【核心关键词】模块、餐饮、客户、门店、企业、订单、供应链、多样化、产品、生产计划、数据分析、生产管理、物料管理、业务分 ...
2026-07-16在数字化分析时代,原始数据本身不具备业务价值,只有通过科学的统计学方法加工、拆解、验证与解读,才能挖掘数据背后的规律、差 ...
2026-07-16 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-07-16在描述性统计分析、数据预处理、异常值排查与多组数据分布对比工作中,箱线图(Box Plot)是应用最广泛的可视化与统计工具之一。 ...
2026-07-15在企业数据存储、业务统计与数据分析工作中,绝大多数业务数据都带有时间维度属性,例如订单创建时间、用户注册时间、支付完成时 ...
2026-07-15