京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代背景下的数据中心变革
用数据爆炸形容今天的IT发展一点也不为过,数据增长永无止境。”世纪互联李志霄博士认为对于企业来说,与用户使用习惯、地理分布、甚至企业需求变动都可以通过在大数据挖掘得到有价值的参考信息。大数据时代将信息价值的概念推到了企业CIO面前。
根据国际数据公司IDC 2011年发布的Digital Universe Study,全球信息总量每过两年,就会增长一倍。仅在2011年,全球被创建和被复制的数据总量为1.8ZB(1.8万亿GB)。相较2010年同期上涨超过1ZB,到2020年这一数值将增长到35ZB。这就是大数据的创建和产生。
“我们看现在的Facebook,全球用户数量正在逼近10亿,中国的新浪微博注册用户数量也已经破3亿,腾讯的即时通讯工具活跃用户达到7.1亿,仅次于中国和印度的人口数字。仅社交网络这一项所产生的数据就已经非常惊人。”
数据高效处理需求驱使数据中心变革
数据流量每上升一个数量级,要求IT具备相应的高效率处理能力,从而引发IT的革命。从PC机出现、互联网普及到今天的云计算,都是为提升IT效率而出现的技术和解决方案。
IDC预测2020年,全球所有IT部门拥有服务器的总量将会比现在多出十倍(包括虚拟机和物理机),所管理的数据增长50倍,而IT管理人员的总数增长幅度仅仅只会向上浮动1.5倍。大数据高效存储、有效提取的需求正在敦促传统数据中心向满足云计算应用条件的数据中心转型。
“虚拟化技术提升了传统物理机的使用效率,通过云计算形成资源池,数据散列分布于资源池的不同物理机上。大数据挖掘工具在其中起到指针的作用,根据对信息内容的需求指向信息存储的空间,形成数据仓库。这一系列改变的发生都将在云计算数据中心发生。”
绿色节能成为必备条件
“从设备上说,服务器、机房、带宽、电力、制冷等硬件设施相比于传统数据中心并不会发生本质性的变化,但是会以绿色节能为宗旨去发展。数据中心耗电未来会是个很大的议题。”
史丹佛大学土木与环境工程系的教授ohnathanG.Koomey针对数据中心对全球耗电量印象的报告称,全球的数据中心在2010年共消耗1,988亿千瓦时的电力,约是全年总发电量的1.1至1.5%,而这个比例不可小视。电力已经成为数据中心份额最大的支出项,Google、微软等数据中心大户开始尝试将数据中心建设在严寒地带以减少电力消耗。
“IT的价值在于节约数据处理的成本,云计算则帮助企业降低IT成本。”李志霄博士指出云计算数据中心通过大规模数据中心集成的方式,降低数据处理的平均费用。大型云计算数据中心将更多考虑所在的地域环境,充分利用自然条件降低能耗,如当地低温气候,风能、潮汐、太阳能等清洁能源。
数据中心运营服务外包
李志霄博士认为云计算数据中心最本质的改变在于软件和服务。软件包括实现存储、计算能力调用、计费、安全等的虚拟化、分布式等技术,以微软、亚马逊为前例;服务的改变意味着传统物理机房的运维DNA将作为优质服务的前提条件,而非全部内容。运维工程师由维护物理机房转变到软件平台、网络平台的维护,比如Debug。
随着云数据中心规模化发展,运维服务从硬件维护走向软硬兼具,运维服务的难度与规模相应扩大。“运维服务走向专业化、外包化将成为行业趋势,在这一领域机遇与挑战并存。具备运维DNA数据中心企业将有机会成长为专业的云数据中心运维服务提供商。世纪互联作为一家拥有十几年运维DNA的数据中心服务提供商,未来对云的探索值得期待。”
云数据中心需要顶层设计
中国目前拥有58.8万个数据中心,高工产业研究院数据显示2011年新建数量达6800个,其中不包括各地正在规划的云计算数据中心。大数据背景下,如何看待中国云计算数据中心的快速增长,李志霄博士提出了自己的理解。
“由于意识到虚拟化技术,多租户技术的浪潮来临,美国2011年将政府IDC由2000个减到1200个,注意,是减,不是增。但这个前提是云计算应用已经相当普遍。在中国,云数据中心正处于建设期,正是政府参与进行顶层设计,整体规划的最佳时机。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在神经网络模型搭建中,“最后一层是否添加激活函数”是新手常困惑的关键问题——有人照搬中间层的ReLU激活,导致回归任务输出异 ...
2025-12-05在机器学习落地过程中,“模型准确率高但不可解释”“面对数据噪声就失效”是两大核心痛点——金融风控模型若无法解释决策依据, ...
2025-12-05在CDA(Certified Data Analyst)数据分析师的能力模型中,“指标计算”是基础技能,而“指标体系搭建”则是区分新手与资深分析 ...
2025-12-05在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27