
大数据时代存储面临的束缚
历经三十多年的中国安防,产业进程在技术演进中延续,从而演变出时代的印记。很显然,当下的中国安防,迈入大数据时代。于是,与此相关的话题,不绝于耳。
大数据时代存储面临的束缚
视频监控正是一个典型的数据依赖型业务,依靠数据说话。可以说,大数据与视频监控业务有着天然的结合。大数据中的大容量通常可达到PB级的数据规模,那么对于海量数据存储系统扩展能力的要求也会很高。如果国内平安城市建设摄像头以亿为单位计算,这样视频监控将是数据的大生成器。同时,从摄像前端的海量数据和到有效数据之间的也存在矛盾,摄像头不停歇的工作,如实记录镜头覆盖范围发生的一切,但对于客户来讲大部分信息是无效,有效信息可能只分布在一个较短的时间段内,大量的数据存储给数据库带来不小的压力,而无效的数据更是对于资源的浪费。这样来看,大数据时代存储成为至关重要需要解决的问题。举例说明,2014年年初,南京警方为了抓捕一名在逃嫌犯,调动了两千警力,因为所有的摄像头没有联网,只能绕道各个小区、派出所、楼宇去拷数据,当时整个南京市所能买到的存储设备几乎都被警方买空。这个案例说明:第一数据需要联网,第二大数据一定要存储好,第三大数据必须经过分析和挖掘才有价值。
大数据一定要存储好,很简单的说明了存储对于安防大数据时代的重要性。一般来说,大数据时代监控存储要面临几个方面的束缚。
庞大信息量如何存储。监控数据按7x24小时写入,存放时间从7天、15天、30天甚至更久,数据量随时间增加呈线性增长,面对海量存储的需求,传统的存储行业与监控行业实在难以处理。
监控数据存储的可扩展性,包括如何满足数据采集更高分辨率或更多采集点的需要,如何满足更长数据采集时间的需要。
性能的要求。视频监控主要是视频码流的写入,表征性能的是存储能支持多少路码流。在多路并发写的情况下,对带宽、数据能力、缓存等都有较大影响,对存储的压力很大,这时候存储需要有专门针对视频性能的优化处理。
价格的敏感。安防监控行业的海量存储,由于总容量大,造成总的价格成本上升。反而言之,对单位容量成本(每TB价格)的要求很高。
空间压力与管理难度。当大量高清视频开始越来越多的涌现之时,对于后端的存储要求也出现了一个极速上升的局面,在这样的情况下,数据量实现二到三倍的增长注定会使传统的PC硬盘管理,或者本地DVR、NVR模式带来意料之外的压力。
存储数据的集中管理有待加强。当我们从大数据时代监控整个系统的整体构建来分析时,会暴露出存储设备难以兼容等因素出现。由于大型的监控系统往往是分期建设,建设过程中采用的设备并不一致,因此实际项目中多种品牌、型号的设备给监控的存储集中管理带来很大难度。同时,传统的DVR或者DVS设备,由于网传能力有限,很难形成统一存储、统一监控的中心体系架构,使企业的治安监控出现存储数据查找麻烦,调度不及时,录像存储分散等多种问题产生。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
随机森林算法的核心特点:原理、优势与应用解析 在机器学习领域,随机森林(Random Forest)作为集成学习(Ensemble Learning) ...
2025-09-05Excel 区域名定义:从基础到进阶的高效应用指南 在 Excel 数据处理中,频繁引用单元格区域(如A2:A100、B3:D20)不仅容易出错, ...
2025-09-05CDA 数据分析师:以六大分析方法构建数据驱动业务的核心能力 在数据驱动决策成为企业共识的当下,CDA(Certified Data Analyst) ...
2025-09-05SQL 日期截取:从基础方法到业务实战的全维度解析 在数据处理与业务分析中,日期数据是连接 “业务行为” 与 “时间维度” 的核 ...
2025-09-04在卷积神经网络(CNN)的发展历程中,解决 “梯度消失”“特征复用不足”“模型参数冗余” 一直是核心命题。2017 年提出的密集连 ...
2025-09-04CDA 数据分析师:驾驭数据范式,释放数据价值 在数字化转型浪潮席卷全球的当下,数据已成为企业核心生产要素。而 CDA(Certified ...
2025-09-04K-Means 聚类:无监督学习中数据分群的核心算法 在数据分析领域,当我们面对海量无标签数据(如用户行为记录、商品属性数据、图 ...
2025-09-03特征值、特征向量与主成分:数据降维背后的线性代数逻辑 在机器学习、数据分析与信号处理领域,“降维” 是破解高维数据复杂性的 ...
2025-09-03CDA 数据分析师与数据分析:解锁数据价值的关键 在数字经济高速发展的今天,数据已成为企业核心资产与社会发展的重要驱动力。无 ...
2025-09-03解析 loss.backward ():深度学习中梯度汇总与同步的自动触发核心 在深度学习模型训练流程中,loss.backward()是连接 “前向计算 ...
2025-09-02要解答 “画 K-S 图时横轴是等距还是等频” 的问题,需先明确 K-S 图的核心用途(检验样本分布与理论分布的一致性),再结合横轴 ...
2025-09-02CDA 数据分析师:助力企业破解数据需求与数据分析需求难题 在数字化浪潮席卷全球的当下,数据已成为企业核心战略资产。无论是市 ...
2025-09-02Power BI 度量值实战:基于每月收入与税金占比计算累计税金分摊金额 在企业财务分析中,税金分摊是成本核算与利润统计的核心环节 ...
2025-09-01巧用 ALTER TABLE rent ADD INDEX:租房系统数据库性能优化实践 在租房管理系统中,rent表是核心业务表之一,通常存储租赁订单信 ...
2025-09-01CDA 数据分析师:企业数字化转型的核心引擎 —— 从能力落地到价值跃迁 当数字化转型从 “选择题” 变为企业生存的 “必答题”, ...
2025-09-01数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28