京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代存储面临的束缚
历经三十多年的中国安防,产业进程在技术演进中延续,从而演变出时代的印记。很显然,当下的中国安防,迈入大数据时代。于是,与此相关的话题,不绝于耳。
大数据时代存储面临的束缚
视频监控正是一个典型的数据依赖型业务,依靠数据说话。可以说,大数据与视频监控业务有着天然的结合。大数据中的大容量通常可达到PB级的数据规模,那么对于海量数据存储系统扩展能力的要求也会很高。如果国内平安城市建设摄像头以亿为单位计算,这样视频监控将是数据的大生成器。同时,从摄像前端的海量数据和到有效数据之间的也存在矛盾,摄像头不停歇的工作,如实记录镜头覆盖范围发生的一切,但对于客户来讲大部分信息是无效,有效信息可能只分布在一个较短的时间段内,大量的数据存储给数据库带来不小的压力,而无效的数据更是对于资源的浪费。这样来看,大数据时代存储成为至关重要需要解决的问题。举例说明,2014年年初,南京警方为了抓捕一名在逃嫌犯,调动了两千警力,因为所有的摄像头没有联网,只能绕道各个小区、派出所、楼宇去拷数据,当时整个南京市所能买到的存储设备几乎都被警方买空。这个案例说明:第一数据需要联网,第二大数据一定要存储好,第三大数据必须经过分析和挖掘才有价值。
大数据一定要存储好,很简单的说明了存储对于安防大数据时代的重要性。一般来说,大数据时代监控存储要面临几个方面的束缚。
庞大信息量如何存储。监控数据按7x24小时写入,存放时间从7天、15天、30天甚至更久,数据量随时间增加呈线性增长,面对海量存储的需求,传统的存储行业与监控行业实在难以处理。
监控数据存储的可扩展性,包括如何满足数据采集更高分辨率或更多采集点的需要,如何满足更长数据采集时间的需要。
性能的要求。视频监控主要是视频码流的写入,表征性能的是存储能支持多少路码流。在多路并发写的情况下,对带宽、数据能力、缓存等都有较大影响,对存储的压力很大,这时候存储需要有专门针对视频性能的优化处理。
价格的敏感。安防监控行业的海量存储,由于总容量大,造成总的价格成本上升。反而言之,对单位容量成本(每TB价格)的要求很高。
空间压力与管理难度。当大量高清视频开始越来越多的涌现之时,对于后端的存储要求也出现了一个极速上升的局面,在这样的情况下,数据量实现二到三倍的增长注定会使传统的PC硬盘管理,或者本地DVR、NVR模式带来意料之外的压力。
存储数据的集中管理有待加强。当我们从大数据时代监控整个系统的整体构建来分析时,会暴露出存储设备难以兼容等因素出现。由于大型的监控系统往往是分期建设,建设过程中采用的设备并不一致,因此实际项目中多种品牌、型号的设备给监控的存储集中管理带来很大难度。同时,传统的DVR或者DVS设备,由于网传能力有限,很难形成统一存储、统一监控的中心体系架构,使企业的治安监控出现存储数据查找麻烦,调度不及时,录像存储分散等多种问题产生。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在统计调查与数据分析中,抽样方法分为简单随机抽样与复杂抽样两大类。简单随机抽样因样本均匀、计算简便,是基础的抽样方式,但 ...
2026-02-02在数据驱动企业发展的今天,“数据分析”已成为企业经营决策的核心支撑,但实践中,战略数据分析与业务数据分析两个概念常被混淆 ...
2026-02-02在数据驱动企业发展的今天,“数据分析”已成为企业经营决策的核心支撑,但实践中,战略数据分析与业务数据分析两个概念常被混淆 ...
2026-02-02B+树作为数据库索引的核心数据结构,其高效的查询、插入、删除性能,离不开节点间指针的合理设计。在日常学习和数据库开发中,很 ...
2026-01-30在数据库开发中,UUID(通用唯一识别码)是生成唯一主键、唯一标识的常用方式,其标准格式包含4个短横线(如550e8400-e29b-41d4- ...
2026-01-30商业数据分析的价值落地,离不开标准化、系统化的总体流程作为支撑;而CDA(Certified Data Analyst)数据分析师,作为经过系统 ...
2026-01-30在数据分析、质量控制、科研实验等场景中,数据波动性(离散程度)的精准衡量是判断数据可靠性、稳定性的核心环节。标准差(Stan ...
2026-01-29在数据分析、质量检测、科研实验等领域,判断数据间是否存在本质差异是核心需求,而t检验、F检验是实现这一目标的经典统计方法。 ...
2026-01-29统计制图(数据可视化)是数据分析的核心呈现载体,它将抽象的数据转化为直观的图表、图形,让数据规律、业务差异与潜在问题一目 ...
2026-01-29箱线图(Box Plot)作为数据分布可视化的核心工具,能清晰呈现数据的中位数、四分位数、异常值等关键统计特征,广泛应用于数据分 ...
2026-01-28在回归分析、机器学习建模等数据分析场景中,多重共线性是高频数据问题——当多个自变量间存在较强的线性关联时,会导致模型系数 ...
2026-01-28数据分析的价值落地,离不开科学方法的支撑。六种核心分析方法——描述性分析、诊断性分析、预测性分析、规范性分析、对比分析、 ...
2026-01-28在机器学习与数据分析领域,特征是连接数据与模型的核心载体,而特征重要性分析则是挖掘数据价值、优化模型性能、赋能业务决策的 ...
2026-01-27关联分析是数据挖掘领域中挖掘数据间潜在关联关系的经典方法,广泛应用于零售购物篮分析、电商推荐、用户行为路径挖掘等场景。而 ...
2026-01-27数据分析的基础范式,是支撑数据工作从“零散操作”走向“标准化落地”的核心方法论框架,它定义了数据分析的核心逻辑、流程与目 ...
2026-01-27在数据分析、后端开发、业务运维等工作中,SQL语句是操作数据库的核心工具。面对复杂的表结构、多表关联逻辑及灵活的查询需求, ...
2026-01-26支持向量机(SVM)作为机器学习中经典的分类算法,凭借其在小样本、高维数据场景下的优异泛化能力,被广泛应用于图像识别、文本 ...
2026-01-26在数字化浪潮下,数据分析已成为企业决策的核心支撑,而CDA数据分析师作为标准化、专业化的数据人才代表,正逐步成为连接数据资 ...
2026-01-26数据分析的核心价值在于用数据驱动决策,而指标作为数据的“载体”,其选取的合理性直接决定分析结果的有效性。选对指标能精准定 ...
2026-01-23在MySQL查询编写中,我们习惯按“SELECT → FROM → WHERE → ORDER BY”的语法顺序组织语句,直觉上认为代码顺序即执行顺序。但 ...
2026-01-23