破茧而出的存储技术撬动大数据时代

2015-05-08 09:46:44   来源:中国公共安全   点击:
历经三十多年的中国安防,产业进程在技术演进中延续,从而演变出时代的印记。很显然,当下的中国安防,迈入大数据时代。于是,与此相关的话题,不绝于耳。

    历经三十多年的中国安防,产业进程在技术演进中延续,从而演变出时代的印记。很显然,当下的中国安防,迈入大数据时代。于是,与此相关的话题,不绝于耳。


    大数据时代存储面临的束缚


    视频监控正是一个典型的数据依赖型业务,依靠数据说话。可以说,大数据与视频监控业务有着天然的结合。大数据中的大容量通常可达到PB级的数据规模,那么对于海量数据存储系统扩展能力的要求也会很高。如果国内平安城市建设摄像头以亿为单位计算,这样视频监控将是数据的大生成器。同时,从摄像前端的海量数据和到有效数据之间的也存在矛盾,摄像头不停歇的工作,如实记录镜头覆盖范围发生的一切,但对于客户来讲大部分信息是无效,有效信息可能只分布在一个较短的时间段内,大量的数据存储给数据库带来不小的压力,而无效的数据更是对于资源的浪费。这样来看,大数据时代存储成为至关重要需要解决的问题。举例说明,2014年年初,南京警方为了抓捕一名在逃嫌犯,调动了两千警力,因为所有的摄像头没有联网,只能绕道各个小区、派出所、楼宇去拷数据,当时整个南京市所能买到的存储设备几乎都被警方买空。这个案例说明:第一数据需要联网,第二大数据一定要存储好,第三大数据必须经过分析和挖掘才有价值。


    大数据一定要存储好,很简单的说明了存储对于安防大数据时代的重要性。一般来说,大数据时代监控存储要面临几个方面的束缚。


    庞大信息量如何存储。监控数据按7x24小时写入,存放时间从7天、15天、30天甚至更久,数据量随时间增加呈线性增长,面对海量存储的需求,传统的存储行业与监控行业实在难以处理。


    监控数据存储的可扩展性,包括如何满足数据采集更高分辨率或更多采集点的需要,如何满足更长数据采集时间的需要。


    性能的要求。视频监控主要是视频码流的写入,表征性能的是存储能支持多少路码流。在多路并发写的情况下,对带宽、数据能力、缓存等都有较大影响,对存储的压力很大,这时候存储需要有专门针对视频性能的优化处理。


    价格的敏感。安防监控行业的海量存储,由于总容量大,造成总的价格成本上升。反而言之,对单位容量成本(每TB价格)的要求很高。


    空间压力与管理难度。当大量高清视频开始越来越多的涌现之时,对于后端的存储要求也出现了一个极速上升的局面,在这样的情况下,数据量实现二到三倍的增长注定会使传统的PC硬盘管理,或者本地DVR、NVR模式带来意料之外的压力。


    存储数据的集中管理有待加强。当我们从大数据时代监控整个系统的整体构建来分析时,会暴露出存储设备难以兼容等因素出现。由于大型的监控系统往往是分期建设,建设过程中采用的设备并不一致,因此实际项目中多种品牌、型号的设备给监控的存储集中管理带来很大难度。同时,传统的DVR或者DVS设备,由于网传能力有限,很难形成统一存储、统一监控的中心体系架构,使企业的治安监控出现存储数据查找麻烦,调度不及时,录像存储分散等多种问题产生。


    在束缚前,如何破局?


    智慧仓存储产品迎难而上,迎战大数据时代


    直面困难,迎难而上,迎战大数据时代,方显优秀民族企业本色。基于大数据时代存储难点,甲方需求的存储产品不再是传统分散的、单一的底层设备。除了要具备高性能、高安全、高可靠等特征之外,还要有虚拟化、并行分布、自动分层、弹性扩展、异构资源整合、全局缓存加速等多方面的特点,才能满足具备大数据特征的业务应用需求。


    作为中国安防民族企业优秀代表的北京智慧仓存储技术有限公司,专注于存储技术研发,2001年成立,是国内率先研发出磁盘阵列核心技术的厂家,具有自主知识产权。公司致力于在大数据的时代背景下,为客户提供高性价比、高价值的存储产品和解决方案。针对多路数高清监控集中存储用户,智慧仓推出了高性能光纤存储解决方案,与目前市场上的IP SAN方案相比,能够大幅减少存储设备台数,从而大幅降低建设成本,是目前市场上大数据时代存储应用的最佳选择。


    具体来看,他们高性能光纤存储解决方案具有三大优势,这是该企业最为核心的竞争力体现。


    1、性能优势


    高录像带宽:智慧仓2G光纤磁盘阵列单通道数据写入带宽高达190MB/s,是采用千兆网的IPSAN/NAS存储设备写入带宽高4倍以上。


    高并发浏览能力:智慧仓2G光纤磁盘阵列并发读写能力,即录像加同时回放和浏览的总带宽约2.4Gbps。特别在监控图像检索查询中,IPSAN/NAS明显低于服务器本地硬盘的速度,而光纤存储不存在并发检索速度慢的问题。


    高IO处理能力:智慧仓2G光纤磁盘阵列单通道IO处理能力达30,000 IOPS。而采用千兆网接口的IPSAN/NAS技术,写入IO处理能力只有约3,000 IOPS。


    低CPU占用率:由于数据打包、解包处理任务由光纤卡上CPU完成,降低了服务器CPU占用率。而IPSAN/NAS磁盘阵列往往使用服务器CPU处理数据打包、解包,将导致服务器CPU资源被占用。而存储服务器又恰恰需要更多的CPU资源。