搜索
查看: 2975|: 0

海云海量 大数据环境下云存储将有广阔空间

[复制链接]

153

主题

3

回帖

479

积分

中级会员

积分
479
发表于 2014-9-1 16:06:46 | 显示全部楼层 |阅读模式

 随着大数据时代的到来,移动互联网、社交网络,云计算应用技术的发展越来越成熟,对数据中心的要求也越来越高,存储基础的架构也越来越重要。并且高清技术的发展,也对前端的增加和后端存储时间也有了更高的要求。

  另外,政府、军队工程、科研院所工程、航空航天工程、大型商业连锁工程、医疗工程、金融、新媒体等各个领域的新兴应用层出不穷,而传统的数据中心从各个方面来说已经较为落后,不能满足新兴产业对大数据的要求。并且随着云计算,以及虚拟化技术的发展,都让存储系统的架构出现了变化,甚至出现了新的存储架构。对于安防行业来说,高清视频监控的出现,对存储系统的性能、可靠性、扩展性、管理效能、节能环保和开放性提出了更高的要求。

  基于大数据时代的存储环境

  对于目前,在安防业内的存储环境,深圳海云海量信息技术有限公司董事长刘维表示,“大数据时代,云计算、云存储概念被普遍提及,智慧城市建设、中心数据库的建设等等,数据规模呈爆炸性增长。特别是安防监控行业,因为高清视频摄像机的普及、大数据流给存储带来了很大的市场。”并且目前云安防概念推出,高清技术的啤机,720P、1080P已经不是什么新鲜事了,面对高清和智能的双重要求,大数据对存储设备的容量、读写性能、可靠性、扩展性等都提出了新的要求。刘维表示,“今后的数据存储,云存储将是安全、分析应用、统一管理、集中存储是一个主流的存储方式。具备云功能也是以后市场的一个趋势。有竞争、有分工、有规模、有技术、有市场是将来存储市场的态势。”

  其实,视频和图片文件都属于大数据范畴内的一小部分,存储架构就是将这其中有用的东西提取出来,而提取的方式就是采用融合的基础架构,并以应用来进行数据的挖掘或者处理。

  传统存储架构使用率将减少 新的存储架构将会被普及

  随着市场需求的更新,基于大数据时代的存储要求有了更高的需求,“应用定义存储”的概念也被提出。刘维认为,“应用定义存储,是针对各个不同行业的存储方式、应用模式、数据类型等多方面的不同应用变化来进行定义的存储模式。对数据重要性、存储架构与方式、存储服务与应用分析功能给出新的定义,根据存储需求、应用模式的变化来重新定义。”

  据了解,随着大数据时代的到来,传统的存储方式与数据库中心也发生了变化,根据数据的大小、类型,和使用方式的不同,存储方式和存储应用也发生了变化,由此而产生了“应用定义存储”的概念。

  除此之外,还有嵌入式存储系统、基于X86架构的存储系统和基于云技术的存储方案。嵌入式存储系统目前在市场应用的层面上,主要用于超市、店铺、小型企业、政法行业中基本管理单元等方面。

  刘维说,“嵌入式存储就是把嵌入式存储控制器、软件与相关硬件集成于一体可以独立工作的存储设备。”其主要的特点是外观尺寸小、内部结构紧奏;操作系统与存储软件嵌入在存储控制器上或使用DOM盘做为系统存储介质即固件;便利灵活性强、性能价格比高、嵌入性强,另外从软件角度来看,嵌入式存储系统具有不可修改性;其系统所需配置要求较低、系统专业性和实时性较强等特点。

  关于X86的存储系统,技术也越来越成熟了。对于IP SAN而言,凭借扩展性良好、硬件平台通用、海量数据可充分共享等优点,得到很多客户的青睐。FC SAN在行业用户、封闭存储系统中应用较多,比如县级或地级市高清监控项目,大数据量的并发读写对千兆网络交换提出了较大的挑战,但应用FC SAN构建相对独立的存储子系统,可以有效解决上述问题。面对视频监控系统大文件、随机读写的特点,平台SAN架构系统不同存储单元之间的数据共享冗余方面还有待提高;从高性能服务器转发视频数据到存储空间的策略,从系统架构而言也增加了隐患故障点、ISCSI带宽瓶颈导致无法充分利用硬件数据并发性能、接入前端数据较少。

  另外,将来X86架构从硬件角度上来讲,配置更加灵活;从软件上来讲,性能比较高,可以跑更多的应用,还可以提供更多的寄存资源,可以通过虚拟化的技术来提供给客户应用。

  而随着视频监控的高清化和网络化技术的普及,存储和管理的视频数据量也越来越大,云存储技术也就成为突破IP高清监控存储瓶颈的重要手段。如今云存储作为一种服务,未来在安防监控行业的发展会越来越被看好。与传统存储设备不同,云存储不仅是一个硬件,而是一个由网络设备、存储设备、服务器、软件、接入网络、用户访问接口以及客户端程序等多个部分构成的复杂系统。该系统以存储设备为核心,通过应用层软件对外提供数据存储和业务服务。

  同时,云存储可以提供非常高的的系统冗余和安全性。当在线存储系统出现故障后,热备机可以立即接替服务,当故障恢复时,服务和数据回迁;若故障机数据需要调用,可以将故障机的磁盘插入到冷备机中,实现所有数据的立即可用。对于高清监控系统,随着监控前端的增加和存储时间的延长,扩展能力十分重要。市场中已有友商可提供单纯针对容量的扩展柜扩展模式和性能容量同步线性扩展的堆叠扩展模式。

  另外,云存储系统在平台对接整合、业务流程梳理、视频数据智能分析深度挖掘及成本方面都将面临挑战。承建大型系统、构建云存储的商业模式也亟待创新。受限于宽带网络、web2.0技术、应用存储技术、文件系统、P2P、数据压缩、CDN技术、虚拟化技术等的发展,未来云存储还有很长的路要走。

  基于X86架构的存储系统将被优化 云存储也将在行业内大展拳脚

  刘维认为,“大数据时代对存储环境最大的一点变化就是云存储应用,传统的存储就是把数据安全的存储,被动性强,而大数据时代,需要数据不只是被动存储,同时需要在海量信息中能快速、有效的挖掘与分析,重视的是数据的安全与应用。重视数据库中心建设。重视数据存储的快速。这些需要多元化的存储架构、应用模式等。”

  在未来,存储将彻底改变目前传统的存储模式,虚拟化、集群是未来存储方式的重点,云存储的应用是将来存储的趋势。刘维说,“多种应用存储模式混合、多种存储应用与强大的数据挖掘分析能力、以及数据的安全、存储速度的快速、是未来存储技术的变化重点。”


您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

大数据中国微信

QQ   

版权所有: Discuz! © 2001-2013 大数据.

GMT+8, 2024-11-15 10:39 , Processed in 0.065622 second(s), 25 queries .

快速回复 返回顶部 返回列表