时间:2021-05-25 11:06:08来源:通信周刊 作者:通讯兵点击:
非结构化数据遍布于各行各业,这类数据在医疗、安防监控、政务、金融等行业中尤为明显,他们都有着海量的非结构化数据。同时,非结构化数据正以60%增长趋势逐年递增。毫无疑问,这一增长趋势对企业如何更好的管理好PB级数据提出了严峻挑战。
存储系统中数据的变化:以结构化为主的数据,正在向非结构化数据等混合型数据进行大量的转变。据IDC(天风证券,2020)预测,到2025年我国数据将达48.6ZB(18年至25年复合增速超过30%),其中80%为非结构化数据(XML、图像、声音、超媒体等信息)。
存储系统中规模的变化:在大数据、5G、云计算等新一代信息技术的催化下,企业需要应对PB级(1PB=1024TB)容量的数据存储需求,延续使用集中存储的方式,在单一存储节点上scale-up。不仅会对存储系统的性能造成影响,同时会受限于物理介质、传输媒介及TCO成本等因素,最终造成容量上的局限性,很显然纵向扩展的形式并不适应于现代化的企业级存储需求。
为了更加适应动态变化的应用场景,出现了去中心化Ceph的分布式存储架构,它是由MON、OSD、MDS与RADOS等核心组件构成。与HDFS相比之下,没有通过NameNode元数据寻址的方式,而是通过一种CRUSH算法,通过两次映射计算数据存储位置来确定如何存储和检索数据。CRUSH 使用户端能直接与OSDs进行通信,且并行读写速度更高。
去中心化Ceph存储系统架构,特别是在支持块存储特性上,可以使数据具有较强的一致性,Ceph可使用任何一个运行在该存储节点上的OSD获取数据信息,相对于Swift及HDFS来说更加灵活。以Ceph分布式存储架构为代表的柏科数据ISCloud分布式存储系统,一方面通过CRUSH算法实现了存储单元间的数据重新分布及智能交互。另一方面scale-out的扩张形式,突破了规模化扩张造成的性能瓶颈。
在安防监控的应用场景下,数据存储经历了几个阶段,逐步从DVR存储过渡到网络前端加网络存储阶段。随着网络带宽的提高,高清应用的普及,对安防存储系统的容量和数据安全提出了更高的要求。柏科数据ISCloud分布式存储系统在面对监控业务海量非结构化数据存储方面,相比于传统安防类存储具有天然的优势,也便于与其他调用平台结合,将为视频监控行业带来存储架构和安全性上全面的升级变更。
实现性能提升&保障业务连续性:
⦁ 将业务系统迁移至ISCloud分布式存储系统,解决了存储节点单点故障的问题,使其业务不中断;
⦁ 提升节点间访问能力,以保证数据的写入读取和各节点之间数据交互的稳定性及一致性。
实现多重数据保护:
⦁ 结合ISCloud分布式存储系统应用层数据保护策略(副本冗
余技术或纠删技术等),采取纠删N+2的数据保护方式,对数据进行冗余保护措施;
商务合作qq:
Copyright 2019-2029 http://cn.bxzg.com.cn 〖科技-中-国-网〗 版权所有
声明: 本站文章均来自互联网,不代表本站观点 如有异议 请与本站联系 本站为非赢利性网站 不接受任何赞助和广告