获取文档

一、概述

 

  当今社会,高清图片、视频、社区网络等互联网应用如火如荼,人们的交流、工作和生活方式都在不断改变,一切都变得数字化,我们无时不刻不被音频、视频、图片、E-Mail、各类电子文档、报表、账单等信息所包围,并且非结构化数据每年按指数增长60%,其中又以海量小文件为主,于是,企业不得不用更多的磁盘阵列来增加存储能力,但似乎数据的增长总是在制造麻烦,成本增加,存储体系愈加庞杂,数据量越来越大时存储性能会出现明显的下降,数据的安全性也受到更多挑战。

 

二、挑战

 

海量数据量统一存储、管理

  为了方便业务统一共享访问,以及后期运维和管理的简易性,都需要把海量数据进行统一整合,提供文件级共享存储空间,实现业务高效共享,提升海量小文件的读写访问效率,避免文件数量达到千万级以上时出现性能下降的情况。

 

集群化并发性能

  由于海量小文件数量较大,需要统一共享存储池拥有高效的文件检索效率,提高海量小文件的存储、访问性能,并且拥有极好的可扩容性,避免统一共享存储池的访问性能随小文件数据的增加而下降I/O性能与计算能力间产生瓶颈。

 

对数据安全性要求高

  现如今,海量非结构化数据多为用户数据甚至核心数据,关系到用户粘度及公司信息安全的问题,所以在保证高效率的同时,数据安全稳定也是考虑重点,必须有完善的保护机制和容灾手段。

 

三、LoongStore解决方案

 

  采用带外集群存储技术架构统一共享存储平台,此平台应对海量小文件的并发读写业务需求,使平台资源可统一共享,避免资源浪费的同时,也可提升业务访问效率;架构一个高性能、高可靠性、高扩展性、易管理等特性的集群存储环境,可对业务数据进行稳定、高效的支持,并且对海量小文件数据进行统一存储与管理。

 

采用分布式集群架构

  采用分布式集群架构,提供海量小文件统一存储空间,支持在线扩展集群规模,提升存储容量利用率及存储性能;带外集群架构,支持集群化元数据配置,有效提升海量小文件高效检索效率,避免传统存储中,随着文件数量的增多,小文件访问、检索性能快速下降的情况;全局数据冗余技术,支持存储节点、元数据节点宕机,不影响业务正常访问,数据不会丢失,避免单点故障,提高业务连续性及数据可靠性;内置故障自动恢复机制,可自动恢复损坏数据,无需人工干预,提高数据安全性,同时降低运维难度及运维成本;图形化管理界面,可支持单点管理PB级容量,满足海量小文件单人管理的需求,降低运维成本。

 

优点

● 提升存储系统整体利用率,避免资源浪费;

提供通用操作系统接口,使用与本地盘一致,简化操作流程;

● 将存储资源整合,通过网络提供资源访问;

● 支撑海量小文件高效文件检索;

● 全局冗余技术,保证数据安全可靠; 

● 提供多平台共享接口,满足window、linux、MAC操作系统之间的共享访问;

● 采用通用接口,无缝兼容业务业务,无需二次开发;

● 统一对存储进行管理,极大简化存储系统管理难度;

● 能够支撑海量用户并发访问。