华数传媒网络有限公司龙存集群存储案例

 

随着互联网技术的逐渐成熟和创新模式的不断涌现,用户与互联网之间的交互越来越多,互联网用户可以自由发挥丰富的想象力和创新能力贡献出大量极具观赏性的视频,极大的丰富了互联网内容,视频网站也吸引了大量忠实的用户并迅速地发展。用户不断的参与到视频内容作者的队伍中,视频资料几乎呈爆炸性的增长,视频数据的存储也迎来了前所未有的挑战。

 

一、成长挑战

 

华数传媒网络有限公司是华数集团旗下专业从事数字电视网络运营、新媒体业务与智慧城市业务的上市公司,主营业务包括浙江大部分地区的有线电视网络与宽带运营业务,面向全国的互动电视、互联网电视、手机电视与互联网视听等新媒体业务以及智慧政务、智慧安防、智慧校园等智慧城市业务。


(1) 原有的存储方案对数据处理及保护仅限于单台设备,存在单点故障;


(2) 原有的存储系统不支持高聚合数据读写性能,性能无法聚合;


(3) 作为大型网络电视播出机构,每天日访问量上亿,对于并发要求很高,而原有的存储系统已经无法支撑如此高的并发访问;

 

(4) 每天产生大量的音视频数据,这些音视频文件数量多、容量大。随着高清视频的出现和发展,一个普通时长720P的高清电影,大小就在4G左右,1080P的多在15~30G,甚至更大。原有的存储系统容量和性能已经无法满足;


(5) 随着业务的不断发展,视频数据量的增长不可估计,这就要求存储系统具有易扩容属性来应对将来可能出现的存储空间不足的问题。

 

 

 

 

二、方案选择

 

华数传媒网络有限公司对多家存储和系统厂商的文件共享存储产品进行了评测,最终还是选择了龙存科技的LoongStore集群存储系统。


(1) 可控的构建和运维成本。


(2) 高效的灾难保护机制和业务的连续性。


(3) 行业领先的并发性能。利用LoongStore架构,形成行业领先的读写并发效率,经过不断扩展,最高可达TB/s级别的读写速率。现有的用户环境中已实现超过20GB/s的读写带宽。


(4) 支撑华数传媒巨大的访问流量。在数据中心,单个LoongStore存储集群就提供了超过2GB/s的总吞吐量,支撑住了由于用户访问视频不确定性高而引起的存储压力,还充分利用了昂贵的公网带宽资源。


(5) LoongStore 的灵活扩展技术允许按需扩容,用户在后期可以根据数据量的增长而进行快速动态扩容,减少了一次性投资的费用,而且新增容量立即可用,对应用服务器端完全透明,不影响业务正常进行。随着数据量的成倍增长和容量的增加,总体的IO带宽线性增长。


(6) LoongStore内嵌一套完整的故障恢复流程,消除了单点故障。集群中的硬件故障和人为误操作都会以正常的恢复流程进行自动处理,整个流程对用户完全透明。任何硬件故障都无需进行手动处理,用户的管理工作就是在容量不够的时候添加硬件。种种高可用机制保证了业务能够以24×7小时不间断的工作。


(7) Loongstore简单灵活的管理模块,极大降低了管理员对系统管理的参与度,简化了管理员操作出错的风险,有效的降低了系统管理成本。系统采用图形化管理工具,减少了日常运维工作。

 

 


三、客户收益

  本次为用户提供了10PB容量的全局单一文件存储系统,支持数十亿级文件的存储。在使用LoongStore集群存储系统后,华数传媒有了坚实稳定的存储平台支撑,降低了单位存储容量成本,并实现了以下目标:

 

  • 多数据点支持,存储系统之间可实现数据同步和分发;
  • 系统需满足手机、互联网、电视等终端的访问;
  • 提供稳定聚合带宽,满足数个省份的视频点播;
  • 单点管理监控功能,最大程度减少运维人力、物力投入;
  • 对业务端按需提供文件、对象存储接口,按需互通共享。

 

  系统从开始部署至今,经过多次在线容量扩展、硬件升级、网络异常、磁盘损坏等事件,从未出现任何停机故障,保障了网络视频点播业务的正常稳定运行,为业务的发展提供了有力保障。

 

 

 

 

2023-07-21
首页    广电新媒体案例    华数传媒网络有限公司龙存集群存储案例