一、行业背景

       随着金融票据电子化影像化理念的深入推广，各大金融机构都纷纷开始着手进行电子票据影像化的业务变革，建设符合自身业务发展需要的电子票据影像系统成为众多金融机构IT布局的重中之重。

       金融机构分布在各地网点和营业部的快照录入设备，将金融业务流程中产生的扫描文件、照片等电子业务凭证作为影像数据信息上传到系统中，系统平台具备一体化的业务处理功能，提供档案录入——图像处理——智能识别——数据核对——统计分析——精确查询等不同业务需求的电子票据影像数据支撑。它不仅可以大大降低为存储纸质文件凭证而产生的生产运营成本，更能及时高效的为其他业务系统提供影像管理方面的数据支持，极大地提高工作效率，降低管理成本。对居于转型道路上的传统金融行业有着至关重大的意义和作用。

二、数据存储挑战

数据文件的备份

       票据影像数据是交易中的重要凭证，必须满足监管部门对系统可靠性及数据保护的监管要求，实现千万级数据文件在给定的时间窗口内完成备份是基本要求。

“自动化”快速归档

       当需要调阅已经归档的票据影像文件时，在一堆归档磁带或光盘中人工搜索文件的工作量是无法想象的，必须借助“自动化”的快速归档文件调阅手段。

管理操作“自动化”

       长期不用的票据影像文件需要从高性能生产存储迁移到成本更低的近线存储，减少高性能生产存储的扩容费用；数据的备份与恢复、归档与调阅、数据校验等数据管理操作实现“自动化”，降低运行与维护的难度，减少人力投入。

三、LoongStore解决方案

海量问文件快速存储以及调取

       存储市场上大部分的存储系统在海量小文件的应用模式下，都存在吞吐率低，检索慢的问题。这个问题的本质原因是整个存储系统处理元数据的效率所导致的。由于目前绝大多数存储系统都是采用单一元数据服务器架构，虽然部分存储系统有两个元数据服务器，但是系统正常情况下只有一个元数据服务器提供服务功能，另一个处于standby状态，本质上属于高可用作用，因此，当整个存储系统的文件数量达到一定规模时，检索文件的效率变得极其低下，从而导致小文件吞吐率低。我们在LoongStore自研的多元数据服务器集群技术的基础上，结合高性能计算应用文件创建、访问以及目录结构特点，研制独一无二的多元数据服务器集群技术，在一套存储系统中可以根据用户生产系统中实际产生文件数量的规模对元数据服务器集群进行动态配置，整个存储系统中所有的元数据服务器同时参与文件的检索和定位工作，消除存储系统中元数据通道的瓶颈，同时还可以根据后续应用特点的变化和需求的增强，做到在线扩展元数据服务器，并且达到即插即用的效果。

按业务需求灵活扩展

　　LoongStore存储系统支持动态在线扩容，可以动态的添加单块磁盘或单台智能存储服务节点，扩展过程中无须终止当前业务，新增容量即插即用。扩容之后，管理员可以在适当的时机启动负载均衡，使数据平均分配到各个智能存储服务节点；负载均衡过程同时兼顾数据的活跃性，使得负载均衡结束后热点数据也能够均衡的分布在各个智能存储服务节点上，提高系统的整体效率，达到性能线性增长的效果。

提高业务连续性

　　LoongStore存储系统采用了全系统规模数据高可用技术，彻底消除存储系统中的单点故障，确保用户的应用持续稳定地运行。写入文件时，系统会对文件按照某个粒度进行切片，文件切片根据一定的算法分布的存放在不同的智能存储服务节点上，提高数据访问的并发粒度；LoongStore采取了全局冗余机制，用户可以将指定的数据设置相应的冗余度，冗余数据存放在不同的节点上将确保出现存储节点宕机时数据不会丢失，也不会出现服务中断的现象。LoongStore系统内置了自动故障探测机制，可以动态探测不同的故障，并自动启动数据的恢复流程。我们的集群存储系统正常运行时间超过99.999%，在无须额外花费、牺牲性能和空间的情况下，使整个存储系统具备高可用特性。

统一管理海量数据

       作为基础的存储架构，不管应用如何变化，LoongStore存储系统都能够提供极高的性能。高增长业务带来的数据爆炸性增长可以灵活的将LoongStore集群存储系统在单一文件系统下扩展到64PB，扩展之后不但得到容量的扩大而且性能也会呈线性增长。单一的文件系统降低了管理维护的复杂度，提高了生产效率、效果。