赞存分布式对象存储--聚焦海量数据场景的存储解决方案

2022-02-25


我们都知道当今是大数据时代。并且随着国家 “互联网 +” 行动计划、云计算、5G、人工智能等数字化发展战略的推进,数据指数级增长的趋势还在加速。


在不断增长的海量数据中,80%以上都是非结构化数据,尤其是各种应用场景产生的已成为常态的非结构化小文件,数据量惊人,动辄上亿甚至十亿、百亿级。


此背景下,传统的 DAS、SAN和 NAS存储,因自身技术和架构的限制,在元数据管理、I/O读写访问、数据布局,以及运维、实现成本等方面,都难以有效应对。


也因此,已诞生多年的分布式对象存储,凭借海量存储能力、高可用性、高吞吐量、低成本和针对小文件场景的更优存储性能等特点,迎来了蓬勃发展的黄金时代,成为众多企业级用户通向数字化 IT的一个桥梁。 


在赞华公司长期服务的商业银行领域,伴随银行业务线上化、多样化,金融服务场景化、生态化,以及国家安全可控要求和银行数据中心多活、双活要求的统一管理等趋势,IT基础架构的分布式转型成为近年银行业的关注重点,并不断提速。


正是基于赞华传统的影像处理业务和数据存储业务的技术与经验积累,着眼于满足客户对 IT和数据架构的新需求,赞华于2016年推出了自主存储解决方案产品—— 赞存分布式对象存储系统。经过几年的持续努力和不断完善,赞存已拥有针对不同行业、不同场景的完整分布式存储解决方案,并在银行、保险、政府及公共事业部门、能源等行业实现了成功应用。2018年开始,赞存相继入围央采、国税、国家中直机关等“国”字号产品选型名录。


一、赞存分布式对象存储系统概述 


赞存分布式对象存储系统是赞华公司专为海量数据场景而设计的企业级存储方案产品,可为非结构化数据存储、云计算、视频监控、大数据应用、传统NAS存储替代等类型应用提供多样性的存储服务,满足企业对IT基础架构在扩展性、管理性、访问性、经济性等方面的要求。


其产品特点——


自主可控、简单智能化的企业级 SDS产品(SDS:Software Defined Storage,即软件定义存储)。

硬件无锁定,实现接口标准化:一个平台支持块、文件、对象多种存储服务;分布式统一存储平台帮助企业融合数据,释放海量数据价值。

提供纯软件、软硬一体机两种交付方式

赞华专业化的服务体系保障:发货测试,安装规划,现场部署,巡检维护,售前售后的技术支持,赞存产品均有规范化的流程文档。


二、赞存分布式对象存储典型应用场景


在方案层面,赞华公司在产品的基础之上为用户打造了适用于不同场景和行业的赞存分布式对象存储用例,以经济实惠的方式,帮助用户提供海量内容的存储能力和数据保护能力。


以下是几个典型应用场景:


越来越多的企业开始把存放在传统ECM系统中的文件、图片、影像等内容向对象存储系统迁移。

银行的票据影像、双录视频、人脸图像、纸质文件扫描件,保险公司的客服语音资料、电话营销语音资料,医院的医疗影像……等等,这些文件数量庞大且需长期保存。

对象存储近乎无限的扩展性可以支持数据量不断增长的需求,存储设备与业务挂接关系简单且易维护。对象存储可以作为数据源直接进行大数据分析,挖掘影像数据中的价值信息。













三、赞存分布式对象存储系统优势总结


高可靠性 ——赞存具有更高的可靠性,能够在不断扩展集群节点的情况下保持节点和磁盘故障的容忍度在40%的范围,而不会因为扩容导致故障容忍度降低。


数据保障 ——赞存支持灵活的数据保护方案,可以灵活的选择目录、对象桶、块LUN的维度选择数据保护策略[多副本、EC(N+M模式)],故障恢复策略,以及远程备份容灾,细粒度的管理数据。


高性能 ——满足业务应用所需的读写性能要求,横向扩展灵活,存储服务7*24小时不间断在线扩容,并能带来性能的线性增长。


• 开放性 ——采用开放的技术架构,软件和硬件完全解耦合(支持X86和国产服务器),在扩容和运维方面对硬件依赖的可控性更强,不受硬件厂商限制。


数据共享 ——帮助企业构建各种各样原始数据的集中仓储,可根据需要将数据传输给企业内需要该数据的部门或个人。


数据价值 ——数据和应用整体打通,做到一套架构支撑多种应用业务场景。实现对业务需求的快速封装,发挥数据最大价值,极大的推动了业务地创新。


四、几个典型案例:


某商业银行赞存分布式对象存储项目

• 解决影像系统海量非结构化数据的增长,原有存储不能满足读写性能及扩展性等问题;

• 容量 5PB,50存储节点;

• 扩大应用场景,未来将支撑容器云平台、数据备份服务、VMvare虚拟化等存储服务。


某保险公司云存储平台项目

• 涉及200多个系统,50PB数据量,数据迁移和整体平滑过渡方案及落地;

• 容量 50PB,1500存储节点;

• 3地5中心,实现多地协同处理,数据多数据中心服务一致性,以及多点数据备份。


某国土资源局存储平台建设项目

• 提供对象、块、文件存储服务,池化容量控制,按需在线扩容;

• 智能化运维平台,保障全年24小时不中断的业务服务;

• 为上层的VMware虚拟机提供个性化的分布式存储服务;

• 存储系统上线生产后,已经历多次扩容,操作便利、灵活。


多个保险公司双录和内容管理平台项目

• 提供档案影像、保险双录(录音、录像)和整体非结构化数据的采集、存储、调阅服务;

• 不同保险公司,覆盖业务员从10万至20多万不等,年新增视频量从5万至10万不等;

• 系统上线后,数据访问速度均得到极大提升,运维工作大大简化,并充分满足了合规和保险监管要求。