解决非结构化大数据归档难题——高性能 低成本的昆腾artico 公安厅应用案例


在我国平安城市的持续建设及平安城市逐步向智慧城市迈进的过程中,公安部门其实早已步入大数据应用时代,而且,其数据来源比其他行业更丰富,种类更繁多,其中70%~85%都是图像、视频、音频等非结构化数据。


大数据的运用给公安业务质量和效率带来质的改变,但随着数据的爆发式增长,原系统存储的不断扩容带来的高成本,以及数据高速增长带来的系统查询速度变慢等问题就越来越突出。事实上,这样的困扰在大数据时代的各行业都或多或少存在。


赞华公司依靠长期的技术积累以及对客户业务的认知深度,成功推出并实施了完整的技术方案,很好的解决了H省公安厅的业务痛点。


为什么推荐昆腾artico解决方案?


飞速增长的海量非结构化大数据带来的是对存储容量、网络吞吐和弹性扩展能力的更高要求,以及日益巨大的运行成本压力。对于H省公安厅这样位于经济欠发达地区的执法机构来说,资金压力尤其突出。


公安非结构化大数据不仅体量大,增长极快,而且成规模存储,价值密度比较低。以视频监控为例,连续不间断的监控过程中,可能有用的数据仅有一两秒,甚至根本没有;它们可能长达数月甚至数年都不会被访问,但却要占据着主存储系统,以保证未来可能需要调用和挖掘的信息。宝贵的备份资源与网络资源,就这样被“冷数据”吞噬。


而不断购买更多的存储容量来应对非结构化大数据迅猛增长的做法,对于H省公安厅来讲,显然是不可持续的。


但是,H省公安厅对于信息化建设的要求又是非常富有远见的。他们认为,在重点实施的项目上,“技术的先进性必须要保障,否则技术上一旦落后了,以后就很难跟上了。”

H省公安厅期望,海量非结构化存储解决方案必须能够技术先进性、高性能和经济实惠兼顾。


基于此,在与H省公安厅多次深入沟通交流的基础上,赞华为其推荐了昆腾artico解决方案—— 与其花费重金购买主存储,不如有效的利用数据归档策略,减少网络负载、备份存储和数据增长所带来的麻烦。


昆腾Artico 解决方案详解


昆腾Artico可以为客户提供高性能的文件共享、经济高效的数据分层管理和保护、无与伦比的性能、扩展能力和数据保存的综合数据生命周期解决方案。


 图1 在线存储到近离线存储的数据流方案拓扑图


图2  本地方案实施图


◆ 昆腾Artico 是一款智能的NAS归档平台,它将磁盘缓存与经济高效的归档存储相结合,为用户提供一种灵活、低成本的归档入口点。随着存储需求的增长,Artico可不断进行扩展,最多能支持PB级的数据。


◆ Artico能够为多个部门和用户之间提供便捷的NAS共享。Artico 系统内置了昆腾的存储管理软件StorNext,其智能分层数据管理策略会帮助用户分析和判断,自动化地将冷数据、非结构化数据从高性能磁盘归档迁移到成本更低的次要存储层,同时保证用户仍能全面访问所有文件,在需要再次访问时,实现1分钟内数据的动态回迁,为数据的存储、访问和保护提供了最低 TCO 模式。


◆ Artico的分层存储软件可以创建多个文件副本,并可为客户提供昆腾Scalar磁带库、Lattus和昆腾Q-Cloud的二级长期存储归档选项。
在本案例中,赞华为H省公安厅配置的方案就是Artico智能NAS归档设备 + 二级长期归档选项Scalar i6000物理磁带库。磁带的购置成本和运行成本都远低于磁盘。


◆ 昆腾Scalar i6000 智能磁带库拥有业界领先的存储密度,它将先进的管理功能集成到磁带库之中,可在总体上加强系统的可靠性,简化管理,减少对外部服务器和软件的需求。为满足任务繁重的大型数据中心的严格要求,Scalar i6000 还提供业界最先进的可靠性、可用性和可维护性 (RAS) 特性。


◆ 借助Artico智能NAS归档设备 + Scalar i6000物理磁带库的分层存储配置方案,H省公安厅可大大缩减数据备份量,大幅减少管理时间,并且有效满足增长需求,从而在备份和归档系统的整个生命周期都节省时间和金钱。


方案总结
   
1、分层归档解决了H省公安厅的非结构化数据存储难题

通过Artico解决方案,实现了用户多个平台的主机异构跨网络高速共享备份数据的需求。不同用户可根据需要将文件拖至NAS共享以进行归档,只要文件被移至 Artico,它们即被存储到高性能磁盘,并自动复制到磁带库以供 DR 保护。如果需要更多磁盘空间,NAS 存储可被清理并将文件保留到磁带。用户可以继续在原目录中查看所有文件,并且可以从该位置启动它们。如果文件仅存在于磁带中,它们可被自动从磁带移回磁盘以供归档处理。


2、与增加主磁盘或实施云相比,本次赞华提供的Artico解决方案极大节省了用户成本,满足了H省公安厅对整体监控视频数据保护和长期保存的低成本、高性能要求。

据昆腾在某教育机构成功案例的调查数据显示,用户在实施Artico解决方案后,其总成本与云相比,节省高达75%。


3、昆腾Artico解决方案中数据管理、存储扩展和分层存储技术,将有效帮助H省公安厅管理整个数据的生命周期。