Sterling – HTML5 Responsive Website Template

智能鼎产品

LanderVault是一款集合高可用集群、数据复制、备份和系统容灾功能与一体的数据安全产品集!



LIT-M超存智能鼎

当前世界,数字信息化已经进入大数据时代,用户的数据每天都在高速,海量数据的激增为我们带来了新问题 数据存储归档难。

(1)磁盘阵列越买越大,但跟不上数据增加的速度。多数单位被迫对影像、视频数据采取循环存储的策略,忍痛放弃了限定日期以外数据回放的权利。

(2)磁介质存储满足不了归档数据的长期存储要求。磁盘的寿命和易损性决定,数据存储需要不断备份,但又找不到合适的备份方案。

(3)设备和数据日益增加,系统和数据维护效率每况愈下。每日产生的归档数据不仅给使用部门带来了便利,而且也在日积月累中增加了系统存储的负担、降低了运行效率。同时也给维护人员带来了更大的工作量,使有限的技术人员成为设备和数据的奴隶。

(4)存储设备的功耗越来越大。一方面归档数据是典型的“冷数据”,访问次数不是很高;另一方面归档数据特别是数据的积累对于审计、大数据应用等方向有着重要、不可替代的作用,是不能简单地删除的。但是,不论是SSD,还是磁盘,长期处于加电运行状态必然带来功耗的增加,给已经功耗很大的信息中心增加不必要的额外功耗。对冷数据采取“冷存储”策略,是可持续发展的必然要求。

如何解决数据的不断增加,如何快速的存储、读取和管理数据,如何保障存储数据的安全,成为重中之重,联鼎软件根据多年市场调研和产品研发,隆重推出分布式存储一体化解决方案—联鼎超存智能鼎LIT-M系列。

LIT-M系列智能鼎是联鼎软件推出的一款分布式对象存储产品,该产品通过先进的 DHT 技术构建为统一的分布式对象存储池,并利用副本和纠删码(Erasure Code)技术实现数据的高可靠性和高可用性,并支持跨地域的数据中心主备、双活形式容灾,单文件系统可同时管理数以百亿文件及数百 PB 级数据,非常适用于历史非结构化数据文件归档与查询场景,以及大数据分析和检索场景。

核心概念


• 分布式、去中心化架构

• 全冗余可靠性设计

• 块存储优化

• 文件存储特性

• 对象存储特性

• 数据容灾



描述

超存智能鼎是一个由标准化X86服务器组成的横向扩展型集群,支持所有NAS和s3访问协议,快速构建复杂的共享访问环境。支持SSD/SAS/SATA和SED磁盘,便于用户灵活选择。保障档案数字化归档查询系统在检索过程中的正常运行,同时也可满足对未来性能扩展的需求。采用对象存储特有的哈希算法,彻底解决小文件问题;提供真正基于不同存储介质分级存储的数据全生命周期管理方案;支持光盘库数据即时恢复。

超存智能鼎LIT-M系列数据安全方案:




功能框架超存智能鼎采用去中心化的分布式集群管理技术和数据多副本存储技术,提供高可扩展和高可靠的分布式存储功能特性。



存储接口层对外提供业务访问的接口标准,支持基于http的S3和Swift接口,也兼容传统应用NFS FTP接口,支持不同接口之间的数据互操作。

存储服务层对业务呈现丰富的功能特性,比如多数据上传下载删除列举,租户隔离,访问授权,数据共享,分片上传,多版本,跨域数据复制等。

存储引擎层负责数据的寻址、分布、数据可靠性、一致性、正确性保证,小文件合并,存储单元状态监控,数据恢复控制。

存储硬件层支持主流X86通用服务器,支持SAS/SATA机械盘和固态硬盘,网络上支持 1GE/10GE 以太网和 InfiniBand 网络互连。为了对硬件进行控制和故障管理,实现了磁盘控制卡管理和磁盘错误管理功能。

存储管理层面向技术支持工程师,运维工程师提供友好的操作界面,进行系统安装、部署以及运维操作等。

核心组件



超存智能鼎架构的关键是无中心的全分布式存储引擎

集群管理服务(MON)

负责监控整个集群的健康状态,负责维护集群拓扑的系统正常运行,故障自愈,数据恢复, MON 的部署数量为奇数个,比如3/5/7,各个 MON 进程之间采用心跳的方式进行相互监督。

客户端服务(SDC)

SDC 是一个轻量级的驱动软件,安装在需要访问超存智能鼎虚拟块设备的应用服务器上, 并通过卷映射的方式和标准的iSCSI接口,为应用或者文件系统提供块设备访问能力。

存储服务(OSD)

超存智能鼎OSD实现S3接口的各项功能业务特性,并负责组织和下发数据给OSD, RGW 是无状态进程,因此可实现横向扩展和分布式的部署。

负载均衡

通过负载均衡器对外呈现统一的访问入口,以及将业务请求进行均衡分发给 RGW 进程。

功能特点



1、海量扩展

超存智能鼎存储集群支持Scaleout方式进行横向扩展,存储容量和性能随存储服务器数量线性增长。采用去中心化的元数据分散技术架构,实现业务无感知,低影响前提下进行平滑扩展,而不会出现系统性能骤降的情况。

• 在线扩展

只需要将部署了超存智能鼎的新节点和原有集群连接到同一网络,通过图形控制台或者命令将新节点添加到集群中即可,扩展后新增节点的计算和存储资源会自动立即生效并开始工作,因此,集群系统的存储容量和性能也随之线性扩展。整个扩展过程都是在线完成,不会影响正在运行的业务,应用也无需停机。

2、全局自动负载均衡

联鼎超存智能鼎采用先进的智能算法进行数据均衡,当一个新节点或磁盘加入集群时,系统根据业务负载情况,基于业务QOS进行快速的数据均衡,无需任何的人工干预,能够智能的在保障业务稳定性和快速数据均衡之间找到良好平衡点。

3、海量文件支持

联鼎超存智能鼎支持亚马逊S3存储访问协议,该协议采用扁平化目录管理结构,避免了海量文件数量条件下的目录管理复杂性以及性能问题。超存智能鼎采用先进的 DHT(分布式哈希)算法,该算法通过计算而非查找元数据服务器的方式来实现文件的寻址定位,突破了元数据服务器性能限制的约束,使得单一名字空间下文件数量可达百亿级别(理论上无上限),存储空间支持数百 PB 级容量扩展。



技术规格指标:





4、支持异构硬件

超存智能鼎完全软件定义基础设施存储产品,能够兼容国内外各大主流厂商的服务器硬件,包括不同品牌、规格的服务器,硬盘(磁盘,SSD,PCIe flash卡),支持不同规格、数量的异构硬件的混合部署。

5、对象文件分片上传下载支持





6、安全可靠

数据安全是超存智能鼎最为重要的核心功能之一。

• 支持副本或者EC校验硬盘和服务器保护机制

超存智能鼎支持副本或者EC纠删码数据保护机制,可根据用户的需求自定义数据保护安全级别,提供节点级,机柜级,POD 级等级别的支持,数据写入的时候,系统自动将不同副本或者EC的不同数据块分散到不同的硬件故障域,当硬盘、服务器甚至机柜故障时,既不影响业务可用性,也不会导致数据的丢失。



• 全局数据恢复

超存智能鼎面对各种故障场景提供非常全面的数据保护,故障检测以及数据恢复机制,包括系统磁盘损坏、磁盘静默数据跳变、服务器永久故障、操作系统损坏,系统自动进行数据正确性,完整性,一致性校验,自动发现硬件故障并启动智能数据并行恢复,大量硬盘有序并行的参与数据重建,避免单个节点的性能瓶颈,有效控制数据恢复对业务的影响。

• 支持跨数据中心部署

超存智能鼎支持跨数据中心部署,客户可根据需要进行多数据中心规划部署,存储支持 ACTIVE-ACTIVE方式访问,在实现跨地域容灾的同时支持跨地域的应用协同,就近访问等场景,支持数据中心级别故障情况下做到无人为干预的、快速容灾切换。可结合GSLB全局负载均衡,实现应用在多个数据中心进行就近访问,提升存储访问速度,利用全局均衡进行业务的跨数据中心负荷分担。



提供全面的数据中心连接状态以及数据一致性监控,并支持告警的界面展示,邮件,SNMP等方式的告警通知,随时可了解数据中心连接状态以及数据同步完成情况。

• 支持基于快照的数据回滚

超存智能鼎提供全场景的分级数据保护解决方案。除了基于EC、多副本以及跨站点部署等先进技术,构建了“硬故障”数据保护方案,能够有效应对的磁盘、主机故障以及数据中心电力故障、火灾地震灾难等场景,另外支持基于时间点快照的数据回滚特性,以应对人为误操作导致的数据误修改、误删除等场景,支持灵活的快照点定义策略,任意快照时间点的一键回滚。

7、管理

超存智能鼎提供了数据生命周期管理、运维、运营管理、硬件资源管理和存储资源管理。

• 数据生命周期管理:

超存智能鼎支持数据全生命周期管理,业务自定义生命周期策略,系统根据用户策略,自动推进数据的生命周期演进,直至数据的消亡,为客户的数据管理和存储成本结构优化提供完整解决方案。

• 运维、运营管理

超存智能鼎面向运维,运营,审计,业务等 IT 角色提供丰富的企业级特性,提供简单、易用,内容丰富的图形化管理界面,包括仪表盘、硬件监控、多数据中心管理、性能指标统计、软硬件告警及展示等功能特性,支持一键升级、扩容、配置等变更操作功能特性。对运营、业务、审计方提供面向角色的业务访问精细统计报表,运营数据等。

• 硬件资源管理

超存智能鼎管理系统支持网络、磁盘、CPU、内存等硬件资源状态监控:网卡:监控网卡的性能、闪断情况、丢包情况,并在异常时主动告警或者自动隔离故障;硬盘:监控硬盘的性能、慢盘、故障等情况,对于SSD 磁盘,监控寿命和磨损情况;CPU、内存:监控使用率,当超过设定阈值是自动告警。

• 存储资源管理

8、基于文件名,自定义元数据以及规则检索

超存智能鼎支持文件对象以 key-value 形式自定义标签,并基于文件名、自定义标签以及系统默认属性字段按照指定规则进行精确或者模糊匹配检索,帮助用户在海量对象文件条件下进行快速的检索,从而更加高效的管理一些近线或者离线数据。

9、方案优势

• 满足未来数据增长需求

联鼎超存智能鼎代替 NAS 存储,无论从存储容量规模、文件个数规模的扩展性上,比传统 NAS 具有天然的优势。而且从实际应用情况来看,NAS本身是为了企业文件共享需要而设计,而分布式对象存储在公有云上已经应用并充分证明,可以完全满足海量数据的存储需要,和数据爆发性增长需求。

• 简化业务系统开发工作

联鼎超存智能鼎自身提供了如下功能:分布式 Web 文件访问方式;简化了业务系统必须将 NAS 的文件通过 Web进行传输处理的开发工作量;提供了文件粒度的访问控制:简化了业务系统对文件进行权限管理和访问控制的开发工作;支持数据的生命周期管理:在归档查询应用场景下,简化了业务系统需要对 NAS 文件进行生命周期管理的开发工作。

• 满足未来业务云建设趋势

基于 S3 或者类 S3 的分布式对象存储方案,在互联网、公有云已经成为非结构化存储的事实标准,已经完全取代 NAS 成为更加普遍接受的存储方式。随着应用的广泛和生态链的完善,在企业内部私有云或者混合云也大量的采用对象存储作为非结构化数据的存储系统。提前在档案中心采用对象存储方案,有利于未来归档数据在企业内部、混合云,以及公有云之间更加灵活的搬迁和切换。

• 兼容多种硬件厂商服务器平台

超存智能鼎可以与业界各标准厂商的x86服务器兼容。包括Dell、惠普、华为、联想、中科曙光、浪潮等服务器厂商。客户可以自由选择合适的服务器品牌,不被某一厂商锁定。

应用场景



• 政务大数据:

政务大数据有大量的纸质文档扫描件、录音录像等归档数据,联鼎超存智能鼎彻底解决海量小文件的问题,能够支持上亿甚至十亿级别的文件数量,完美的支持多数据中心部署,实现数据自动汇聚或者分发,可以实现跨驱虎的数据容灾备份,降低人工数据寄存和拷贝的人力成本,提高效率。

• 智能制造:

联鼎超存智能鼎使用标准X86架构组件统一存储资源池,一套存储平台同时提供块、文件、对象存储接口,满足上亿小文件的非结构化数据存储,平稳的数据传输等多种应用场景需求。存储容量及性能可按需进行线性扩展,无须一次性高成本投入,大幅度降低TCO。

• 多数据中心:

联鼎超存智能鼎具备私有云的技术架构优势,面向企业提供可扩展、高可靠的数据存储能力,能够打通多数据中心之间的数据,在存储层面支持数据横向跨区域流动,支持跨区域的统一名字空间,对应用层展示统一的数据访问界面,实现数据就近访问,应用层无需关注数据的实际物理位置,助力企业无缝对接生产环境。

• 医疗大数据:

联鼎超存智能鼎采用特有的哈希算法,彻底解决小文件问题,将阅片速度从数秒甚至数十秒降低至毫秒级,对近线存储中的全量影像数据进行医疗影像AI计算,基于分层存储的生命周期,真正消除影像数据长期保存丢失的风险,作为非结构化平台,可为医疗影像系统、电子病历归档,纸质病案电子化等业务提供大量存储业务。

基本参数