大容量二级存储

一、非结构化数据迁移和保护需求

对于今天的NAS来说,迁移到NAS涉及数千TB和数十亿个文件并不少见,而且往往通常在异构、不同架构的存储系统之间。现在,NAS和并行文件系统中存储的数据是公司网络中最重要的数据之一,通常包括客户数据比如政府的审计、财务规定,或用于商业智能的研究信息。此类数据的任何丢失或业务系统的任何中断,它可能会造成无法形容的业务损失和费用。

由于上述的种种需求,企业将研究如何彻底改变这种方式:企业轻松处理多套NAS或文件系统中数据之间的数据转换和迁移,以及软件驱动迁移方法帮助客户实现其TCO目标,最大限度地减少中断他们的业务,并确保他们的数据安全,以更高性价比的方式对数据进行长期的保存并实现便捷的访问调用。

 

二、使用StarDM实现数据按需流转

StarDM是一款应对现代数据中心非结构化数据文件存储和保护挑战的迁移软件,主要有以下两个主要用途:

(1)构建大容量二级存储系统:结合StarGFS并行文件系统以及高密度的存储服务器,可以帮助企业构建一个极具弹性扩展能力、高存储密度、丰富存储接口协议、高数据安全性的二级存储平台;

(2)帮助企业实现快速将数据按需从不同的存储系统之间迁移和复制;

 

  • 易于使用的接口

  • StarDM还拥有许多NAS和对象迁移以及将它们组合成单一直观的图形用户界面(GUI),可以轻松管理任意数量、任何复杂项目的迁移—无论迁移是否在同一个数据中心或遍布全球。最重要的是,StarDM验证并跟踪每一个在迁移链中的文件,以便任何公司都可以确保其数据是安全的迁移,并灵活的构建一个高存储密度、高安全性的二级存储系统。

 

 

常规流程

StarDM帮助企业构建二级存储的步骤和流程:

 

 

确认L1存储、L2存储,配置数据备份迁移路径

通过选择生产端主机,确定数据复制的源主机。StarDM支持各种类型的文件/对象存储介质。

启动数据复制

可以根据需求启用基于文件数据的复制任务,复制可以设置为定时、立即、持续复制模式,以适用不同的业务场景。持续将数据复制到 StarDM平台中。

演练或接管、二级数据调用

可以根据需求,在备份端进行演练或者直接对接业务系统,业务系统可以应急挂载备份存储文件或通过S3对象访问需要的文件数据。

 

  • 加快数据迁移速度

  • 所以企业需要加速旧存储架构到新分布式存储架构的转变,通过加速数据的迁移来快速实现:

 

 

  • 提升数据安全性

  • StarDM将为它被迁移了每个文件创建hash。仅当源和目标两端完全匹配,StarDM才会声明文件已成功迁移。创建一个报告来显示每个文件的每个hash散列,保留以备将来审计。

 

使用StarDM,所有这些都是保持极高的速度和轻松的操作来自动完成的。

 

  • 灵活性支持

  • 在创建一些主要的旧存储迁移工具时现有的公司。今天,存储市场蓬勃发展,每家公司他们对如何实现存储协议有自己的选择。这为公司提供了帮助有多种选择,但可以从一个平台移动到另一个平台变得非常复杂。

 

常见迁移复杂性的几个示例:

 

WORM(一次写入多次读取):结合StarGFS并行文件系统的WORM功能,数据集结合了不变性和保留性确保记录的数据在给定时间段内不被修改的周期。这些在有监管要求的行业中经常会有明确的时间要求。StarDM提供了迁移这些不可变数据集并保留它们的功能它们在目标平台上的保留期。

 

新存储的细粒度权限控制和管理:StarGFS并行文件系统能够提供独特细粒度的文件系统绝大部分的操作权限控制,能够根据需要灵活将指定的文件数据设定高达128种权限粒度控制,保障数据从老旧存储中迁移到新存储系统中以后保障数据安全可控。

 

新存储的操作日志记录和审计:新存储采用了StarGFS并行文件系统所构建,能够打开关于文件的日常操作详细记录,支持对所有的操作日志进行审计,确保数据的生命周期内可以灵活追溯。

 

 

三、结论

StarDM迁移系统以及StarGFS构建大规模文件存储系统,能够按需构建大容量二级存储系统,成为跟一级高性能存储系统的重要补充,简化并加速新技术并使向新存储过渡的整个过程,让它变得简单而有益。

首页    解决方案    大容量二级存储

相关案例

  • 中国电信-海量视频点播

    随着互联网技术的逐渐成熟和创新模式的不断涌现,用户与互联网之间的交互越来越多,用户的浏览习惯也逐渐从简单的文字转向了更加丰富多彩的视讯类内容。互联网用户可以自由发挥丰富的想象力和创新能力贡献出大量极具观赏性的视讯内容,极大的丰富了互联网内涵,也吸引了越来越多的眼球。视讯网站吸引了大量忠实的用户并迅速地发展,用户又不断的参与到视讯内容作者的队伍中,规模几乎呈爆炸性的增长。在这样背景下,视讯应用的多种特点给存储系统带来了严峻的挑战。

    67 ¥ 0.00
  • 某保险公司-保险影像数据

    一直以来,作为传统行业,保险公司的存储系统普遍采用集中式的SAN和NAS存储。这种采用专业硬件的紧耦合架构设计的传统集中式存储一直主导着险企存储技术的发展,而且长期以来都作为各种保险业务、ERP、邮件的主存储系统,因此我们的关注点也大多集中在如何提高这些专用存储系统的性能、安全性和可管理性上。但随着企业的发展,保险业务量的激增,企业信息系统出现越来越多的非结构化数据。影像系统是非结构化数据的一个主要来源,已经积累了数十亿的文件量,占用了近PB的空间。这些非结构化数据主要存放在上述集中式存储上。

    111 ¥ 0.00
  • 浙江某精密制造企业-人工智能

    2012年以后,得益于数据量的上涨、运算力的提升和机器学习新算法(深度学习)的出现,人工智能开始大爆发。人工智能广泛的采用深度学习来实现,目前大部分的深度学习算法研究都基于GPU架构的超算平台。GPU+人工智能算法在很多领域都取得了很好的应用效果,如信号处理、物理模拟、几何计算、数据挖掘和图像处理等领域。HPC和AI正走的越来越近。

    浙江某精密制造企业为了能够更好的进行生产制造,采用了人工智能技术来对相关生产数据进行更深度的分析,从而获得对于更多优化生产和制造相关的方案。

    84 ¥ 0.00
  • 上海某三甲医院-医疗影像数据

    上海市某知名三甲医院是一所集医疗、教学、科研、预防、保健、康复、急救为一体的三级甲等综合性医院,是上海市医保和新农合定点医院,是国家执业医师资格临床技能考试基地、国家住院医师培训基地、上海市住院医师规范化培训基地、上海市临床专科培训基地,先后荣获全国百佳医院、上海市文明单位等荣誉称号。

    92 ¥ 0.00
  • 环球数码-影视动漫制作

    在动漫行业的应用中,3D建模渲染、动画、视频游戏、影视后期等图形密集型应用对硬件处理性能和网络带宽都有较高要求。随着高清、2K甚至4K电影的制作需求的增长,以往的NAS系统统一存储空间不足,从而成为了整套系统的限制;NAS头成为限制前端计算节点任务运行效率的重要因素;传统方案存储系统的业务访问连续性不足。传统的存储解决方案难以满足集群制作与渲染对于存储带宽和容量的需求,成为了制作流程中的瓶颈。

    103 ¥ 0.00