【IT168 专稿】目前,集群架构已经成为HPC最为流行的架构之一。伴随着HPC架构的日渐流行,HPC存储市场已经见证了数据的爆炸性增长,业界对数据管理的关注度不断增加。企业IT部门正在寻找解决方案解决数据增长问题同时要符合监管/合规性要求,同时限制对IT预算及资源的影响。数据归档及管理是有效解决不断上升的数据存储需求的关键、新兴领域。
分级存储管理(HSM)解决方案的核心是软件。HSM系统监控使用数据的方式,然后通过定义存储策略,将不经常使用或者是重要性不强的数据迁移至速度较慢的存储层,以回收速度更快的存储层上的磁盘空间。非常详细的逻辑需要对数据进行编目并监控频繁使用的文件,这些文件应该存放于速度较快的存储层。软件还需要这些请求进行管理并确保这些请求得到及时的响应。
HSM解决方案包括两大关键特性:基于策略的迁移以及透明存取。
基于策略的迁移
规则可以通过阈值,所有者,使用年限,大小,过滤器,文件或者是其他增加其他灵活性的搜索条件进行定义。数据可以从现有的存储层迁移或者拷贝至另一个不同的存储层,采用拷贝方式在同一个解决方案内实现了对数据的保护。
透明传输
数据需要对最终用户保持在归档或者HSM发生之前的访问方式。同样,用户能够查找并访问归档或者是在原有存储层上的存根文件的信息,最大限度地减少从管理员获取帮助。
Dell HPC NSS分层存储解决方案(HTSS)登场
Dell HPC分层存储结局方案集成了CommVault Simpana 9 数据及信息管理软件,使用Dell NFS 存储解决方案(NSS)以及PowerVault ML6000带库提供了一个多层的分级存储管理系统。目标是提供数据存储技术,提供分级存储管理及归档解决方案,基于用户定义的存储策略自动在存储层之间自动迁移数据。
用户正在寻找有效的解决方案以:
在单独的存储层之间组织数据的存储与检索,实现成本及存储空间的效率管理。
简化数据存储过程
关注于不断紧缩的、昂贵的主存储需求,将数据迁移到价格更低的第二个存储层上。
HPC用户通常对HPC存储解决方案有三种需求:
暂存空间(第一层):高吞吐量以及可扩展的集群工作空间。该解决方案由Dell|Terascala HPC 存储解决方案(DT-HSS)提供,基于Lustre文件系统以及Dell PowerVault存储阵列提供一个高吞吐量的scale-out存储设施。
主存储(第二层):存储用户数据的可靠的、高性价比、高性能存储。该解决方案由在使用Dell PowerVault存储的Red Hat可扩展文件系统(XFS)之上使用NFS 文件系统的Dell NFS 存储解决方案(NSS)提供。主存储为非结构化数据提供了易于管理,可靠的,高性价比解决方案。
长期存储(第三层):低成本,大容量存储用于保留长期的数据。保留长期数据的存储基于磁盘、磁带或者是两者的结合。
Dell HPC分级存储解决方案使Dell用户能够管理数据在不同层之间的归档及迁移。
更具体的说,HTSS借助精细的,基于策略的数据管理自动化过程在存储层之间迁移数据,保留包含文件元数据的根文件,然后将数据块迁移至速度较慢的存储层(通常称之为HSM)。另外,你可以使用HTSS进行数据归档,在这种情况根文件将不会被保留下来,你需要通过一种新的方法访问数据。通常来讲,频繁使用的数据可以被迁移到更快的存储层,而没有被频繁使用的数据可以被迁移到位于下层、速度较慢的介质上。相应的,当文件经常被使用时,可以将它们存放在第一层也就是最快的存储层上,当这些文件不再被使用时,将被迁移到最下层也就是速度最慢的存储层上,以满足管理或合规性的要求。
安装在分级存储管理系统中的Commvault Simpana 9 数据管理软件对所有数据的迁移进行集中管理。该解决方案通过一体化的存储数据管理解决方案进行交付,由Dell和Commvault提供部署服务以及全面的软硬件支持。
推荐阅读:HPC社区
http://en.community.dell.com/techcenter/high-performance-computing/b/hpc_storage_and_file_systems/archive/2012/02/03/dell-hpc-nss-tiered-storage-solution.aspx