主流高性能计算文件管理系统优劣点评

时间:2009-07-22   来源:   网友评论:0   人气: 253 作者:

当下市场中有很多高性能文件系统:Sun QFS、IBM GPFS、Quantum StorNext、Red Hat GFS和Panasas等等,那么哪一个是最好的呢?这要取决于你自身的需求。 Panasas首席营销管Len Rosenthal表示:“我们的竞争对手包括NetApp OnTap或者OnTap GX、EMC、IBM GPFS、HP Polyser
  

 

当下市场中有很多高性能文件系统:Sun QFS、IBM GPFS、Quantum StorNext、Red Hat GFS和Panasas等等,那么哪一个是最好的呢?这要取决于你自身的需求。

Panasas首席营销管Len Rosenthal表示:“我们的竞争对手包括NetApp OnTap或者OnTap GX、EMC、IBM GPFS、HP Polyserve或者Sun的开源研究项目Lustre。虽然我们已经取代了运行Sun QFS的系统,但是在销售方面却从来没有真正地与他们竞争。”

Rosenthal表示,Quantum StorNext和HP Polyserve只能处理最高16个集群NFS服务器,所以他们不会与扩展NAS产品竞争。同样地,IBM GPFS和Sun Lustre与Panasas PanFS一样都是并行文件系统,主要被高等院校和政府研究机构用于扩展存储容量的用途,但是他们不提供足够高的I/O率或者快照等数据管理工具。

那么Panasas的竞争对手是如何对此回应的?

IBM公司GPFS产品经理Todd Neville表示,GPFS安装基础非常广泛,其中包括高性能计算、零售、媒体和娱乐、金融服务、生命科学、医疗、Web 2.0、电信以及制造业。Neville也不认同Panasas关于I/O率的说法。

昆腾公司软件业务产品线总监Greg Nuss也强调说,Panasas关于StorNext功能的说法是完全错误的。

他说:“StorNext集群中的每个节点都可以作为一个NFS服务器,并且在终端代表通用文件系统命名空间。现在,我们支持1000个节点,支持与集群连接的附加SAN节点或者附加LAN节点。现在我们每天实际安装的节点大约在300到400个之间。一般来说我们并不与Panasas形成市场竞争关系,因为StorNext一般不配置在扩展NAS架构中,而是用于高性能工作流以及归档架构中。”

与此同时,惠普也反驳了Panasas的说法。惠普表示,HP Scalable NAS在用户集群中能够使用的NAS File Services服务器节点方面并不存在架构性的限制。

HP StorageWorks部门NAS产品营销总监Ian Duncan表示:“我们所说的16个服务器节点限制仅仅是指测试限制。现在我们有许多NAS File Service用户正在使用超过16个服务器节点的集群。”

Duncan表示,Panasas、Sun QFS、IBM GPFS以及Quantum StorNext并不是真正的对称文件系统,而是基于主服务器的集群文件系统——不管是否针对元数据操作和锁定操作,或者两者兼备——这非常容易被作为传统的、单节点系统。然而,Duncan认为这些厂商可能面临主服务器单一角色导致的性能和可用性方面的瓶颈。

Duncan表示:“当添加服务器的时候,在主服务器上的负载增加,这可能会造成性能的削弱,并且在主服务器发生故障的情况下导致更多节点功能性的丢失。相比之下,4400 Scalable NAS File Services采用了HP Clustered File System (CFS),开发出多台独立服务器来提供更高的可扩展性和可用性,将集群与任何独立节点故障或者性能局限隔离开来。”

抛开以上这些,下面让我们来仔细看一看其中一些文件系统。

Panasas PanFS

Panasas PanFS并行文件系统是一个基于目标的文件系统,面向那些在I/O和带宽方面要求高性能水平的扩展应用。与Panasas同样提供支持的NFS或者CIFS不同的是,PanFS采用并行的DirectFLOW协议,该协议是即将推出的pNFS(是NFS 4.1的重要升级)的基础。据称,Panasas并行存储的主要优点是超高应用性能。

NFS服务器要求所有I/O请求必须通过一个NAS文件管理器头(Filer head),而PanFS能够实现数据从客户或者服务器节点向存储系统的并行传输。Panasas系统将NAS机头从数据路径中消除掉,使它不再是I/O瓶颈。例如:Panasas并行存储配合安装全球性能最高的计算机系统——应用在美国新墨西哥洛斯阿拉莫斯国家实验室的Roadrunner超级计算机。它向一个共享文件系统的传输率可以达到每秒100GB。


 

文章评论