https://www.myziyuan.com/
- 网站模板素材下载
- 分布式文件系统,集群文件系统,并行文件系统,这三个概念很容易混淆,每个人经常使用它。总有一些人询问这三个的差异和链接,实际上,他们做了自己的重叠场所,但也有显着差异。
- 2021-06-12 19:03:01
- 201538
- 分布式存储系统用于将数据存储在多个单独的设备上。传统的网络存储系统将所有数据存储在集中式存储服务器中,存储服务器是系统性能的瓶颈,也是可靠性和安全性的焦点,并且不符合大规模存储应用的需要。分布式网络存储系统使用可伸缩系统结构,使用多个存储服务器划分存储负载,使用位置服务器定位存储信息,不仅提高了系统的可靠性,可用性,访问效率,还可以轻松扩展。简单地,为了简化用户的使用,提供了一种分布式高速缓存系统,为此分布式存储系统和本地数据Buff提供访问接口ering降低网络压力。
- 2021-06-12 19:02:00
- 互站网
- 当前主流分布式文件系统有哪些各有什么优缺点,目前几个主流的分布式文件系统除GPFS外,还有PVFS、Lustre、PanFS、GoogleFS等。 1.PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群而创建的一个开源项目,目前PVFS还存在以下不足: 1)单一管理节点:只有一个管理节点来管理元数据,当集群系统达到一定的规模之后,管理节点将可能出现过度繁忙的情况,这时管理节点将成为系统瓶颈; 2)对数据的存储缺乏容错机制:当某一I/O节点无法工作时,数据将出现不可用的情况; 3)静态配置:对PVFS的配置只能在启动前进行,一旦系统运行则不可再更改原先的配置。 2.Lustre文件系统是一个基于对象存储的分布式文件系统,此项目于1999年在Carnegie Mellon University启动,Lustre也是一个开源项目。它只有两个元数据管理节点,同PVFS类似,当系统达到一定的规模之后,管理节点会成为Lustre系统中的瓶颈。 3.PanFS(Panasas File System)是Panasas公司用于管理自己的集群存储系统的分布式文件系统。 4.GoogleFS(Google File System)是Google公司为了满足公司内部的数据处理需要而设计的一套分布式文件系统。 5.相对其它的文件系统,GPFS的主要优点有以下三点: 1)使用分布式锁管理和大数据块策略支持更大规模的集群系统,文件系统的令牌管理器为块、inode、属性和目录项建立细粒度的锁,第一个获得锁的客户将负责维护相应共享对象的一致性管理,这减少了元数据服务器的负担; 2)拥有多个元数据服务器,元数据也是分布式,使得元数据的管理不再是系统瓶颈; 3)令牌管理以字节作为锁的最小单位,也就是说除非两个请求访问的是同一文件的同一字节数据,对于数据的访问请求永远不会冲突.
- 2021-06-12 19:02:00