本帖最后由 十四王爷 于 2016-7-11 15:22 编辑
7. 分布式文件系统
7.1. 文件系统
1) 本地文件系统
一种存储和组织计算机数据的方法,它使得对其存取和查找变得容易。 文件系统管理的存储资源直接连在本地节点上,如:ext2,ext3,ext4,NTFS 2) 分布式文件系统
文件系统管理的存储资源通过网络不节点相连 分布式文件系统的设计是基于客户机/服务器模式,如:nfs 3) 集群文件系统
由多个服务器节点组成的分布式文件系统,如ISILON,LoongStore,Lustre 4) 并行文件系统
所有客户端可以同时幵发读写同一个文件
支持幵行应用(如MPI)如Lustre,GPFS
7.2. 基于集群的分布式架构
1) 特点
分布式文件系统
服务器直连各自存储 MDS管理元数据 RAID、卷管理、文件系统三者合一 性能和容量同时扩展 规模可以很大
2) 典型案例
a) 国外商业产品
IBM GPFS, EMC ISILON, PanasasPanFS
b ) 国外开源系统
Intel Lustre, Redhat GFS, GlusterGlusterfs
Clemon PVFS,Sage Weil/InktankCeph, Apache HDFS
c ) 国内产品
中科蓝鲸BWFS
龙存Loongstore 余庆FastDFS 淘宝TFS
7.3. 性能评价方法
1)带宽
2)IOPS
3)试工具
Linux dd IOzone IOmeter Mdtest IOR
本文来自CUDA大咖天山原创,经典之作,授权NVIDIA CUDA 官方论坛使用,未经允许,不得转载。
|