高性能计算GPU解决方案系列课程七--分布式文件系统

  1. 云栖社区>
  2. 博客>
  3. 正文

高性能计算GPU解决方案系列课程七--分布式文件系统

cuda_study 2018-03-06 15:55:57 浏览1725
展开阅读全文
7.     分布式文件系统
7.1.     文件系统     

     1)   本地文件系统
      
一种存储和组织计算机数据的方法,它使得对其存取和查找变得容易。
        文件系统管理的存储资源直接连在本地节点上,如:ext2ext3ext4NTFS
     2)   分布式文件系统
        文件系统管理的存储资源通过网络不节点相连
        分布式文件系统的设计是基于客户机/服务器模式,如:nfs
    3)    集群文件系统
        由多个服务器节点组成的分布式文件系统,ISILONLoongStoreLustre    4)    并行文件系统
        所有客户端可以同时幵发读写同一个文件
        支持幵行应用(MPI)LustreGPFS
7.2.     基于集群的分布式架构  
  1)    特点
        分布式文件系统
        服务器直连各自存储
        MDS管理元数据
        RAID、卷管理、文件系统三者合一
        性能和容量同时扩展
        规模可以很大
151421z366zhzfy38ikady.png
                             
   2)     典型案例
      a)  国外商业产品
             IBM GPFS, EMC ISILON, PanasasPanFS     
     b )    国外开源系统
             Intel Lustre, Redhat GFS, GlusterGlusterfs
             Clemon PVFS,Sage Weil/InktankCeph, Apache HDFS
     c )     国内产品
             中科蓝鲸BWFS
             龙存Loongstore
             余庆FastDFS
             淘宝TFS

7.3.     性能评价方法
           1)带宽
           2)IOPS
           3)试工具
                Linux dd
                IOzone
                IOmeter
                Mdtest
                IOR

原文发布时间为: 2016-7-11 15:14:44
原文由:十四王爷 发布,版权归属于原作者 
本文来自云栖社区合作伙伴NVIDIA,了解相关信息可以关注NVIDIA官方网站

网友评论

登录后评论
0/500
评论
cuda_study
+ 关注