分布式文件存储系统有哪些

发布时间：2025-09-21 03:45:36 阅读量： 0 来源： 互联网转载

分布式文件存储系统有：1.GPFS；2.PVFS；3.Lustre；4.PanFS；5.GoogleFS。PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群，Lustre文件系统是一个基于对象存储的分布式文件系统。

常见的分布式文件存储系统介绍：

1、Lustre

lustre是一个大规模的、安全可靠的，具备高可用性的集群文件系统，它是由SUN公司开发和维护。

该项目主要的目的就是开发下一代的集群文件系统，可以支持超过10000个节点，数以PB的数量存储系统。

2、Hadoop

hadoop不仅仅是一个用于存储的分布式文件系统，而其设计更是用来在由通用计算设备组成的大型集群上执行分布式应用的框架。

目前主要应用于大数据、区块链等领域。

3、FastDFS

FastDFS是一个开源的分布式文件系统，它对文件进行管理，功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等，解决了大容量存储和负载均衡的问题。

特别适合以文件为载体的在线服务，如相册网站，视频网站等等。

4、Ceph

Ceph是一个具有高扩展、高可用、高性能、可以提供对象存储、块存储、文件存储的分布式文件系统，它可以提供 PD 级别的存储空间，理论上说，是无上限的。

分布式文件系统（Distributed File System）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连，它的设计是基于客户端/服务器模式。应用服务器和文件服务器分别存在于网络当中，而这里的网络，可以是统一子网，也可以是不同子网。服务器对文件的存取，均在网络进行，这样就可以突破常用存储设备的容量限制。

5. TFS

TFS（Taobao File System）是由淘宝开发的一个分布式文件系统，其内部经过特殊的优化处理，适用于海量的小文件存储，目前已经对外开源；

TFS采用自有的文件系统格式存储，因此需要专用的API接口去访问，目前官方提供的客户端版本有：C++/JAVA/PHP。

特性：

1）在TFS文件系统中，NameServer负责管理文件元数据，通过HA机制实现主备热切换，由于所有元数据都是在内存中，其处理效率非常高效，系统架构也非常简单，管理也很方便；

2）TFS的DataServer作为分部署数据存储节点，同时也具备负载均衡和冗余备份的功能，由于采用自有的文件系统，对小文件会采取合并策略，减少数据碎片，从而提升IO性能；

3）TFS将元数据信息（BlockID、FileID）直接映射至文件名中，这一设计大大降低了存储元数据的内存空间。

最后，推荐我们的管理工具给大家。

上一篇: 打造高价值反向链接：CSA 外链建设规划和执行方案

分布式文件存储系统有哪些

热门文章