2023年最新的分布式存储技术是什么？(十大分布式存储)

分布式存储系统(DSS)，也指分布式文件系统(Distributed File)
系统，DFS).分布式存储，原则上是将数据文件存储在集群服务器上，而构建集群的服务器往往是由低成本的商用硬件组成的。用户使用系统提供的接口方便快捷地访问存储系统，系统中的软硬件协同完成用户的操作指令。

一.分布式存储技术

(1)分布式存储技术

①网络连接存储(NAS)

NAS的主要组件包括NAS机头和存储阵列。NAS头主要由四部分组成，包括* * *接口、文件共享协议、
专用操作系统和底层存储接口。存储可以位于NAS内部，也可以作为独立于NAS的单独存储阵列存在。客户端用户可以使用专有的文件共享协议，如Windows用户的CIFS协议、Unix用户的NFS协议和通用IP。
***
访问NAS设备上的存储资源。NAS机头收到用户的文件访问I/O后，通过其内部的专用操作系统将其转换为块I/O，并结合操作系统记录的文件位置来访问文件。

优点:提高传统存储环境的扩展性，整合服务器和存储资源进行统一管理，简化管理任务。

缺点:不能满足高性能的要求，不适合在存储介质上进行复杂操作的任务。

②存储区域网络(SAN)

根据服务器和存储设备之间数据传输协议的不同，SAN主要分为两种:光纤通道SAN和IP SAN。SAN主要由服务器、存储设备和* * *组成
连接三个部分。服务器通过* * *和通用串行SCSI协议FCP(光纤通道)连接
协议)来远程访问存储设备上的数据资源。SAN把应用和存储分开，在降低应用和存储耦合的基础上，把它们的管理分开。在光纤通道SAN中，服务器和存储设备之间的连接通道包括集线器、交换机和控制器。
* * *，可以实现稳定高速的数据传输。在IP SAN中，数据传输通道是普通的IP ***，利用现有的***连接可以快速建立简单的IP。
散，方便灵活。

优缺点:基于光纤通道的SAN需要搭建专用* * *，价格昂贵，维护困难，性能也和现有IP差不多。
SAN也差不多，体现不出自己的性能优势；但IP SAN受限于传统IP * * * *的性能和稳定性，无法实现光纤通道SAN的高速稳定特性。

(2)分布式文件系统

①谷歌文件系统(GFS)

GFS是Google云计算基础设施中负责分布式数据管理的一个重要子系统，它是一个高度可用、可靠，
高度可扩展的分布式文件系统用于存储和管理大量数据。

②Hadoop文件系统(HDFS)

GFS源于Google自身的业务和应用服务需求，其具体的工程实现细节尚未完全公布。根据GFS论文的核心设计思想，研究人员在亚马逊、雅虎进行了研究。
在IT巨头的带领下，设计了一种新的高可靠、高性能的分布式文件系统HDFS。文件系统最初是作为Apache开发的。
Nutch搜索引擎工程是Apache Hadoop核心项目的重要组成部分，主要用于分布式数据存储和计算任务。

③Ceph

Ceph是一个新的开源分布式文件系统，即Sage。
Weil在加州大学圣克鲁斯分校博士研究期间负责存储研究项目，用于高性能、高可靠性和大规模分布式环境。Ceph的生态系统由四部分组成，分别是客户端和元数据服务器。
服务器集群)、对象存储集群和集群监视器(集群
显示器)，目前Ceph已经在实际生产环境中使用，很多大型IT和互联网公司，如华为、沃尔玛、彭博、AT & amp；t，易贝等。使用Ceph构建他们的分布式文件系统和存储系统。

(3)P2P存储技术

P2P存储中，所有节点地位平等，既可以是客户端，也可以是服务器。每个节点可以同时提供存储服务和访问其他节点的存储服务，打破了节点角色的壁垒，充分利用了节点自身的存储和计算资源。现有的P2P存储技术主要有OceanStore、PAST、CFS和Dynamo。

(4)新的存储技术

①基于对象的存储设备(OSD)。

OSD系统通常由三部分组成，分别是OSD节点和内部私有* * *。
和存储系统。OSD节点主要负责元数据服务和存储服务，还负责维护对象ID和文件系统域名空间的映射关系。内部* * *
它确保节点、存储系统和多个节点之间的互连。存储系统通常由廉价的高密度磁盘组成，用于存储对象。

②统一存储

统一存储系统主要包括底层存储系统、存储控制器、NAS机头、OSD节点和相应的访问协议。存储控制器可以通过iSCSI、光纤通道和FCoE协议为应用服务器提供块级数据存储和访问。NAS机头可以是通过CIFS和NFS协议的NAS。
用户提供文件级存储和访问服务。OSD节点通过REST和SOAP协议以及相应的API为应用服务器提供对象级的访问服务。应用服务器或用户不需要知道底层实现的细节，只需要根据数据访问的粒度选择合适的协议来读写统一存储平台中的数据，方便快捷。现有的统一存储产品，如EMC
VNX和华为OceanStor T系列已经能够为企业用户提供统一存储服务。

二、分布式存储与传统存储的区别

(1)高性能，每个节点服务器都有独立处理数据请求的能力，集群中的所有节点并行执行不同的处理请求。每当有新节点加入集群时，总资源池就会增加，系统性能也会提高。

(2)可靠性高，可以有效避免SPoF问题。当系统中的一个节点服务器出现停机或其他故障时，系统服务不会受到影响。

(3)成本低，可以大大降低建立基础设施的成本和数据管理的成本。

(4)高可扩展性，可以通过增加更多的服务器节点实现系统的横向扩展，从而线性提升系统的整体容量和性能，减少对特定设备的依赖。