-
分布式存储系统-23-S3FS 可以将 S3 对象存储通过 FUSE 挂载到本地,像本地磁盘一样进行读写访问。
s3fs
s3fs 允许 Linux、macOS 和 FreeBSD 通过 FUSE(用户空间文件系统) 挂载 S3 存储桶。
s3fs 使您能够像操作本地文件系统一样操作 S3 存储桶中的文件和目录。
s3fs 保留文件的原生对象格式,允许使用其他工具,如 AWS CLI。
特性
支持大部分 POSIX 特性,包括文件读取/写入、目录、符号链接、模式、uid/gid ...
2016-12-31 02:48:42 |
File
-
分布式存储系统-22-JuiceFS 是一款面向云原生设计的高性能分布式文件系统
JuiceFS 简介
JuiceFS 是一款面向云原生设计的高性能分布式文件系统,在 Apache 2.0 开源协议下发布。提供完备的 POSIX 兼容性,可将几乎所有对象存储接入本地作为海量本地磁盘使用,亦可同时在跨平台、跨地区的不同主机上挂载读写。
JuiceFS 采用「数据」与「元数据」分离存储的架构,从而实现文件系统的分布式设计。
文件数据本身会被切分保存在对象存储(例如 Am...
2016-12-31 02:48:42 |
File
-
分布式存储系统-21-Alluxio/Tachyon 是一个虚拟分布式存储系统。
什么是 Alluxio
Alluxio(前身为 Tachyon)是一个虚拟分布式存储系统。
它弥合了计算框架与存储系统之间的差距,使得计算应用程序能够通过统一的接口连接到众多存储系统。
更多内容请查看 Alluxio 概述。
Alluxio 项目源自于 UC 伯克利 AMPLab 的一个名为 Tachyon 的研究项目,它是伯克利数据分析堆栈(BDAS)的数据层。
更多详细信息请参...
2016-12-31 02:48:42 |
File
-
分布式存储系统-20-daos Distributed Asynchronous Object Storage (DAOS) 开源的软件定义对象存储系统
前言
https://github.com/cubefs/cubefs
DAOS
架构
DAOS(分布式异步对象存储)是一个开源的软件定义的可扩展对象存储系统,旨在为应用程序提供高带宽和高 IOPS 存储容器,并支持结合仿真、数据分析和机器学习的下一代数据中心工作流。
与传统存储堆栈(主要为旋转介质设计)不同,DAOS 从一开始就为新一代非易失性内存(NVM)技术设计,采用极简的架...
2016-12-31 02:48:42 |
File
-
分布式存储系统-19-cubefs cloud-native distributed storage 云原生分布式存储
前言
https://github.com/cubefs/cubefs
什么是 CubeFS ?
CubeFS 是新一代云原生存储产品,目前是云原生计算基金会(CNCF)托管的孵化阶段开源项目, 兼容 S3、POSIX、HDFS 等多种访问协议,支持多副本与纠删码两种存储引擎,为用户提供多租户、 多 AZ 部署以及跨区域复制等多种特性,广泛应用于大数据、AI、容器平台、数据库、中间件存...
2016-12-31 02:48:42 |
File
-
分布式存储系统-18-moosefs MooseFS 分布式存储 – 开源、千兆字节级、容错、高性能、可扩展的网络分布式文件系统/软件定义存储
MooseFS
MooseFS 分布式存储 – 开源、千兆字节级、容错、高性能、可扩展的网络分布式文件系统/软件定义存储
MooseFS – 一个千兆字节级分布式文件系统
MooseFS 是一个千兆字节级开源网络分布式文件系统。
它易于部署和维护,具有高可靠性、容错性、高性能、易扩展,并且符合 POSIX 标准。
MooseFS 将数据分布在多个普通服务器上,用户可以将其视为一...
2016-12-31 02:48:42 |
File
-
分布式存储系统-18-opencurve/curve 网易开发的现代存储系统,目前支持文件存储(CurveFS)和块存储(CurveBS)。
前言
https://github.com/opencurve/curve
curve
一个云原生分布式存储系统
一个由CNCF基金会托管的沙盒项目
关于Curve
Curve是由网易开发的现代存储系统,目前支持文件存储(CurveFS)和块存储(CurveBS)。现在它作为沙盒项目托管在CNCF。
CurveBS的核心应用场景主要包括:
虚拟机/容器的云盘或持久化卷,以...
2016-12-31 02:48:42 |
File
-
分布式存储系统-17-simpleDFS Simple Distributed File System in java
前言
这个项目 star 不多,不过我直觉还不错。足够简单,适合学习。
Simple Distributed File System
Simple Distributed File System是使用Java语言实现的,类似于Apache Hadoop HDFS的分布式文件系统,整体架构是如下所示。
Master节点
Master是SDFS的主节点,存储整个文件系统的结构目录,以...
2016-12-31 02:48:42 |
File