-
文件存储服务系统(File Storage Service System)-03-S3(Simple Storage Service)协议
核心能力
存储桶
管理
版本+加密
对象
以下是按照您的要求,将提供的内容以表格形式返回:
属性名称
描述
密钥(Object Key)
分配给对象的名称。使用对象键可以检索对象。对象键可以用于对象元数据的更多信息。
版本 ID(Version ID)...
2016-12-31 02:48:42 |
File
-
从零开始实现渐进式文件服务系统-00-progressive file server 概览
是什么?
想设计一个渐进式的文件管理服务系统。
可以从最简单的单机,到分布式都可以快速部署搞定。
对外都是统一的 API。
为什么?
想要一个简单的文件服务,发现没有可用的。
如果后续拓展,动起来又比较。
希望从零实现一个渐进式的文件管理服务,保证单机=》分布式都是简单可用的。
类似于 minio,但是不止于 minio
有何特色?
渐进式
方便部署
单机+分布式 用...
2016-12-31 02:48:42 |
File
-
分布式存储系统-24-S3SQL
S3QL
S3QL 是一个文件系统,它使用像 Google Storage、Amazon S3 或 OpenStack 等存储服务来在线存储所有数据。
S3QL 实际上提供了一个动态、无限容量的虚拟驱动器,可以从任何有互联网连接的计算机访问。
S3QL 是一个功能齐全的 UNIX 文件系统,在概念上与本地文件系统(如 ext4)无法区分。此外,S3QL 还具有额外的功能,如压缩加密、数...
2016-12-31 02:48:42 |
File
-
分布式存储系统-23-S3FS 可以将 S3 对象存储通过 FUSE 挂载到本地,像本地磁盘一样进行读写访问。
s3fs
s3fs 允许 Linux、macOS 和 FreeBSD 通过 FUSE(用户空间文件系统) 挂载 S3 存储桶。
s3fs 使您能够像操作本地文件系统一样操作 S3 存储桶中的文件和目录。
s3fs 保留文件的原生对象格式,允许使用其他工具,如 AWS CLI。
特性
支持大部分 POSIX 特性,包括文件读取/写入、目录、符号链接、模式、uid/gid ...
2016-12-31 02:48:42 |
File
-
分布式存储系统-22-JuiceFS 是一款面向云原生设计的高性能分布式文件系统
JuiceFS 简介
JuiceFS 是一款面向云原生设计的高性能分布式文件系统,在 Apache 2.0 开源协议下发布。提供完备的 POSIX 兼容性,可将几乎所有对象存储接入本地作为海量本地磁盘使用,亦可同时在跨平台、跨地区的不同主机上挂载读写。
JuiceFS 采用「数据」与「元数据」分离存储的架构,从而实现文件系统的分布式设计。
文件数据本身会被切分保存在对象存储(例如 Am...
2016-12-31 02:48:42 |
File
-
分布式存储系统-21-Alluxio/Tachyon 是一个虚拟分布式存储系统。
什么是 Alluxio
Alluxio(前身为 Tachyon)是一个虚拟分布式存储系统。
它弥合了计算框架与存储系统之间的差距,使得计算应用程序能够通过统一的接口连接到众多存储系统。
更多内容请查看 Alluxio 概述。
Alluxio 项目源自于 UC 伯克利 AMPLab 的一个名为 Tachyon 的研究项目,它是伯克利数据分析堆栈(BDAS)的数据层。
更多详细信息请参...
2016-12-31 02:48:42 |
File
-
分布式存储系统-20-daos Distributed Asynchronous Object Storage (DAOS) 开源的软件定义对象存储系统
前言
https://github.com/cubefs/cubefs
DAOS
架构
DAOS(分布式异步对象存储)是一个开源的软件定义的可扩展对象存储系统,旨在为应用程序提供高带宽和高 IOPS 存储容器,并支持结合仿真、数据分析和机器学习的下一代数据中心工作流。
与传统存储堆栈(主要为旋转介质设计)不同,DAOS 从一开始就为新一代非易失性内存(NVM)技术设计,采用极简的架...
2016-12-31 02:48:42 |
File
-
分布式存储系统-19-cubefs cloud-native distributed storage 云原生分布式存储
前言
https://github.com/cubefs/cubefs
什么是 CubeFS ?
CubeFS 是新一代云原生存储产品,目前是云原生计算基金会(CNCF)托管的孵化阶段开源项目, 兼容 S3、POSIX、HDFS 等多种访问协议,支持多副本与纠删码两种存储引擎,为用户提供多租户、 多 AZ 部署以及跨区域复制等多种特性,广泛应用于大数据、AI、容器平台、数据库、中间件存...
2016-12-31 02:48:42 |
File