文件存储服务系统-04-S3(Simple Storage Service)协议文档介绍
什么是 Amazon S3?
Amazon Simple Storage Service(Amazon S3)是一种对象存储服务,提供行业领先的可扩展性、数据可用性、安全性和性能。
各种规模和行业的客户都可以使用 Amazon S3 存储和保护任意数量的数据,用于数据湖、网站、移动应用程序、备份和恢复、归档、企业应用程序、IoT 设备和大数据分析。
Amazon S3 提供了管理功能,...
2016-12-31 02:48:42 |
File
文件存储服务系统(File Storage Service System)-03-S3(Simple Storage Service)协议
核心能力
存储桶
管理
版本+加密
对象
以下是按照您的要求,将提供的内容以表格形式返回:
属性名称
描述
密钥(Object Key)
分配给对象的名称。使用对象键可以检索对象。对象键可以用于对象元数据的更多信息。
版本 ID(Version ID)...
2016-12-31 02:48:42 |
File
分布式存储系统-09-BeeGFS(原名 FhGFS)是一个高性能的并行文件系统,广泛应用于 HPC(高性能计算)环境。它优化了数据访问和 I/O 性能。
BeeGFS 并行文件系统
BeeGFS(前身为 FhGFS)是领先的并行集群文件系统,开发时非常注重性能,并且设计上非常易于安装和管理。如果 I/O 密集型工作负载是你的问题,那么 BeeGFS 是解决方案。
主页:https://www.beegfs.io
构建指南
前提条件
在构建 BeeGFS 之前,安装以下依赖包:
Red Hat / CentOS
$ yum instal...
2016-12-31 02:48:42 |
File
分布式存储系统-08-OrangeFS 是 PVFS 的下一代版本,是一个面向高性能计算的开源并行文件系统。它提供了高吞吐量和低延迟的 I/O 操作。
OrangeFS
OrangeFS 项目围绕OrangeFS展开,这是一种面向高端计算(HEC)系统设计的横向扩展网络文件系统,能够并行提供对多服务器磁盘存储的高性能访问。OrangeFS服务器和客户端都是用户级代码,使其非常容易安装和管理。OrangeFS针对并行和分布式应用优化了MPI-IO支持,已在生产环境中应用,并作为分布式和并行存储的研究平台使用。
从Linux内核4.6版本开...
2016-12-31 02:48:42 |
File
分布式存储系统-07-OpenAFS 是 Andrew File System 的开源实现,是一个分布式网络文件系统。适用于跨多个站点的大规模分布式环境。
什么是 AFS?
AFS 是一种分布式文件系统产品,由卡内基梅隆大学首创,并由 Transarc Corporation(现为 IBM Pittsburgh Labs)支持和开发。它提供了一种用于联合文件共享和只读内容分发的客户端-服务器架构,具有位置独立性、可扩展性、安全性和透明迁移能力。AFS 可用于包括 UNIX、Linux、MacOS X 和 Microsoft Windows 在...
2016-12-31 02:48:42 |
File
分布式存储系统-06-MooseFS 是一个开源的分布式文件系统,设计用于提供高可靠性和扩展性。它允许在一个全局命名空间中管理大量的数据。
MooseFS – 一种PB级分布式文件系统
MooseFS 是一种开源网络分布式文件系统,具有PB级容量。它易于部署和维护,高度可靠,具备容错能力,高性能,易于扩展并符合POSIX标准。
MooseFS 将数据分布在多个普通服务器上,这些服务器在用户看来是一个统一的资源。对于标准文件操作,MooseFS 表现得像普通的类Unix文件系统:
分层结构 – 目录树
存储 POS...
2016-12-31 02:48:42 |
File
分布式存储系统-05-Lustre 是一个高性能的分布式文件系统,主要用于大型超级计算机集群。它能处理数千个节点上的数百 PB 数据。
Lustre
_ _
| | | |
| |_ _ | | _ __ ___
| | | | / __| __| ‘/ _
| | || _ \ || | | /
|_|__,_|/_|| ___|
Lustre 是一个开源的、分布式的并行文件系统,设计用于可扩展性、高性能和高可用性。
Lustre 专...
2016-12-31 02:48:42 |
File
分布式存储系统-04-GlusterFS 是一个基于对象的开源分布式文件系统,适用于云存储和媒体流等场景
Gluster
Gluster 是一个软件定义的分布式存储,可以扩展到多个 PB(拍字节)。它提供对象、块和文件存储的接口。
开发
开发工作流记录在 贡献者指南 中。
文档
Gluster 的文档可以在 Gluster 文档 找到。
部署
快速构建和安装的说明可以在 INSTALL 文件中找到。
测试
GlusterFS 源码包含了一些功能测试,位于 tests/ 目录下。所有这...
2016-12-31 02:48:42 |
File