个人简介

Echo Blog


江湖无名 安心练剑
  • 文件存储服务系统(File Storage Service System)-03-S3(Simple Storage Service)协议
    核心能力 存储桶 管理 版本+加密 对象 以下是按照您的要求,将提供的内容以表格形式返回: 属性名称 描述 密钥(Object Key) 分配给对象的名称。使用对象键可以检索对象。对象键可以用于对象元数据的更多信息。 版本 ID(Version ID)...
    2016-12-31 02:48:42 | File
  • 从零开始实现渐进式文件服务系统-00-progressive file server 概览
    是什么? 想设计一个渐进式的文件管理服务系统。 可以从最简单的单机,到分布式都可以快速部署搞定。 对外都是统一的 API。 为什么? 想要一个简单的文件服务,发现没有可用的。 如果后续拓展,动起来又比较。 希望从零实现一个渐进式的文件管理服务,保证单机=》分布式都是简单可用的。 类似于 minio,但是不止于 minio 有何特色? 渐进式 方便部署 单机+分布式 用...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-24-S3SQL
    S3QL S3QL 是一个文件系统,它使用像 Google Storage、Amazon S3 或 OpenStack 等存储服务来在线存储所有数据。 S3QL 实际上提供了一个动态、无限容量的虚拟驱动器,可以从任何有互联网连接的计算机访问。 S3QL 是一个功能齐全的 UNIX 文件系统,在概念上与本地文件系统(如 ext4)无法区分。此外,S3QL 还具有额外的功能,如压缩加密、数...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-23-S3FS 可以将 S3 对象存储通过 FUSE 挂载到本地,像本地磁盘一样进行读写访问。
    s3fs s3fs 允许 Linux、macOS 和 FreeBSD 通过 FUSE(用户空间文件系统) 挂载 S3 存储桶。 s3fs 使您能够像操作本地文件系统一样操作 S3 存储桶中的文件和目录。 s3fs 保留文件的原生对象格式,允许使用其他工具,如 AWS CLI。 特性 支持大部分 POSIX 特性,包括文件读取/写入、目录、符号链接、模式、uid/gid ...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-22-JuiceFS 是一款面向云原生设计的高性能分布式文件系统
    JuiceFS 简介 JuiceFS 是一款面向云原生设计的高性能分布式文件系统,在 Apache 2.0 开源协议下发布。提供完备的 POSIX 兼容性,可将几乎所有对象存储接入本地作为海量本地磁盘使用,亦可同时在跨平台、跨地区的不同主机上挂载读写。 JuiceFS 采用「数据」与「元数据」分离存储的架构,从而实现文件系统的分布式设计。 文件数据本身会被切分保存在对象存储(例如 Am...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-21-Alluxio/Tachyon 是一个虚拟分布式存储系统。
    什么是 Alluxio Alluxio(前身为 Tachyon)是一个虚拟分布式存储系统。 它弥合了计算框架与存储系统之间的差距,使得计算应用程序能够通过统一的接口连接到众多存储系统。 更多内容请查看 Alluxio 概述。 Alluxio 项目源自于 UC 伯克利 AMPLab 的一个名为 Tachyon 的研究项目,它是伯克利数据分析堆栈(BDAS)的数据层。 更多详细信息请参...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-20-daos Distributed Asynchronous Object Storage (DAOS) 开源的软件定义对象存储系统
    前言 https://github.com/cubefs/cubefs DAOS 架构 DAOS(分布式异步对象存储)是一个开源的软件定义的可扩展对象存储系统,旨在为应用程序提供高带宽和高 IOPS 存储容器,并支持结合仿真、数据分析和机器学习的下一代数据中心工作流。 与传统存储堆栈(主要为旋转介质设计)不同,DAOS 从一开始就为新一代非易失性内存(NVM)技术设计,采用极简的架...
    2016-12-31 02:48:42 | File
  • 分布式存储系统-19-cubefs cloud-native distributed storage 云原生分布式存储
    前言 https://github.com/cubefs/cubefs 什么是 CubeFS ? CubeFS 是新一代云原生存储产品,目前是云原生计算基金会(CNCF)托管的孵化阶段开源项目, 兼容 S3、POSIX、HDFS 等多种访问协议,支持多副本与纠删码两种存储引擎,为用户提供多租户、 多 AZ 部署以及跨区域复制等多种特性,广泛应用于大数据、AI、容器平台、数据库、中间件存...
    2016-12-31 02:48:42 | File