bfsGo 编写的分布式文件系统

联合创作 · 2023-10-01 04:46

bfs 是基于 Facebook haystack 用 Golang 实现的小文件存储系统。

特性

高吞吐量和低延迟
容错性
高效
维护简单

Aaron Swartz

directory

directory主要负责请求的均匀调度和元数据管理，元数据存放在hbase，由gosnowflake产生文件key

store

store主要负责文件的物理存储

pitchfork

pitchfork负责监控store的服务状态、可用性和磁盘状态

proxy

proxy作为bfs存储的代理以及维护bucket相关

ops

ops作为bfs的后台管理界面，负责分配存储、扩容、压缩等维护工作

浏览 5

点赞

收藏

分享

举报

评论

图片

表情

Ceph分布式文件系统

Ceph是加州大学Santa Cruz分校的Sage Weil（DreamHost的联合创始人）专为

gitDFS分布式文件系统

gitDFS是一个基于Git的分布式文件系统。

Weed-FS分布式文件系统

Weed-FS 是一个简单和高可伸缩的分布式文件系统，用于快速存储大量的文件。Weed-FS 不支持

Ceph分布式文件系统

Ceph是加州大学SantaCruz分校的SageWeil（DreamHost的联合创始人）专为博士论文设计的新一代自由软件分布式文件系统。自2007年毕业之后，Sage开始全职投入到Ceph开发之中

TFS分布式文件系统

TFS（TaobaoFileSystem）是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，其设计目标是支持海量的非结构化数据。目前，国内自主研发的文件系统可谓凤毛麟角。淘宝在这一领域做

SeaweedFS分布式文件系统

SeaweedFS 是简单，高伸缩性的分布式文件系统，包含两部分：存储数十亿的文件；快速为文件服务。

SnackFS分布式文件系统

SnackFS是一个很小的、轻量级的兼容HDFS的文件系统，基于Cassandra构建。你需要做的只是指向Cassandra集群即可。该项目的目的就是为了替代HDFS，速度更快更可靠。SnackFS提

LizardFS分布式文件系统

LizardFS 是一个开源的分布式文件系统。具备可靠性、可伸缩以及高效的特点。可在大量的物理服务器

OpenAFS分布式文件系统

OpenAFS是一套开放源代码的分布式文件系统，允许系统之间通过局域和广域网来分享档案和资源。OpenAFS是围绕一组叫做cell的文件服务器组织的。每个服务器的标识通常是隐藏在文件系统中的。从AFS

IPFS分布式文件系统

IPFS 是分布式文件系统，寻求连接所有计算机设备的相同文件系统。在某些方面，这很类似于原始的 We

点赞

收藏

分享

举报