Goofys基于 S3 的 Filey 系统
Goofys 是使用 Go 编写,基于 S3 接口的 Filey 系统。
Goofys 允许你挂载一个 s3 bucket 作为一个 Filey 系统。为什么是 Filey 系统而不是 File 系统?因为 goofys 优先考虑性能而不是 POSIX。
使用:
$ go get github.com/kahing/goofys $ go install github.com/kahing/goofys $ cat > ~/.aws/credentials [default] aws_access_key_id = AKID1234567890 aws_secret_access_key = MY-SECRET-KEY $ $GOPATH/bin/goofys <bucket> <mountpoint>
基准测试:
使用 goofys --stat-cache-ttl 0 --type-cache-ttl 0
和 s3fs -ostat_cache_expire=1
模拟运行。基准测试详情请看 bench.sh,同时提供 Raw data。测试是在 EC2 c4.xlarge 下运行的:
operation | goofys | s3fs | speedup |
---|---|---|---|
Create 1000 files | 49.4 +/- 1.5s | 146.0 +/- 15.0s | 2.96 +/- 0.32x |
Unlink 1000 files | 28.1 +/- 0.8s | 36.7 +/- 6.2s | 1.31 +/- 0.22x |
ls with 1000 files | 0.21 +/- 0.04s | 3.5 +/- 0.6s | 16.9 +/- 4.6x |
Create 1000 files (parallel) | 21.5 +/- 0.4s | 134.2 +/- 9.1s | 6.2 +/- 0.4x |
Unlink 1000 files (parallel) | 28.18 +/- 0.35s | 38.1 +/- 4.2s | 1.35 +/- 0.15x |
Write 1GB | 51.4 +/- 4.3MB/s | 29.7 +/- 2.9MB/s | 1.73 +/- 0.22x |
Read 1GB | 58.9 +/- 4.7MB/s | 65.7 +/- 18.9MB/s | 0.90 +/- 0.27x |
Time to 1st byte | 0.0169 +/- 0.0023s | 0.98 +/- 0.06s | 58.3 +/- 8.7x |
评论
EduaskCMS基于 ThinkPHP 的内容管理系统
WOOCMS是基于最新版本的ThinkPHP-5.1.X框架,后台前端框架采用最新LayUI-3.0.X版本。作者曾在外包公司工作多年,所有深知外包之痛点,对于这些痛点系统都有较深的针对性开发。系统的
EduaskCMS基于 ThinkPHP 的内容管理系统
0
atoms基于 J2Cache 的二级缓存系统
atoms是一个基于 J2Cache 思想实现的二级缓存系统。支持2级并不限于2级的多级缓存系统。广播支持zookeeper,redis,jgroups缓存支持ehcache,redis,ssdb序列
atoms基于 J2Cache 的二级缓存系统
0
HelloJob基于 J2EE 的调度系统
hellojob是使用j2ee技术开发的调度系统,提供交互简单的中文操作界面,40秒上手。目前业界有不少调度系统,比如oozie(太难用)、xxl-job(太重量)、airflow(python写的,
HelloJob基于 J2EE 的调度系统
0
Mongodb-Log基于 MongoDB 的日志系统
mongodb-log是一个基于MongoDB的Python日志系统。MongoDB的CappedCollection是一个天生的日志系统,MongoDB自己的oplog就是用它来存储的,Capped
Mongodb-Log基于 MongoDB 的日志系统
0
easyclub基于koa2的论坛系统
EasyClub基于koa2+mongodb的轻量级论坛系统INSTALL安装mongodb,Redis和node(>=v7.6.0)clone该仓库到本地复制config.default.js
easyclub基于koa2的论坛系统
0