Bcolz支持数据压缩的列数存储软件
Bcolz 是一款支持数据压缩的,列数存储软件。提供可压缩内存和磁盘的柱状分块数据容器。列存储允许有效地查询表,以及列添加和删除。它基于 NumPy ,并将其用作标准数据容器与 Bcolz 对象进行通信。
默认情况下,Bcolz 对象被压缩,不仅可以减少内存/磁盘存储,还可以提高 I / O 速度。压缩过程由 Blosc 在内部执行,Blosc 是针对二进制数据进行优化的高性能多线程压缩器。
Bcolz 也可以在内部使用 numexpr(默认情况下,如果它检测到 numexpr 已安装)或 dask ,以加速许多向量和查询操作。 numexpr / dask 可以优化内存使用,并使用多线程进行计算。
要求
-
Python >= 2.6
-
NumPy >= 1.8
-
Cython >= 0.22 (仅用于编译 beast)
-
C-Blosc >= 1.8.0 (可选,默认情况下将使用内部 Blosc )
-
unittest2 (可选,只在运行 Python 2.6 的情况下)
可选:
-
numexpr >= 2.5.2
-
dask >= 0.9.0
-
pandas
-
tables (pytables)
评论
软件定义存储 对象存储 软件定义存储 存储一体机
QingStor® 对象存储是面向海量非结构化数据的通用数据存储平台,提供安全可靠、低成本的云端存储服务。QingStor® 对象存储兼容 AWS S3 API,构建于 AWS S3 API 或 SDKs 之上的应用可无缝对接 QingStor® 对象存储。
青云科技
0
sccache支持云存储的 ccache
sccache是一个类似于 ccache 的编译器缓存工具。它用作编译器包装器并尽可能避免编译,将缓存结果存储在本地磁盘或多个云存储后端之一中。sccache包括对C/C++代码、Rust以及使用nv
sccache支持云存储的 ccache
0
Scid国际象棋存储软件
Scid("Shane'sChessInformationDatabase")是一个象棋数据库软件,支持包括Windows、Linux、MacOS以及PocketPC等。通过这个软件你可以管理一个象棋
Scid国际象棋存储软件
0