Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

栏目: IT资讯 · 发布时间: 7年前

内容简介:Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。 由于世界各地的...

Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。

由于世界各地的大型归档站点都在规划未来的数据存储系统,因此命名空间的可扩展性成了关注重点领域。当前技术通常依赖于中央服务器进行元数据管理,超过10亿个文件的数据收集变得难以管理。

2016年,Versity 开始研究一种新的归档文件系统,该系统专门用于通过使用节点集群来扩展元数据处理来管理超大型命名空间。然后“scale out filesystem(扩展文件系统)”即 ScoutFS 就诞生了。

ScoutFS 是第一个在 GPL 下发布的存档文件系统,兼容 POSIX,设计和实现将庞大数据集归档到低成本的外部储存源如磁带、磁盘、对象和云端。 

主要特性:

  • 集成一致的索引以加速归档维护操作

  • 共享 LSM 索引结构,用于根据存储带宽扩展元数据速率

  • 从序列化设备写入解耦逻辑锁定以减少争用

Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

编译自:Versity


【声明】文章转载自:开源中国社区 [http://www.oschina.net]


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

常用算法程序集

常用算法程序集

徐士良 编 / 清华大学 / 2004-1 / 48.00元

本书针对工程中常用的行之有效的算法而编写,其主要内容包括多项式的计算、复数运算、随机数的产生 、矩阵特征值与特征向量的计算、线性代数方程组的求解、非线性方程与方程组的求解、插值与逼近、数值积分、常微分方程组的求解、数学变换与滤波、特殊函数的计算、排序和查找。 书中所有的算法均用C语言描述,并存放在一张光盘上。 本书可供广大科研人员、工程技术人员以及管理工作者阅读使用,也......一起来看看 《常用算法程序集》 这本书的介绍吧!

CSS 压缩/解压工具
CSS 压缩/解压工具

在线压缩/解压 CSS 代码

在线进制转换器
在线进制转换器

各进制数互转换器