Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

栏目: 软件资讯 · 发布时间: 7年前

内容简介:Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。由于世界各地的大型归档站点都在规划未来的数据存储系统,因此命名空间的可扩展性成了关注重点领域。当前技术通常依赖于中央服务器进行元数据管理,超过10亿个文件的数据收集变得难以管理。2016年,Versity 开始研究一种新的归档文件系统,该系统专门用于通过使用节点集群来扩展元数据处理来管理超

Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。

由于世界各地的大型归档站点都在规划未来的数据存储系统,因此命名空间的可扩展性成了关注重点领域。当前技术通常依赖于中央服务器进行元数据管理,超过10亿个文件的数据收集变得难以管理。

2016年,Versity 开始研究一种新的归档文件系统,该系统专门用于通过使用节点集群来扩展元数据处理来管理超大型命名空间。然后“scale out filesystem(扩展文件系统)”即 ScoutFS 就诞生了。

ScoutFS 是第一个在 GPL 下发布的存档文件系统,兼容 POSIX,设计和实现将庞大数据集归档到低成本的外部储存源如磁带、磁盘、对象和云端。

主要特性:

  • 集成一致的索引以加速归档维护操作

  • 共享 LSM 索引结构,用于根据存储带宽扩展元数据速率

  • 从序列化设备写入解耦逻辑锁定以减少争用

Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

编译自: Versity


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

编程之美

编程之美

《编程之美》小组 编 / 电子工业出版社 / 2008-3 / 40.00元

这本书收集了约60道算法和程序设计题目,这些题目大部分在近年的笔试、面试中出现过,或者是被微软员工热烈讨论过。作者试图从书中各种有趣的问题出发,引导读者发现问题,分析问题,解决问题,寻找更优的解法。本书的内容分为下面几个部分: (1)游戏之乐:从游戏和其他有趣问题出发,化繁为简,分析总结。 (2)数字之魅:编程的过程实际上就是和数字及字符打交道的过程。这一部分收集了一些好玩的对数字进行......一起来看看 《编程之美》 这本书的介绍吧!

随机密码生成器
随机密码生成器

多种字符组合密码

HEX CMYK 转换工具
HEX CMYK 转换工具

HEX CMYK 互转工具

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具