封装了 Hadoop Client 的 API YourHDFS

• 授权协议: Apache
• 开发语言: Java
• 操作系统: 跨平台
• 软件首页: http://git.oschina.net/qiangzigege/YourHDFS
• 软件文档: http://git.oschina.net/qiangzigege/YourHDFS

软件介绍

一个封装了Hadoop Client的简单、方便的API，已经在生产环境中经受日千万级别次IO操作的检验。

支持以下功能：

1）自定义HDFS目录前缀

2）支持时间目录格式

3）支持按文件固定大小切分

4）支持一段时间内无IO操作文件自动关闭

5）支持中文

6）支持namenode自动探测实现failover.

7)API本身是线程安全的.

8)API的参数发生变化对用户使用是透明的，框架内部透明处理, [线程,参数]组合对应着一个文件。

HDFS的原理图：

本文地址：https://codercto.com/soft/d/25531.html