学习 HDFS(三):写文件

栏目: 服务器 · 发布时间: 7年前

内容简介:HDFS 客户端写流程:

写流程

HDFS 客户端写流程:

  1. 客户端连接 NameNode 请求打开写入文件,NameNode 创建文件元数据。此时,并没有与文件元数据相对应的数据块。

  2. 客户端向 NameNode 请求复制管道(Replication Pipeline),并向管道中的第一个 DataNode 写入数据。

  3. 复制管道中的第一个 DataNode 又将数据复制到管道下一个 DataNode。

  4. 关闭文件。

学习 HDFS(三):写文件

Java API

public static void write(String path, String content) {  
    Configuration conf = new Configuration();
    try (FileSystem fs = FileSystem.get(new URI("hdfs://nameservice1"), conf, "hdfs")) {
        Path p = new Path(path);

        if (!fs.exists(p)) {
            try (FSDataOutputStream out = fs.create(p)) {
                out.write(content.getBytes(Charsets.UTF_8));
            }
        } else {
            // 文件已存在
            logger.warn("文件 {} 已存在", path);
        }
    } catch (URISyntaxException | InterruptedException | IOException e) {
        logger.error("写文件错误", e);
        throw new RuntimeException(e);
    }
}

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

深入浅出Struts 2

深入浅出Struts 2

Budi Kuniawan / 杨涛、王建桥、杨晓云 / 人民邮电出版社 / 2009-04 / 59.00元

本书是广受赞誉的Struts 2优秀教程,它全面而深入地阐述了Struts 2的各个特性,并指导开发人员如何根据遇到的问题对症下药,选择使用最合适的特性。作者处处从实战出发,在丰富的示例中直观地探讨了许多实用的技术,如数据类型转换、文件上传和下载、提高Struts 2应用的安全性、调试与性能分析、FreeMarker、Velocity、Ajax,等等。跟随作者一道深入Struts 2,聆听大量来之......一起来看看 《深入浅出Struts 2》 这本书的介绍吧!

RGB转16进制工具
RGB转16进制工具

RGB HEX 互转工具

XML 在线格式化
XML 在线格式化

在线 XML 格式化压缩工具

HEX CMYK 转换工具
HEX CMYK 转换工具

HEX CMYK 互转工具