学习 HDFS(三):写文件

栏目: 服务器 · 发布时间: 7年前

内容简介:HDFS 客户端写流程:

写流程

HDFS 客户端写流程:

  1. 客户端连接 NameNode 请求打开写入文件,NameNode 创建文件元数据。此时,并没有与文件元数据相对应的数据块。

  2. 客户端向 NameNode 请求复制管道(Replication Pipeline),并向管道中的第一个 DataNode 写入数据。

  3. 复制管道中的第一个 DataNode 又将数据复制到管道下一个 DataNode。

  4. 关闭文件。

学习 HDFS(三):写文件

Java API

public static void write(String path, String content) {  
    Configuration conf = new Configuration();
    try (FileSystem fs = FileSystem.get(new URI("hdfs://nameservice1"), conf, "hdfs")) {
        Path p = new Path(path);

        if (!fs.exists(p)) {
            try (FSDataOutputStream out = fs.create(p)) {
                out.write(content.getBytes(Charsets.UTF_8));
            }
        } else {
            // 文件已存在
            logger.warn("文件 {} 已存在", path);
        }
    } catch (URISyntaxException | InterruptedException | IOException e) {
        logger.error("写文件错误", e);
        throw new RuntimeException(e);
    }
}

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

水平营销

水平营销

[美] 菲利普·科特勒、费尔南多・德・巴斯 / 陈燕茹 / 中信出版社 / 2005-1 / 25.00元

《水平营销》阐明了相对纵向营销而言的的水平营销的框架和理论。引入横向思维来作为发现新的营销创意的又一平台,旨在获得消费者不可能向营销研究人员要求或建议的点子。而这些点子将帮助企业在产品愈加同质和超竞争的市场中立于不败之地。 《水平营销》提到: 是什么创新过程导致加油站里开起了超市? 是什么创新过程导致取代外卖比萨服务的冷冻比萨的亮相? 是什么创新过程导致巧克力糖里冒出了玩具......一起来看看 《水平营销》 这本书的介绍吧!

SHA 加密
SHA 加密

SHA 加密工具

XML 在线格式化
XML 在线格式化

在线 XML 格式化压缩工具

RGB HSV 转换
RGB HSV 转换

RGB HSV 互转工具