内容简介:HDFS 客户端写流程:
写流程
HDFS 客户端写流程:
-
客户端连接 NameNode 请求打开写入文件,NameNode 创建文件元数据。此时,并没有与文件元数据相对应的数据块。
-
客户端向 NameNode 请求复制管道(Replication Pipeline),并向管道中的第一个 DataNode 写入数据。
-
复制管道中的第一个 DataNode 又将数据复制到管道下一个 DataNode。
-
关闭文件。
Java API
public static void write(String path, String content) { Configuration conf = new Configuration(); try (FileSystem fs = FileSystem.get(new URI("hdfs://nameservice1"), conf, "hdfs")) { Path p = new Path(path); if (!fs.exists(p)) { try (FSDataOutputStream out = fs.create(p)) { out.write(content.getBytes(Charsets.UTF_8)); } } else { // 文件已存在 logger.warn("文件 {} 已存在", path); } } catch (URISyntaxException | InterruptedException | IOException e) { logger.error("写文件错误", e); throw new RuntimeException(e); } }
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网
猜你喜欢:- Gradle学习(十六)——文件操作
- APUE 学习笔记——文件和目录
- APUE 学习笔记——文件 IO
- Linux内核学习:虚拟文件系统
- InnoDB 存储引擎的文件学习
- Maven学习笔记三【POM文件】
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
颠覆者:周鸿祎自传
周鸿祎、范海涛 / 北京联合出版公司 / 2017-11 / 49.80元
周鸿祎,一个在中国互联网历史上举足轻重的名字。他被认为是奠定当今中国互联网格局的人之一。 作为第一代互联网人,中国互联网行业最好的产品经理、创业者,他每时每刻都以自己的实践,为互联网的发展贡献自己的力量。 在很长一段时间内,他没有在公共场合发声,甚至有粉丝对当前死水一潭的互联网现状不满意,发出了“人民想念周鸿祎”的呼声。 但周鸿祎在小时候,却是一个踢天弄井,动不动就大闹天宫的超级......一起来看看 《颠覆者:周鸿祎自传》 这本书的介绍吧!