有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制？

ss淡淡

菜鸟

2022-10-24 11:26:32

关键词: 文件, 先写

龙腾亚太

菜鸟

2022-10-24 11:54:13

1楼

HDFS上在写入数据的时候，首先会对数据切块，然后从客户端到datanode形成一个管道，在至少将一个文件写入hdfs上后，表示文件写入成功，然后进行复制备份操作，所以是全部写完再复制。

学习可关注：人工智能技术与咨询，更多详情可咨询175-3102-1189（V同号）,联系人：申老师。

或到我司官网了解：https://www.chinaai.org.cn/；qq群：189696007。

tanfpga

专家

2022-10-26 22:15:14

2楼

这问题难

Hope2022

高工

2022-10-29 14:45:57

3楼

看你怎么设计把