首页 » 技术SOS » 通信技术 » 其他 » 有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制?

有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制?

菜鸟
2022-10-24 11:26:32

有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制?


分享
关键词: 文件, 先写  
菜鸟
2022-10-24 11:54:13
1楼

HDFS上在写入数据的时候,首先会对数据切块,然后从客户端到datanode形成一个管道,在至少将一个文件写入hdfs上后,表示文件写入成功,然后进行复制备份操作,所以是全部写完再复制。

学习可关注:人工智能技术与咨询,更多详情可咨询175-3102-1189(V同号),联系人:申老师。

或到我司官网了解:https://www.chinaai.org.cn/;qq群:189696007。


专家
2022-10-26 22:15:14
2楼

这问题难

高工
2022-10-29 14:45:57
3楼

看你怎么设计把