使用java将字节流传输到hdfs

1qczuiv0  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(339)

是否可以使用某些web服务将文件直接上载到hdfs空间。我尝试将文件写入本地系统并将其移动到hdfs。

n3ipq98p

n3ipq98p1#

webhdfs提供restapi来支持所有文件系统操作。
但是直接上传是不可能的。
它必须遵循两个步骤
在hdfs位置创建文件 http://<HOST>:<PORT>/webhdfs/v1/<PATH>?op=CREATE 通过指定 local file path 你想上传到标题中吗 http://<DATANODE>:<PORT>/webhdfs/v1/<PATH>?op=CREATE 请参阅此处的API webhdfs API

相关问题