如何通过sftp高效上传50gb文件?

2w3rbyxf  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(678)

我想使用jschjava库实现sftp客户机。我有以下问题。请提出你的意见。
如何以最佳方式将非常大的文件(大约50gb)上传到sftp服务器?
在执行上述操作时,很有可能出现错误“会话超时”。除了明确地设定时间之外,还有什么更好的方法来解决这个问题吗?

1tuwyuhd

1tuwyuhd1#

一次传输非常大的文件并不是最好的主意。一个选择是使用一个更大的缓冲区,如果上传/下载不用于最大值。但我建议的选择是:自动分割文件或使用tempfile机制,它可以处理传输时的中断(例如jdownloader)

相关问题