我需要通过FTP/HTTP从Java获得几个大型文件(几个gigs)。是否有现成的库(java /命令行工具)来方便下载?一些明显的要求是:
编辑--我真的不喜欢编写这样的库,而是为现有的经过测试的产品级库而窃取(或付费)。rsynch不相关,因为我需要从HTTP和FTP站点下载文件,它不是用于内部文件传输的。
发布于 2009-10-31 16:53:35
HTTP协议确实支持在偏移量处启动部分下载,但对验证文件的本地部分版本的支持有限,以确保文件没有附加到末尾(或类似的东西)。如果您的环境允许,我建议使用-分部选项的rsync。它的目的是从命令行支持这种功能。
如果不能使用rsync,可以尝试使用并使用Range HTTP报头下载可管理的大小块。
发布于 2009-10-31 17:09:02
如果您知道如何在java中创建套接字和线程,这并不难。
首先创建一个请求并读取头部以获取Content-length头。然后设计一个策略,将您的请求分割成块,例如,每个请求500 K。然后为每个请求使用一个线程启动10个请求。在每个请求中,您必须定义Range头。
恢复下载是存储尚未下载的范围的问题。我建议您阅读这个HTTP/1.1报头字段,RFC 这里,如果您真的想很好地掌握所使用的协议的话。
然而,如果您正在寻找一条简单的出路,rsync或scp就足够了。
https://stackoverflow.com/questions/1654790
复制相似问题