网络下载编程的单文件多线程下载和断电续传
2012-11-05 13:28
155 查看
这几天需要做一些文件的多线程下载和断点续传的工作,所以在网上整理了一些资料供参考,纯粹为了学习,如有引用的地方没有注明清楚来源
请联系本人。对原作者的随意引用表示歉意。
多线程下载同一个文件的原理讲述一下:
1、首先得到要下载的文件的长度,这是通过Http的HEAD命令得到其长度。
2、根据长度和线程数,确定各线程所下载的数据范围。通过HTTP的Get命令,这里需要指定From和To.
3、创建一个文件,这个文件是一个空文件,不需要事先生成与下载文件同样大小的空文件。给每个线程只需要传递其打开的文件句柄即可。
4、创建各个下载线程,每个线程接受到数据后就保存到相应的位置上去。这里不需要对文件加锁,因为操作系统一级本身对文件的I/O有锁的,我们的应用不用管,而且各个线程所写的文件位置是不一样的,每一线程负责下载和写一段数据。每个线程都记录下来了当前已经下载到的位置,这样若有线程出错了,可以从断点处继续下载。
5、等各线程都下载完各自的数据块后,最后中关闭这个文件
现在有不少软件可实现多线程下载.如迅雷,bit精灵等,其实多线程下载的原理用到的主要的两项技术就是多线程和断点下载。程序中开启多个线程,每个线程利用断点下载,分别下载文件的不同部分,下载完后合并,就可以了。
请联系本人。对原作者的随意引用表示歉意。
多线程下载同一个文件的原理
多线程下载同一个文件的原理讲述一下:1、首先得到要下载的文件的长度,这是通过Http的HEAD命令得到其长度。
2、根据长度和线程数,确定各线程所下载的数据范围。通过HTTP的Get命令,这里需要指定From和To.
3、创建一个文件,这个文件是一个空文件,不需要事先生成与下载文件同样大小的空文件。给每个线程只需要传递其打开的文件句柄即可。
4、创建各个下载线程,每个线程接受到数据后就保存到相应的位置上去。这里不需要对文件加锁,因为操作系统一级本身对文件的I/O有锁的,我们的应用不用管,而且各个线程所写的文件位置是不一样的,每一线程负责下载和写一段数据。每个线程都记录下来了当前已经下载到的位置,这样若有线程出错了,可以从断点处继续下载。
5、等各线程都下载完各自的数据块后,最后中关闭这个文件
现在有不少软件可实现多线程下载.如迅雷,bit精灵等,其实多线程下载的原理用到的主要的两项技术就是多线程和断点下载。程序中开启多个线程,每个线程利用断点下载,分别下载文件的不同部分,下载完后合并,就可以了。
相关文章推荐
- iOS开发之网络编程--4、NSURLSessionDataTask实现文件下载(离线断点续传下载) <进度值显示优化>
- iOS开发之网络编程--3、NSURLSessionDataTask实现文件下载(离线断点续传下载)
- iOS开发之网络编程--4、NSURLSessionDataTask实现文件下载(离线断点续传下载) <进度值显示优化>
- iOS开发之网络编程--4、NSURLSessionDataTask实现文件下载(离线断点续传下载) <进度值显示优化>
- 网络编程---(数据请求+slider)将网络上的大文件下载到本地,并打印其进度
- Swift之网络编程-文件下载
- Java网络编程之单线程下载文件设置显示进度(一)
- Reachability 网络编程总结(解析数据,下载文件,确认网络环境)
- Android实现断点续传下载文件,网络编程
- java网络编程和io,多线程结合完成文件上传和下载案例
- java网络编程六:DatagramSocket类简单实现文件下载
- 网络编程应用:基于UDP协议【实现文件下载】--练习
- iOS UI 15 网络编程下载 图片 音乐 大文件 视频 get/ post方法
- 网络编程之实现文件上传下载
- iOS开发之网络编程--小文件下载
- java网络编程之下载文件通过多线程分块下载(二)
- Android网络编程 --断点续传下载文件
- Android网络编程 --断点续传下载文件
- Reachability 网络编程总结(解析数据,下载文件,确认网络环境)
- iOS UI 15 网络编程下载 图片 音乐 大文件 视频 get/ post方法