断点续传，HttpURLConnection ，报文抓取

基于HTTP的协议的网络文件下载，工作原理建立在请求/响应模式(Request/Response)上：一个客户端与服务器建立连接后，客户端向
Web服务器发出一个HTTP请求行；Web服务器在收到有效的请求后，返回一个状态行或多个响应标题、一个空白行和相关文档。HTTP协议使用的端口
号，通常为80。开发基于http协议的网络文件下载必须掌握HTTP协议,包括向服务器发送请求和获取服务器响应状态的过程。HTTP1.0协议不支持
断点续传功能. 本文用java


提供了一个简单的实现.

1.HTTP协议工作方式

基于HTTP协议的客户/服务器模式的信息交换过程，它分四个过程：建立连接、发送请求信息、获取服务器响应状态、关闭连接。其中较为复杂的过程是:发送请求信息、获取服务器响应状态.

1)向服务器发送请求信息

　　一个HTTP请求由一个请求行、可选数目的请求标题、一个空白行，以及在POST情况下的一些额外的数据组成。请求行的格式是：

Method Request-URI HTTP-Vsersion CRLF

Method表示请求方法，如GET和POST

Request-URI标识了要请求的资源，

HTTP-Version表示请求的HTTP协议版本，

CRLF表示回车换行。

HTTP请求报文格式如下:

HTTP Command: //方法字段(GET方法,POST方法)

URI: //URL字段，发送请求至保存该网站的服务器。

HTTP Version: //http协议版本字段

Accept: //指示可被接受的请求回应的介质类型范围列表。

Accept-Language: //限制了请求回应中首选的语言为简体中文，否则使用默认值。

Accept-Encoding: //限制了回应中可接受的内容编码值

User-Agent: //定义用户代理，即发送请求的浏览器类型

Host: //定义了目标所在的主机

Connection: //告诉服务器使用连接类型

2)获取服务器响应状态

　　在发送HTTP请求行以后，程序就可以读取服务器的响应状态了。HTTP响应状态行包括：HTTP 状态码和一些HTTP响应标题。

　　HTTP回应报文

HTTP Version: HTTP/1.1 //服务器用的是HTTP/1.1版本

HTTP Status: 200 //请求成功，信息可以读取，包含在响应的报文中

Date: //响应报文的时间

Server: //响应报文的服务器

X-Powered-By: //表明运行环境

Set- cookie: //

Vary: //

Content-Length: //表明实体的长度

Connection: //告诉客户机在报文发送完毕后连接的状态

Content-Type: //表明实体中的对象类型(html文档)

Binary Data: //二进制数据

状态码表示响应类型，常用的有：

1**　　保留

2**　　表示请求成功地接收

3**　　为完成请求客户需进一步细化请求

4**　　客户错误

5**　　服务器错误

　
　在程序中间，如果读到“HTTP/1.1 200
OK”这样的字符串，表明欲下载文件存在、该服务器支持断点续传，可以使用多线程下载。如果读到“HTTP/1.0 200
OK”这样的字符串，表明欲下载文件存在、但该服务器不支持断点续传，只可以使用单线程下载。

2.实现代码

import java.io.IOException;

import java.io.InputStream;

import java.io.RandomAccessFile;

import java.net.HttpURLConnection;

import java.net.URL;

public

class
TestDownFile {

public

static

void
main(String[] args){

String sURL ="http://localhost:8080/hrproject/book.rar"
;

int
nStartPos=0;

int
nRead=0;

String sName="book.rar"
;

String sPath="e://temp"
;

try
{

URL url = new
URL(sURL);

//打开连接

HttpURLConnection httpConnection = (HttpURLConnection) url

.openConnection();

//获得文件长度

long
nEndPos =getFileSize(sURL);

RandomAccessFile oSavedFile= new
RandomAccessFile(sPath+
"//"+sName, "
rw");

httpConnection.setRequestProperty("User-Agent"
,
"Internet Explorer"
);

String sProperty = "bytes="
+ nStartPos +
"-"
;

//告诉服务器book.rar这个文件从nStartPos字节开始传

httpConnection.setRequestProperty("RANGE"
, sProperty);

System.out
.println(sProperty);

InputStream input = httpConnection.getInputStream();

byte
[] b =
new

byte
[1024];

//读取网络文件,写入指定的文件中

while
((nRead = input.read(b, 0, 1024)) > 0

&& nStartPos < nEndPos ) {

oSavedFile.write(b, 0, nRead);

nStartPos += nRead;

}

httpConnection.disconnect();

} catch
(Exception e) {

e.printStackTrace();

}

}

// 获得文件长度

public

static

long
getFileSize(String sURL) {

int
nFileLength = -1;

try
{

URL url = new
URL(sURL);

HttpURLConnection httpConnection = (HttpURLConnection) url

.openConnection();

httpConnection.setRequestProperty("User-Agent"
,
"Internet Explorer"
);

int
responseCode = httpConnection.getResponseCode();

if
(responseCode >= 400) {

System.err.println("Error Code : "
+ responseCode);

return
-2;
// -2 represent access is error

}

String sHeader;

for
(
int
i = 1;; i++) {

sHeader = httpConnection.getHeaderFieldKey(i);

if
(sHeader !=
null
) {

if
(sHeader.equals(
"Content-Length"
)) {

nFileLength = Integer.parseInt(httpConnection

.getHeaderField(sHeader));

break
;

}

} else

break
;

}

} catch
(IOException e) {

e.printStackTrace();

} catch
(Exception e) {

e.printStackTrace();

}

System.out
.println(nFileLength);

return
nFileLength;

}

}

说明：需要创建e:/temp目录