网络爬虫规则(一)
2017-10-15 23:01
197 查看
HTTP协议,超文本传输协议,是客户端浏览器与其他程序与web服务器之间的应用层通信协议
HTTP协议中:
get 请求获取URL位置的资源
head 请求获取URL位置资源的响应消息报告,即获得该资源的头部信息
post 请求想URL位置的资源后附加新资源
put 请求想URL位置存储一个资源,覆盖原URL位置的资源 //全部
patch 请求局部更新URL位置的资源,即改变该处资源的部分内容 //部分
delete 请求删除URL位置存储的资源
request.get(url, params = None, **kwagrs)
params可为字典,也可为字节流格式
**kwagrs 12个控制访问的参数
向服务器请求资源时构造Request对象,返回一个包含服务器资源的Response对象
HTTP协议中:
get 请求获取URL位置的资源
head 请求获取URL位置资源的响应消息报告,即获得该资源的头部信息
post 请求想URL位置的资源后附加新资源
put 请求想URL位置存储一个资源,覆盖原URL位置的资源 //全部
patch 请求局部更新URL位置的资源,即改变该处资源的部分内容 //部分
delete 请求删除URL位置存储的资源
request.get(url, params = None, **kwagrs)
params可为字典,也可为字节流格式
**kwagrs 12个控制访问的参数
向服务器请求资源时构造Request对象,返回一个包含服务器资源的Response对象
相关文章推荐
- Linux企业级项目实践之网络爬虫(20)——扩展成为规则插件模式
- Linux企业级项目实践之网络爬虫(20)——扩展成为规则插件模式
- 测验与作业【第一周】网络爬虫之规则
- 第一周测验:网络爬虫之规则
- Linux企业级项目实践之网络爬虫(24)——定制规则扩展为垂直爬虫
- Linux企业级项目实践之网络爬虫(24)——定制规则扩展为垂直爬虫
- RSS网络爬虫的时间规则
- Python网络爬虫与信息提取 网络爬虫之规则
- RSS网络爬虫的时间规则
- 网络爬虫的规则
- Python网络爬虫与信息提取(一):网络爬虫之规则
- 1、网络爬虫之规则之requests库入门
- 网络爬虫项目(1)
- Linux企业级项目实践之网络爬虫(1)——项目概述及准备工作
- 做网络爬虫的一些辅助工具
- 网络爬虫框架的搭建以及使用HttpClient抓取解析网页的详细步骤
- 使用python编写简单网络爬虫(一)
- java实现简单的网络爬虫
- python3实现网络爬虫(5)--模拟浏览器抓取网页
- .NET实现网络爬虫