Python正则爬取全书网上万条数据
2018-01-25 01:12
99 查看
import requests
import re
import pymysql
host=’localhost’,
port=3306,
user=’root’,
db=’noveltest’,
charset=’utf8’
)
cursor = conn.cursor()#打开数据库请求
def getSortNovelList():
response = requests.get(‘http://www.quanshuwang.com/list/1_1.html‘)
response.encoding = ‘gbk’
result = response.text
reg = r’
import re
import pymysql
连接MySQL创建数据库
conn = pymysql.connect(host=’localhost’,
port=3306,
user=’root’,
db=’noveltest’,
charset=’utf8’
)
cursor = conn.cursor()#打开数据库请求
def getSortNovelList():
response = requests.get(‘http://www.quanshuwang.com/list/1_1.html‘)
response.encoding = ‘gbk’
result = response.text
reg = r’
相关文章推荐
- Python正则匹配多行,多个数据
- Python网络数据采集——正则表达式
- #小练习 使用正则抓取oschina博客专区首页数据 分类: python 小练习 正则表达式 2013-11-11 17:22 604人阅读 评论(0) 收藏
- Python爬虫扒取2345天气预报网上的邯郸天气数据
- Python 3(4)数据类型:字符串 & 正则表达式
- Python 数据抓取之正则表达式
- python 文件处理、数据持久化与正则
- python--正则表达式过滤数据
- Google Python Class 之——正则表达式提取html网页数据字段
- python核心编程-正则表达式-产生测试数据
- python正则提取mysql中文数据
- Python Elasticsearch api,组合过滤器,term过滤器,正则查询 ,match查询,获取最近一小时的数据
- Python scrapy使用入门,爬取拉勾网上万条职位信息(上)
- Python Elasticsearch api,组合过滤器,term过滤器,正则查询 ,match查询,获取最近一小时的数据
- Python爬虫——4-1.数据筛选之正则表达式
- 【python学习笔记】用正则表达式从含中文的网页中提取数据(含编码转换)
- Python 爬虫 正则抽取网页数据和Scrapy简单使用
- python正则表达式,提取命中mongo中的数据
- Python爬虫---数据的提取---正则/Xpath/beautifulsoup--正则
- python-抓取数据、下载图片(正则)、构造headers、urlencode、get_post