Python爬虫实战一 | 抓取取校花网的所有妹子
2017-09-06 23:22
295 查看
今天晚上顺带就实际的写写工具,我们刚学完Python的基础语法!抓点妹子带回家~
总结一下之前的吧,我写了关于Python爬虫的六节课程,也就是六篇文章,文章有点简洁,但是很细节,如果还有不懂的请加我QQ:1099718640,或者留言,小东看到了一定会及时回复的哦!愿和各位志同道合的程序猴子一起畅谈人生!哈哈~
今天晚上,刚开完班会。。。老实说,小东大一的成绩很不好,全班倒数,无颜见父老啊,待在“卓越班”感觉自己负罪感满满,哎╮(╯▽╰)╭,在博客里吐槽一下啦~今后好好把公共基础课学好,大学到最终还是以成绩来衡量的,但还是要尽量地多去参加一下竞赛,哈哈~
这是在运行途中截得图,我故意输出的,哈哈~
部分成果
注:本文属于原创文章,转载请注明本文地址!
作者QQ:1099718640
CSDN博客主页:http://blog.csdn.net/dyboy2017
Github开源项目:https://github.com/dyboy2017/xiaohua
总结一下之前的吧,我写了关于Python爬虫的六节课程,也就是六篇文章,文章有点简洁,但是很细节,如果还有不懂的请加我QQ:1099718640,或者留言,小东看到了一定会及时回复的哦!愿和各位志同道合的程序猴子一起畅谈人生!哈哈~
今天晚上,刚开完班会。。。老实说,小东大一的成绩很不好,全班倒数,无颜见父老啊,待在“卓越班”感觉自己负罪感满满,哎╮(╯▽╰)╭,在博客里吐槽一下啦~今后好好把公共基础课学好,大学到最终还是以成绩来衡量的,但还是要尽量地多去参加一下竞赛,哈哈~
这是在运行途中截得图,我故意输出的,哈哈~
# 抓取校花网 校花图片 # 作者:DYBOY 小东 # 时间:2017-09-06 ''' http://www.xiaohuar.com/list-1-0.html 第一页 http://www.xiaohuar.com/list-1-1.html 第二页 ''' import requests import re from bs4 import BeautifulSoup #以上作为基本引用 def getGirls(girl_url): main_url = 'http://www.xiaohuar.com' header = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0'} res = requests.get(girl_url,headers = header,timeout=10) res.encoding = 'gb2312' soup = BeautifulSoup(res.text,'html.parser') for images in soup.select('.item'): img_url = main_url + images.select('.item_t .img a img')[0]['src'] houzhui = img_url[-4:] img_alt = images.select('.item_t .img a img')[0]['alt'] + houzhui print(img_alt) img = requests.get(img_url) with open('xiaohua/' + img_alt,"wb") as code: code.write(img.content) print('ok!') def url_change(): for i in range(19,44): url = 'http://www.xiaohuar.com/list-1-' + str(i) + '.html' getGirls(url) #MAIN url_change()
部分成果
代码自己去github上去看~
注:本文属于原创文章,转载请注明本文地址!作者QQ:1099718640
CSDN博客主页:http://blog.csdn.net/dyboy2017
Github开源项目:https://github.com/dyboy2017/xiaohua
相关文章推荐
- Python爬虫框架Scrapy 学习笔记 10.1 -------【实战】 抓取天猫某网店所有宝贝详情
- python 爬虫 实战 抓取妹子图中图
- Python爬虫框架Scrapy 学习笔记 10.3 -------【实战】 抓取天猫某网店所有宝贝详情
- Python爬虫框架Scrapy 学习笔记 10.2 -------【实战】 抓取天猫某网店所有宝贝详情
- Python爬虫框架Scrapy 学习笔记 10.2 -------【实战】 抓取天猫某网店所有宝贝详情
- Python爬虫实战(四) :下载煎蛋网所有妹子照片
- Python3实战之爬虫抓取网易云音乐的热门评论
- python 爬虫 实战(一) —— 抓取学校开课数据
- Python爬虫框架Scrapy实战 - 抓取BOSS直聘招聘信息
- Python爬虫实战(4):抓取淘宝MM照片
- 基于python实现的抓取腾讯视频所有电影的爬虫
- python3 [爬虫入门实战] 爬虫之selenium 模拟QQ登陆抓取好友说说内容(暂留)
- Python爬虫实战(4):抓取淘宝MM照片
- Python爬虫框架Scrapy实战 - 抓取BOSS直聘招聘信息
- Python爬虫框架Scrapy实战之批量抓取招聘信息
- python爬虫 抓取一个网站的所有网址链接
- Python爬虫实战(4):抓取淘宝MM照片
- Python爬虫框架Scrapy实战之抓取户外数据
- Python爬虫实战一之使用Beautiful Soup抓取百度招聘信息并存储excel文件
- python爬虫抓取豆瓣所有恐怖片信息(利用多线程和构建免费ip代理池)