您的位置:首页 > 其它

scrapy框架下载图片

2017-08-26 00:38 323 查看
步骤
第一步设置图片存储路径

第二步管道中定义图片下载类

第二步重写get_media_requests方法

第三步重写item_completed方法



步骤

第一步:设置图片存储路径

必须为(IMAGES_STORE)



第二步:管道中定义图片下载类

第二步:重写get_media_requests()方法

此方法返回图片链接,框架会自动下载图片,前提必须有图片存储路径,不然没法下载

第三步:重写item_completed()方法

从setting中获取数据,导入方法:



获取路径



通过os模块更新每个图片路径,并定义图片地址字段

注意:result返回值为一个列表,里面是元祖

os.sep:返回“/”



内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: