nodeJs抓取网页
2013-12-20 14:37
253 查看
var fs = require('fs'); var jquery = require('jquery'); var url = require('url'); var data = { 0 : 'http://www.baidu.com/s?wd=nodeJS%20doc&pn=', 1 : '&tn=myie2&ie=utf-8&ch=3' //baidu_search_on_page1 }; var page = 10; do{ page--; jquery.get(data[0]+page+data[1],function(html){ (function(){ success(html,page) })(); }); }while(page); function bind(fn,context){ return function(){ fn.call(context) }; }; function success(html,page){ //fs.appendFile() //console.log(html,page) fs.appendFile(page+'.html',html,function(err){ if(err)throw err; console.log('done') }) }
相关文章推荐
- 使用nodejs发起get或post请求抓取网页内容,支持中文编码
- nodejs使用superagent抓取网页,cheerio分析网页
- nodejs抓取网页的源码,并保存到本地文件
- nodejs之http.request 网页抓取数据
- 网页抓取实战总结
- 抓取Web网页数据分析
- WebBrowser + HtmlPraser 抓取ajax网页的源代码
- 抓取Web网页数据分析
- 利用Python抓取和解析网页(一)
- PHP抓取网页图片保存到数据库
- python beautifulsoup多线程分析抓取网页
- 利用htmlparser抓取网页内容(一)
- linux命令行抓取网页快照-(xvfb+CutyCapt)
- python使用自定义user-agent抓取网页的方法
- shell命令curl抓取网页内容-下载xls文件
- 抓取网页代码,Streambyte[]string转换
- Android App使用Jsoup抓取网页数据显示
- 抓取整个网页保存为图片的实用工具 Web2Pic Pro
- 使用Python抓取网页信息
- 《与小卡特一起学Python》Code3 抓取网页中的某个数据