基于nodejs爬虫程序下载
2018-03-14 17:21
232 查看
node-crawler
一个基于nodejs的网站采集服务器 可部署在任何服务器上远程调用DEMO
发送请求 run npm dev POST: /scan{ "url": "http://www.charlotterusse.com/shoes/shop-all-shoes?sz=30&start=0", "model": [{"find":".product-tile","child":[{"name":"name","type":"","method":[{"find":".name-link","attr":""}]},{"name":"price","type":"","method":[{"find":".price-sales","attr":""}]},{"name":"image","type":"","method":[{"find":"img","attr":"src"}]},{"name":"url","type":"","method":[{"find":"a","attr":"href"}]}]}], "oid": "7e11c4cb-0456-e9a9-65d5-b64c86d12b94" }
部署
推荐使用 forever https://github.com/foreverjs/forever启动服务器forever start server.js程序下载地址:https://u16968133.pipipan.com/fs/16968133-241391394
相关文章推荐
- 手把手教你做爬虫---基于NodeJs
- 基于libtorrent最简单的BT下载程序
- nodejs开发中如何调试基于多进程的程序
- 简单的基于libcurl和c++11 thread多线程的多线程下载程序
- 基于NodeJs写一个爬虫
- 基于Python的urllib2模块的多线程网络爬虫程序
- 基于TCP网络通信的自动升级程序源码分析-启动升级文件下载程序
- 谈谈nodejs爬虫程序利器——cheerio模块
- 基于网络爬虫的全国气温排行程序/c++
- 基于Ubuntu系统的Tiny4412使用dnw下载程序
- 分享常见网站的爬虫程序下载地址[微信|微博|企信|知乎|优酷|京东]
- 基于Maven管理的Mapreduce程序下载依赖包到LIB目录
- 发布一款基于C#的网络爬虫程序
- nodejs中基于TCP协议时下的类IRC程序(中继聊天程序)
- nodejs爬虫程序暂时无法解决的乱码问题汇总
- CVPR2017_Papers下载爬虫程序
- nodeJs爬虫小程序练习
- 发布一款基于C#的网络爬虫程序
- 基于爬虫的天气预报程序
- NodeJS中 RPC-JSON 基于HTTP的最小程序API接口设计