Ajax网页源码抓取程序
2010-08-26 14:33
330 查看
(有需要的可以去下载(http://zengxin2008.download.csdn.net)
)
由于这段时间需要获取一些网页的源码,然后从网站下载了好几个下载网页源码的工具,但令我失望的是,这些工具都下载不到网页中使用Ajax动态加载的信息,论坛上的许多朋友也正在寻找这个办法,后来看到别人说用C#中WebBrowser控件可以,然后经过我的仔细研究,花了两天的时间写了一个抓取网页信息的程序,尤其是对使用了Ajax网页来说非常有用。
本程序没有像蜘蛛那样的爬行功能,只能对特定的网址进行抓取,但你可以导入一批网址进行抓取
1.运行。。。
2.添加URL地址添加完后,关闭就行,它自动会保存
3.选择下载文件的存放目录,然后直接关闭就行:
4.点击主窗体上的运行按钮就行,结果
5.这里说明一下,在运行时会弹出一个设置Cookie的提示框,点击确定后(会出现一个刷新按钮,你只有按了刷新按钮,在本次网页才会重新加载,保存),在下一个网页中还会有继续提示,点击取消,在以后的网页中就不会弹出了
)
由于这段时间需要获取一些网页的源码,然后从网站下载了好几个下载网页源码的工具,但令我失望的是,这些工具都下载不到网页中使用Ajax动态加载的信息,论坛上的许多朋友也正在寻找这个办法,后来看到别人说用C#中WebBrowser控件可以,然后经过我的仔细研究,花了两天的时间写了一个抓取网页信息的程序,尤其是对使用了Ajax网页来说非常有用。
本程序没有像蜘蛛那样的爬行功能,只能对特定的网址进行抓取,但你可以导入一批网址进行抓取
1.运行。。。
2.添加URL地址添加完后,关闭就行,它自动会保存
3.选择下载文件的存放目录,然后直接关闭就行:
4.点击主窗体上的运行按钮就行,结果
5.这里说明一下,在运行时会弹出一个设置Cookie的提示框,点击确定后(会出现一个刷新按钮,你只有按了刷新按钮,在本次网页才会重新加载,保存),在下一个网页中还会有继续提示,点击取消,在以后的网页中就不会弹出了
相关文章推荐
- C#程序抓取网页源码实例(winform程序)
- asp.net 抓取网页源码三种实现方法
- C# 抓取网页Html源码 (网络爬虫)(转)
- 如何用webbrowser获取ajax动态生成的网页的源码?
- C#程序抓取网页实例
- 抓取网页文件中的email地址的简易java程序
- C#实现通过程序自动抓取远程Web网页信息的代码
- Java写的抓取任意网页中email地址的小程序
- 网页抓取程序
- Java爬虫——phantomjs抓取ajax动态加载网页
- scrapy抓取ajax请求的网页
- C#实现通过程序自动抓取远程Web网页信息
- C#程序抓取网页实例
- 浅谈正则表达式在.net的运用-C#程序抓取网页信息
- asp.net 抓取网页源码三种实现方法
- Java爬虫——phantomjs抓取ajax动态加载网页
- C# 抓取网页Html源码 (网络爬虫)
- 用Python程序抓取网页的HTML信息的一个小实例
- delphi 抓取网页内容的程序
- C# 抓取网页Html源码 (网络爬虫)