您的位置:首页 > 运维架构 > 网站架构

通过C#程序来获取网站源码,有些网站请求出错的解决方案。

2012-04-17 13:50 453 查看
网站:http://www.dgxt.com/ProjectArticlesArray-70-1.aspx

代码:

string url = "http://www.dgxt.com/ProjectArticlesArray-70-1.aspx";

HttpWebRequest myRequest = (HttpWebRequest)HttpWebRequest.Create(url);

myRequest.Method = "GET";

myRequest.Headers.Add("Accept-Language", "zh-cn,en-us;q=0.8,zh-hk;q=0.6,ja;q=0.4,zh;q=0.2");

HttpWebResponse myResponse = (HttpWebResponse)myRequest.GetResponse();---------这一步如果没有加上面的一句报“System.Net.WebException: 远程服务器返回错误: (500) 内部服务器错误。“

可以通过google浏览器获取这个网站的请求头部信息。通过程序把这些头部信息加进去,这样就可以获取到网页的源码。

网站:https://data.cathaylife.cn/servlet/HttpDispatcher/KAA0_0100/prompt?newTxRequest=true&syscode=DA&subcode=KAA0

代码:

string url = "https://data.cathaylife.cn/servlet/HttpDispatcher/KAA0_0100/prompt?newTxRequest=true&syscode=DA&subcode=KAA0";

HttpWebRequest myRequest = (HttpWebRequest)WebRequest.Create(url);

myRequest.Method = "GET";

myRequest.Proxy = null;

myRequest.UserAgent = "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:11.0) Gecko/20100101 Firefox/11.0";

myRequest.Headers.Add("Accept-Language", "zh-cn,en-us;q=0.8,zh-hk;q=0.6,ja;q=0.4,zh;q=0.2");

myRequest.Accept = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";

ServicePointManager.ServerCertificateValidationCallback = delegate { return true; };

ServicePointManager.SecurityProtocol = SecurityProtocolType.Ssl3;----------如果这句不加的话会报” 基础连接已经关闭: 发送时发生错误。 ---> System.IO.IOException: 由于远程方已关闭传输流,身份验证失败。“ 加了这句就可以通过程序来获得网页的源码。

HttpWebResponse myResponse = (HttpWebResponse)myRequest.GetResponse();
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: