HttpWebRequest 下载网页Html代码 POST方式（站内使用了form方式） System.Net.WebException (417) Expectation failed

上一篇说了Get方式可以处理一般的站内搜索，假如使用了表单方式，用Get方式就获取不了。

例如:

网站站内搜索界面：

对就源码：

可以看出使用了form的post，action指向search.html，其中表单域是key;

Post的提交数据格式如下：

所以提交请求应该是：key=key值&proClass=&x=26&y=15灰色部分也可以不用。注意key值需要经过编码，不要包含了&等特殊符号。

实现的代码如下：

            string searchKey = "搜索内容";
            ASCIIEncoding encoding = new ASCIIEncoding();
            string postData = "key=" + System.Uri.EscapeUriString(searchKey);
            postData += "&proClass=&x=0&y=0";

            ServicePointManager.Expect100Continue = false;
            byte[] data = encoding.GetBytes(postData);
            HttpWebRequest hwrequest = (HttpWebRequest)WebRequest.Create("http://www.website.net/search.html");
            hwrequest.Method = "POST";
            hwrequest.ContentType = "application/x-www-form-urlencoded";
            hwrequest.ContentLength = data.Length;
            Stream stream = hwrequest.GetRequestStream();

            stream.Write(data, 0, data.Length);
            stream.Close();

            HttpWebResponse hwresponse = (HttpWebResponse)hwrequest.GetResponse();
            StreamReader sr = new StreamReader(hwresponse.GetResponseStream(), Encoding.UTF8);
            string content = sr.ReadToEnd();

在这里如果不使用ServicePointManager.Expect100Continue = false;这段代码时，以上方法执行至GetResponse()就会产生如下错误信息：

System.Net.WebException: 远程服务器返回错误: (417) Expectation failed。

其中在msdn上有如下说明：

如果 POST 请求需要 100-Continue 响应，则为 true；否则为 false。默认值为 true。详情请进入Expect100Continue查阅！

在上也有如下说明：

Requirements for HTTP/1.1 clients: - If a client will wait for a 100 (Continue) response before sending the request body, it MUST send an Expect request-header field with the "100-continue" expectation.

  - A client MUST NOT send an Expect request-header field with the "100-continue" expectation if it does not intend to send a request body.

详情请进入HTTP/1.1查阅。