服务器提交协议冲突 Section=ResponseStatusLine 的解决办法

最近写程序抓取数据，发现对有的网站用HttpWebrequest抓取网页的时候会报错，捕获异常提示："服务器提交了协议冲突 Section=ResponseStatusLine ”,改用WebClient也是同样问题，后来知道，WebClient是对HttpWebrequest进一步进行了封装。
最后终于找到问题根源：The  server  committed  a  protocol  violation.  Section=ResponseHeader  Detail=CR  must  be  followed  by  LF 微软没有容忍不符合RFC  822中的httpHeader必须以CRLF结束的规定的服务器响应。
通过修改配置文件解决：在app.config(WinForm)或web.config(Web)文件里修改。

WinForm下的app.config默认不存在，手动在Debug文件夹所在的同级目录下新建一个XML配置文件，内容为：

<?xml version="1.0" encoding="utf-8" ?>

<configuration>

<system.net>

        <settings>

            <httpWebRequest  useUnsafeHeaderParsing= "true "  />

        </settings>

    </system.net>

</configuration>

编译以后会在Debug下面自动创建一个 程序名.exe.config 的配置文件