http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 11263|回复: 6

[求助] 抓取网站时出现:请求被中止: 连接被意外关闭

[复制链接]
发表于 2014-7-11 17:18:11 | 显示全部楼层 |阅读模式
本帖最后由 sunny 于 2014-7-11 17:41 编辑

今天用http发送请求一个网站时,发现返回有时会出现:请求被中止: 连接被意外关闭。
网站是一会行能返回数据,但一回又不能返回,出现上面那个错误,不知是什么原因

buff.jpg


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
 楼主| 发表于 2014-7-11 17:38:23 | 显示全部楼层
后来改回10240也可以了,所以还是不知道这个错误:请求被中止: 连接被意外关闭。
是怎么回事,现在调试那个网站又行了一会行,一会不行
发表于 2014-7-11 23:53:59 | 显示全部楼层
你改这个干什么,一般我定的差不多就是最适合的,我是经过测试的,你这个看样子是网络不稳定的问题
 楼主| 发表于 2014-7-12 00:03:54 | 显示全部楼层
同个页面要发送两次,第一次得到页面参数后进行第二次发送,第一次从不出错,第二次就会出现:请求被中止: 连接被意外关闭。的错误,但有时又可以,但基本都不行,奇怪了,如果是网络问题,那第一次发送也会出错,但第一次从不出错
发表于 2014-7-12 00:08:18 | 显示全部楼层
这样的话,还有一种可能就是服务器有限制,我以前写过一个项目,必须第一次请求才会成功,也就是说你第一次请求不要接收数据,只是在第二次请求时接收就行了,这个具体是什么原因不得而知,呵呵
 楼主| 发表于 2014-7-12 00:20:12 | 显示全部楼层
站长苏飞 发表于 2014-7-12 00:08
这样的话,还有一种可能就是服务器有限制,我以前写过一个项目,必须第一次请求才会成功,也就是说你第一次 ...

它页面是这样的,点击按钮,它跳到另一页面,但另一页面作了两次请求,第一次请求后会列出几个参数,这几个参数是发送第二次请求所需要的,今天测试一天,第一次请求从不出错,但当发第二次时就会出现上面那个错误,刚我又试加了: item.Header.Add("Accept-Encoding", "gzip, deflate");试了下又没出错了,但也不知是否过会又会出错,呵呵,就好像下午一样,我以为是那个bufferSize的问题,因为刚改了试它又可以了,呵呵,真不知其原因
 楼主| 发表于 2014-7-12 00:51:56 | 显示全部楼层
sunny 发表于 2014-7-12 00:20
它页面是这样的,点击按钮,它跳到另一页面,但另一页面作了两次请求,第一次请求后会列出几个参数,这几 ...

现不改任何参数,不断调试运行二次请求(第二次请求结果才是最终要的结果),发送第一次请求从不出错,第二次请求就有时出错有时不会,有时偶尔还会还是返回第一次请求的结果(第一次返回结果是发送第二次请求的参数),呵呵,真不知其原因,网上查“请求被中止: 连接被意外关闭”,也没找到什么解决方案,
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-5-29 17:57

© 2014-2021

快速回复 返回顶部 返回列表