http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

楼主: 站长苏飞

[发布] [C#HttpHelper]官方产品发布与源码下载---苏飞版

   关闭 [复制链接]
 楼主| 发表于 2012-10-23 16:42:58 | 显示全部楼层
wtvb123 发表于 2012-10-23 16:34
老大 我是调用你的类阿    在 using (response = (HttpWebResponse)request.GetResponse())   这具直接跳到 ...

应该不是吧,https是安全连接,程序是无法识别 的,会为认为是证书,建议你安我刚才发的连接上测试一下。我一般这这种情况就是这样解决的。


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
 楼主| 发表于 2012-10-23 16:28:23 | 显示全部楼层
wtvb123 发表于 2012-10-23 16:21
求助:访问一个https 出现了  The underlying connection was closed: Could not establish trust relation ...

这个说明是证书验证失败,你直接使用我的类就行了,使用方法 在这里
http://www.sufeinet.com/thread-464-1-1.html
 楼主| 发表于 2012-10-17 16:36:53 | 显示全部楼层
keek731 发表于 2012-10-15 00:57
在举例中 这个在上下文中不存在的东西是什么呢?-----------  RegexServices

这是一个格式化URL的类,你可以不使用,我现在已修改过了,感谢 支持
 楼主| 发表于 2012-9-29 22:21:47 | 显示全部楼层
ReEnter 发表于 2012-9-29 21:32
当然用过。而且,把你的类升过级。你要不信你的正则有问题的话,你先第一种取编码的方式去掉,让第二种取的 ...

目前我们测试的网站没有一个有问题的,如果你发现有问题请指出来具体网址,我做的一个网站www.7c.com目前是使用的这个类,是做爬虫用的,一天大约有6千多万个域名吧,具我的测试没有取不到编码的,也没有乱码的都是访问正常,希望你能提供一下具体的网址,也可以直接到网站上进行测试。希望你提供网址,非常感谢.要不然咱们的沟通没有办法得到落实,你说行,我说不行,呵呵,我们上面有每在有几万IP,还真不敢随便修改。需要有实际的错误页面才行。如果不方便 的话也可以联系我的QQ在主页上有。单击可以直接联系我。期待你的建议。
 楼主| 发表于 2012-9-29 08:02:31 | 显示全部楼层
ReEnter 发表于 2012-9-28 23:28
用这个吧...我一直在采淘宝网的...所以还没有注意你提到的..
现在两个都兼容

你确定用过我的吗?我的正则目前还没有见到取不到的,我测试了上千万个网站了,有上千人在使用。希望您能说点具体例子比如那个网站取不到,或者那种情况取不到。
 楼主| 发表于 2012-9-27 13:08:11 | 显示全部楼层
wtvb123 发表于 2012-9-27 13:04
刚更新?刚更新?刚更新?刚更新?

是的今天才更新的我时间还没有修改,你下载的真快
 楼主| 发表于 2012-9-26 13:48:57 | 显示全部楼层
ReEnter 发表于 2012-9-26 13:17
呵呵.错误不少.还更新这么多次.功能还不算完全.给你提一个错误吧,

提取编码的正则,改成

首先感谢您提出建议
您的正则好像
<meta http-equiv="Content-Type" content="text/html; charset=gbk" />
到这种情况就不行了吧。
至于你说的其它功能,有些是有的,建议你先看下我的类再发表评论。
本人水平有限,只能给大家提供这些。当然我会随着自己的进步不断为大家更新服务,您说的错误不少,希望能细化。再次感谢您的宝贵建议
 楼主| 发表于 2012-9-25 13:54:29 | 显示全部楼层
yx1412 发表于 2012-9-25 13:52
真的非常感谢楼主了,最近在自学C#,这个类对我自己写的小程序太有帮助了,我自己写的太没有规范了,这边一 ...

在使用过程中有什么问题欢迎来论坛提问
 楼主| 发表于 2012-9-21 21:38:57 | 显示全部楼层
懒羊羊_懒懒 发表于 2012-9-21 20:41
RegexServices 这个类是哪里的

那是我的正则类,你可以不用,因为这里主要是,httphelper的使用方法,主要看用法,哈哈
 楼主| 发表于 2012-9-20 16:14:46 | 显示全部楼层
inghot 发表于 2012-9-20 15:39
好东西啊,以前在你的网站上过来的。嘿嘿。

以后常来啊,呵呵
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-4-29 10:25

© 2014-2021

快速回复 返回顶部 返回列表