分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.3-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

楼主: 站长苏飞

[发布] 【C#HttpHelper爬虫框架】源码购买帖子

 关闭 [复制链接]
 楼主| 发表于 2014-9-22 08:37:27 | 显示全部楼层
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里联系我
            1.增加执行Js的方法
            2.单个证书增加带密码功能
            3.修复设置多个证书时必须先设置单个证书的路径,而单个证书又没有办法设置密码,所以造成无法给证书带密码的问题
            4.修复Cookie为Null时,Cookie精简化方法报错的问题
详情请查看教程http://httphelper.sufeinet.com/Course.aspx
 楼主| 发表于 2014-9-15 08:32:23 | 显示全部楼层
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里联系我
第一版源码已发布
版本号:V1.0
.NET环境:4.0
更新功能有
  • GET请求
  • POST字符串数据
  • POST字节数组
  • POST文件数据
  • POST请求时设置编码
  • 获取URL重定向(302,301)后的URL网址
  • 获取状态码(StatusCode)和状态描述(StatusDescription)
  • 如何设置请求头信息(Header)
  • 如何获取响应头信息(Header)
  • 如果设置来路URL(Referer)
  • 字符串Cookie使用方法
  • CookieCollection类型Cookie使用方法
  • 获取精简字符串Cookie
  • 字符串Cookie转为CookieCollection类型Cookie
  • CookieCollection类型Cookiel转为字符串Cookie
  • 获取图片验证码
  • 带有证书的网站请求方法
  • 为Http请求设置代理IP
  • 将URL的参数部分转为NameValueCollection集合
  • 解码,还原URL(URLDecode)/转码、编码URL(URLEncode)
  • 使用MD5(32位)加密字符串
  • 将指定的Json字符串转为指定的T类型对象
  • 将指定的T类型对象转为Json字符串
  • 获取所有的A链接并生成List对象(href、text链接文本,html整个标签)
  • 获取所有的Img(图片)对象(src、img、Html整个标签)并生成List对象
  • 过滤所有的html标签
  • 过滤所有的换行符号
  • 极速请求方法FastRequest(极速请求不接收数据)



时间比紧,大家有如果发现有什么Bug还希望在讨论区提一下
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备17001017号-1)

GMT+8, 2021-10-23 13:58

© 2014-2021

快速回复 返回顶部 返回列表