苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

HttpHelper爬虫框架(V2.4-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 16146|回复: 11

[教程] 【万能框架教程】- 字符串Cookie使用方法

[复制链接]
发表于 2014-9-9 14:43:08 | 显示全部楼层 |阅读模式
导读部分

【HttpHelper万能框架】教程目录贴  http://www.sufeinet.com/thread-9989-1-1.html


教程部分


Cookie是一个存储在客户端,用由服务端验证的东西。这个具体的功能我就不多说了。大家可以去百度
像需要登录,需要验证的网站,都是需要带有Cookie才可以访问的。
下面咱们就一起来看看在万能框架中是怎么样使用Cookie的。

第一步引入命名空间
[C#] 纯文本查看 复制代码
using CsharpHttpHelper;
using CsharpHttpHelper.Enum;

第二步,设置方法如下
[C#] 纯文本查看 复制代码
 
            //创建Httphelper对象            HttpHelper http = new HttpHelper();
            //创建Httphelper参数对象
            HttpItem item = new HttpItem()
            {
                URL = "http://www.sufeinet.com",//URL     必需项    
                Method = "get",//URL     可选项 默认为Get   
                ContentType = "text/html",//返回类型    可选项有默认值   
                //ResultCookieType = ResultCookieType.String //默认值可以不写
            };
            //请求的返回值对象
            HttpResult result = http.GetHtml(item);
            //获取请求的Cookie
            string cookie = result.Cookie;

            // 第二次使用Cookie

            //创建Httphelper参数对象
            item = new HttpItem()
            {
                URL = "http://www.sufeinet.com/thread-9989-1-1.html",//URL     必需项    
                Method = "get",//URL     可选项 默认为Get   
                ContentType = "text/html",//返回类型    可选项有默认值   
                Cookie = cookie,//把Cookie写入请求串中
            };
            //请求的返回值对象
            result = http.GetHtml(item);

            //获取Html
            string html = result.Html;


第一部分是模拟的登录或者是获取验证的问题,这个具体要怎么做,大家自己抓包实现,呵呵。

第二部分是带上上次获取到的Cookie然后进行第一次的请求。
这就是字符串Cookie的使用方法
另外大家需要注意一点
//ResultCookieType = ResultCookieType.String //默认值可以不写
这一句是默认值是 ResultCookieType.String
所以大家如果是使用的字符串Cookie就不需要设置。
有人会说还会有其他存储格式的Cookie吗, 答案是必须的。
这个请看目录http://www.sufeinet.com/thread-9989-1-1.html

本帖被以下淘专辑推荐:

  • · cookie|主题: 12, 订阅: 1


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2015-4-28 17:37:42 | 显示全部楼层
有复杂的应用这个框架的例子没,比如每一秒都 要抓取数据,然后又是很多账号同时抓取
发表于 2015-11-2 16:05:54 | 显示全部楼层
万能框架不能获取淘宝COOKIE 比如https://list.tmall.com/search_pr ... tmhkmain=0#J_crumbs
 楼主| 发表于 2015-11-2 16:16:09 | 显示全部楼层
<iframe id="J_loginIframe" src="https://login.taobao.com/member/login.jhtml?tpl_redirect_url=https%3A%2F%2Fsec.taobao.com%2Fquery.htm%3Faction%3DQueryAction&sub=true&style=miniall&enup=true&newMini=true&full_redirect=true&from=tmall&allp=assets_css%3D3.0.2/login_pc.css%26enup_css%3D3.0.2/enup_pc.css%26assets_js%3D3.0.2/login_performance.js&pms=1446452159" scrolling="no" frameborder="no" border="0" width="320"></iframe>  
</div>  用的Iframe当然提取不到了
发表于 2015-11-2 17:06:50 | 显示全部楼层
那还有什么其他办法吗?
 楼主| 发表于 2015-11-2 17:11:35 | 显示全部楼层
yic_sunny 发表于 2015-11-2 17:06
那还有什么其他办法吗?

直接访问框架内的页面
发表于 2015-11-2 17:36:46 | 显示全部楼层
就是这个页面吧。他应该是判断是否存在cookie而已,然而获取的时候是没有COOKIE的 所有就有了这个Iframe去登录在跳转。
发表于 2018-8-13 13:57:38 | 显示全部楼层
用 webbrowser 能获取COOKIE 用 httpHelper  不能获取COOKIE 可能是什么问题
 楼主| 发表于 2018-8-13 15:55:29 | 显示全部楼层
wx_mpwGu0Ua 发表于 2018-8-13 13:57
用 webbrowser 能获取COOKIE 用 httpHelper  不能获取COOKIE 可能是什么问题

JS 或者多个请求获取的
发表于 2018-12-30 22:37:09 | 显示全部楼层
感恩无私的分享与奉献
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2022-9-27 07:12

© 2014-2021

快速回复 返回顶部 返回列表