http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 4298|回复: 5

[求助] GET没办法抓TM宝贝

[复制链接]
发表于 2015-5-21 11:55:39 | 显示全部楼层 |阅读模式
新手不懂就用GET来抓页面,但是没办法呢抓取天猫的宝贝页面,提示302   浏览器可以使用
string qt = "http://detail.tmall.com/item.htm?spm=a230r.1.14.18.6ockEh&id=45197802445";

            //创建Httphelper对象
            HttpHelper http = new HttpHelper();
            //创建Httphelper参数对象
            HttpItem item = new HttpItem()
            {

                URL = qt,//URL     必需项   
                Method = "get",//URL     可选项 默认为Get   
                ContentType = "text/html",//返回类型    可选项有默认值   
                //ContentType = "application/x-www-form-urlencoded",//返回类型    可选项有默认值   
            };
            //请求的返回值对象
            HttpResult result = http.GetHtml(item);
            //获取请请求的Html
            string html = result.Html;



错误信息:<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
<html>
<head><title>302 Found</title></head>
<body bgcolor="white">
<h1>302 Found</h1>
<p>The requested resource resides temporarily under a different URI.</p>
<hr/>Powered by Tengine</body>
</html>



1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
 楼主| 发表于 2015-5-21 15:10:17 | 显示全部楼层
解决了
回复

使用道具 举报

发表于 2015-7-1 20:03:57 | 显示全部楼层
本帖最后由 我是MT 于 2015-7-1 20:05 编辑

你用万能框架抓TM?难道不被封IP吗 ?用webkit内核的cefsharp安全可靠,稳定。哈哈。
发表于 2015-10-6 21:40:14 | 显示全部楼层
马克一个先。。。学习
发表于 2015-11-8 12:48:25 | 显示全部楼层
我是MT 发表于 2015-7-1 20:03
你用万能框架抓TM?难道不被封IP吗 ?用webkit内核的cefsharp安全可靠,稳定。哈哈。

用这个跟限制IP有关系吗
发表于 2015-11-12 16:44:14 | 显示全部楼层
speed2018 发表于 2015-11-8 12:48
用这个跟限制IP有关系吗

POST的速度非常快,而且模拟POST过程会有一些cookie遗漏,还有淘宝对用户行为分析,用post无法模拟的。所以一旦发现就会封IP。有时候是10多分钟,有时候是一个多小时 。封IP之后要求你登陆才能访问。用真实的浏览器就不会出现这种情况。
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-3-29 02:47

© 2014-2021

快速回复 返回顶部 返回列表