苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.3-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 367|回复: 1

[咨询站长] Python爬虫问题

[复制链接]
发表于 2020-8-28 10:20:57 | 显示全部楼层 |阅读模式
我需要爬虫的网站有两秒安全检查,在安全检查的时候返回503不带有cookie <script type="text/javascript">  //<![CDATA[
  (function(){
    var a = function() {try{return !!window.addEventListener} catch(e) {return !1} },
    b = function(b, c) {a() ? document.addEventListener("DOMContentLoaded", b, c) : document.attachEvent("onreadystatechange", b)};

    window._cf_chl_opt={
      cvId: "1",
      cType: "non-interactive",
      cNounce: "37226",
      cRay: "5c9a84e0cd781087",
      cHash: "408de0407545d64",
      cRq: {
        d: "i+j8bsb1Hy1SSZZ7ThYoWdr1n5esjWXLgGe7NsM+U+i5jFPAfNVvwfbHirY8FT/9ruTFvB3ar9uAXSxe/MOdsAQJuSNZt0jLSelpkzdnozcOkI5pEDd1ZEvIBEokBPN8wuXGrjhCSfBfOHjC6PyDfy0+V55rmG8oqg6Voru+EuCKj2eCNJBkvK3RdG/5HwGgIPNnT8ZZeXMquNDO2Tzpk/RhTler+hCECk7eJbQTfXsERTwPyvhCQB8qCFKUCV7FRdPOnyMqxjNjItyb+GswhE0AMtp7VNPvP+YtsUDORyEPDyACUcu0oDTIm0Kyvc8j6wjc+5xFTLjveLZC9RH6d38j8AlFy5iOd7YojH0o0g2UYd7ztgHpFQcFQu5N3cz4ZWCEBZsY9jcgh/A2PHxEWw==",
        t: "MTU5ODU4MDg2OS4yNDIwMDA=",
        m: "WbM4dJhW3jpSzHH4RE1wPw5HuYYp7/ZNq8PqATRw7ZI=",
        i1: "tUYFwBEXV3h5nPhMGG3UUg==",
        i2: "TewgjaIhcM2oLvXWSRi3aA==",
      }
    }
    window._cf_chl_enter = function(){window._cf_chl_opt.p=1};

    b(function(){
      var cookiesEnabled=(navigator.cookieEnabled)? true : false;
      var cookieSupportInfix=cookiesEnabled?'/nocookie':'/cookie';
      var a = document.getElementById('yjs-content');a.style.display = 'block';
      var isIE = /(MSIE|Trident\/|Edge\/)/i.test(window.navigator.userAgent);
      var trkjs = isIE ? new Image() : document.createElement('img');
      trkjs.setAttribute("src", "/cdn-cgi/images/trace/baidu-jschal/js"+cookieSupportInfix+"/transparent.gif?ray=5c9a84e0cd781087");
      trkjs.id = "trk_jschal_js";
      trkjs.setAttribute("alt", "");
      document.body.appendChild(trkjs);

      document.body.appendChild(trkjs);
      var cpo = document.createElement('script');
      cpo.type = 'text/javascript';
      cpo.src = "/cdn-cgi/challenge-platform/orchestrate/jsch/v1";
      var done = false;
      cpo.onload = cpo.onreadystatechange = function() {
        if (!done && (!this.readyState || this.readyState === "loaded" || this.readyState === "complete")) {
          done = true;
          cpo.onload = cpo.onreadystatechange = null;
          window._cf_chl_enter()
        }
      };
      document.getElementsByTagName('head')[0].appendChild(cpo);

    }, false);
  })();
  //]]>
  </script>
  <script type="text/javascript"  src="https://captcha.su.baidu.com/anti-bot/mfcd.js">
  </script>
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2020-8-30 11:23:06 | 显示全部楼层
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备17001017号-1)

GMT+8, 2020-9-27 09:50

© 2014-2021

快速回复 返回顶部 返回列表