苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.3-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 631|回复: 1

[问题交流] 万能框架在linux下无法采集图片解决方案

[复制链接]
发表于 2020-10-19 17:20:15 | 显示全部楼层 |阅读模式
  如题,最近爬一个漫画站的时候,死活爬取不了,连对方网页都无法打开,curl,wget与本地调试对方网站都正常,经过N多百度与Google,发现是证书导致,框架加入 SecurityProtocol = SecurityProtocolType.Tls12,  也是无错误返回退出。 最后在 HttpHelper http = new HttpHelper(); 上方加入ServicePointManager.ServerCertificateValidationCallback = (sender, certificate, chain, sslPolicyErrors) => true;  后完美采集.     
      
      

找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2020-10-21 10:02:52 | 显示全部楼层
这个应该加的有兄弟,你直接写上证书的路径就行了,只要证书格式是对的即可
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备17001017号-1)

GMT+8, 2020-11-30 01:44

© 2014-2021

快速回复 返回顶部 返回列表