aiohttp 库直接使用 https 代理会报错,用 http 代理没有问题。
可是~爬虫抓取的网站需要 https,这个要怎么解决呢?
可是~爬虫抓取的网站需要 https,这个要怎么解决呢?
1
sola97 Nov 5, 2018 via Android
用 http 代理可以爬 https 的内容的吧
|
2
enrolls Nov 6, 2018
1. 忽略 ssl 验证 [doc]( https://docs.aiohttp.org/en/stable/client_reference.html?highlight=verify_ssl)
2. 代理协议使用 http/socks4/socks5 |