網(wǎng)絡(luò)爬蟲由于一個(gè)ip頻繁訪問同一網(wǎng)站，容易返回456或者被長時(shí)間封禁。

特別的本機(jī)有socks5客戶端的設(shè)置如下，前提是已經(jīng)安裝了socks5的客戶端軟件，并且啟動起來在固定端口為本機(jī)提供服務(wù)。

使用前先更新requests版本為支持socks的版本。

            
pip install -U requests[socks]
          

            
import requests

my_proxies={"http":"http://127.0.0.1:1080","https":"https://127.0.0.1:1080"}
resp=requests.get("http://www.some.com",proxies=my_proxies,timeout=5)
print(resp.text)

          

注意其中的地址協(xié)議寫的是http和https。

以上這篇python requests使用socks5的例子就是小編分享給大家的全部內(nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。