網絡爬蟲由于一個ip頻繁訪問同一網站,容易返回456或者被長時間封禁。
特別的本機有socks5客戶端的設置如下,前提是已經安裝了socks5的客戶端軟件,并且啟動起來在固定端口為本機提供服務。
使用前先更新requests版本為支持socks的版本。
pip install -U requests[socks]
import requests my_proxies={"http":"http://127.0.0.1:1080","https":"https://127.0.0.1:1080"} resp=requests.get("http://www.some.com",proxies=my_proxies,timeout=5) print(resp.text)
注意其中的地址協議寫的是http和https。
以上這篇python requests使用socks5的例子就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
