最近在使用爬蟲爬取數(shù)據(jù)時，經(jīng)常會返回403代碼，大致意思是該IP訪問過于頻繁，被限制訪問。限制IP訪問網(wǎng)站最常用的反爬手段了，其實破解也很容易，就是在爬取網(wǎng)站是使用代理即可，這個IP被限制了，就使用其他的IP。對于高大上的公司來說，他們基本都使用收費的代理，基本不會有什么問題，比較穩(wěn)定。像我這樣的矮矬窮，肯定是用不起收費的代理。一般都是使用國內(nèi)免費的代理，網(wǎng)上也有很多提供免費的代理。很多人都是從網(wǎng)上爬取一批免費的代理IP，存放在存儲媒介中，例如excel文
系統(tǒng) 2019-09-27 17:56:04 1977
實測系統(tǒng)：ubuntu16.4debain9.01.Ubuntu16.04系統(tǒng)自帶Python2.7和Python3.5，而默認(rèn)采用的是2.7版本，可采用如下命令查看單當(dāng)前版本號:python-V2.Python2.7和3.5都是默認(rèn)安裝在/usr/local/lib/python2.7(3.5)目錄下，link文件在/usr/bin文件夾下，需要刪除默認(rèn)pythonlink文件pythonsudorm/usr/bin/python重新建立鏈接，并指向Py
系統(tǒng) 2019-09-27 17:53:40 1977
在Python中有兩種函數(shù)，一種是def定義的函數(shù)，另一種是lambda函數(shù)，也就是大家常說的匿名函數(shù)。今天我就和大家聊聊lambda函數(shù)，在Python編程中，大家習(xí)慣將其稱為表達(dá)式。1.為什么要用lambda函數(shù)?先舉一個例子：將一個列表里的每個元素都平方。先用def來定義函數(shù)，代碼如下defsq(x):returnx*xmap(sq,[yforyinrange(10)])再用lambda函數(shù)來編寫代碼map(lambdax:x*x,[yforyinr
系統(tǒng) 2019-09-27 17:53:33 1977
本文實例為大家分享了PythonWeb靜態(tài)服務(wù)器的具體代碼，供大家參考，具體內(nèi)容如下功能：用戶訪問服務(wù)器可以返回指定頁面步驟：1.創(chuàng)建服務(wù)器類2.創(chuàng)建初始化服務(wù)器配置方法3.創(chuàng)建接收客戶端請求的方法4.創(chuàng)建發(fā)送響應(yīng)報文給客戶端方法importsocketimportreimportmultiprocessing#Http服務(wù)器類classHttpServer:#初始化屬性def__init__(self):#創(chuàng)建套接字self.tcp_server_soc
系統(tǒng) 2019-09-27 17:53:25 1977
英文文檔callable(object)ReturnTrueiftheobjectargumentappearscallable,Falseifnot.Ifthisreturnstrue,itisstillpossiblethatacallfails,butifitisfalse,callingobjectwillneversucceed.Notethatclassesarecallable(callingaclassreturnsanewinstance
系統(tǒng) 2019-09-27 17:52:30 1977
工作中用到了C/S模型，所做的也無非是給服務(wù)器發(fā)數(shù)據(jù)，但開發(fā)階段會遇到程序自身的回環(huán)測試，需要用到簡單的服務(wù)端以便驗證數(shù)據(jù)發(fā)送的正確性。寫軟件用C++，跑測試用python，這段時間也剛好看go語言，所以都要有demo。以下三組程序?qū)崿F(xiàn)的功能相同，這里一起做下總結(jié)。一、C++實現(xiàn)Boost.Asio是一個跨平臺的C++庫，它用現(xiàn)代C++方法為網(wǎng)絡(luò)和底層I/O程序提供了一致的異步I/O模型。為了跨平臺，我用boost庫實現(xiàn)，具體如下。服務(wù)端代碼：復(fù)制代碼代碼
系統(tǒng) 2019-09-27 17:51:43 1977
Python標(biāo)準(zhǔn)庫中有很多實用的工具類，但是在具體使用時，標(biāo)準(zhǔn)庫文檔上對使用細(xì)節(jié)描述的并不清楚，比如urllib2這個HTTP客戶端庫。這里總結(jié)了一些urllib2的使用細(xì)節(jié)。1.Proxy的設(shè)置2.Timeout設(shè)置3.在HTTPRequest中加入特定的Header4.Redirect5.Cookie6.使用HTTP的PUT和DELETE方法7.得到HTTP的返回碼8.DebugLogProxy的設(shè)置urllib2默認(rèn)會使用環(huán)境變量http_proxy
系統(tǒng) 2019-09-27 17:51:34 1977
最近剛好有朋友遇到個global相關(guān)的問題，這里簡單學(xué)習(xí)一下global關(guān)鍵字的用法。想要更好的了解global關(guān)鍵字，首先要熟悉python的全局變量與局部變量的概念。global關(guān)鍵字的作用是可以申明一個局部變量為全局變量，下面看一下實例一、變量作用域的說明這里簡單提一下變量作用域的概念，有興趣的小伙伴，可以查一下相關(guān)的博客1、局部變量defa():##菊部變量-，-local=1print(local)##全局無法使用，只有自己可用print(lob
系統(tǒng) 2019-09-27 17:51:01 1977
文章目錄摘要環(huán)境注意-Python>=3.7會導(dǎo)致編譯失敗編譯方法摘要本文記述如何在windows10上編譯mod_wsgi(Python3.5+Apache-2.4.39)環(huán)境win10Apache-2.4.39-https://www.apachelounge.com/download/Python-3.5VisualStudio2019(含c++開發(fā)組件)mod_wsgi-https://github.com/GrahamDumpleton/mod_
系統(tǒng) 2019-09-27 17:50:32 1977
1.字符串處理將字符串中的數(shù)字替換成其兩倍的值，例如：修改前："AS7G123m(d)F77k"修改后："AS14G246m(d)F154k"個人思路：先用正則表達(dá)式將其中的數(shù)字匹配出來進(jìn)行乘2操作，然后將字符串根據(jù)其中的數(shù)字進(jìn)行切割，得到一個字符列表，最終將乘以2后的數(shù)字和原有的字符進(jìn)行拼接得到最后的結(jié)果。（我腦子比較笨，想不到別的，如果您有更好更簡便的方法，希望可以分享一下！）importretext="AS7G123m(d)F77k"nums=re.
系統(tǒng) 2019-09-27 17:49:46 1977
