三大相關系數:pearson,spearman,kendall統計學中的三大相關性系數：pearson,spearman,kendall，他們反應的都是兩個變量之間變化趨勢的方向以及程度，其值范圍為-1到+1。0表示兩個變量不相關，正值表示正相關，負值表示負相關，值越大表示相關性越強。1.personcorrelationcoefficient（皮爾森相關性系數）皮爾遜相關系數通常用r或ρ表示，度量兩變量X和Y之間相互關系（線性相關）(1)公式皮爾森相關性
系統 2019-09-27 17:53:11 1955
案例：爬取使用搜狗根據指定詞條搜索到的頁面數據（例如爬取詞條為‘周杰倫'的頁面數據）importurllib.request#1.指定urlurl='https://www.sogou.com/web?query=周杰倫''''2.發起請求:使用urlopen函數對指定的url發起請求，該函數返回一個響應對象，urlopen代表打開url'''response=urllib.request.urlopen(url=url)#3.獲取響應對象中的頁面數據:r
系統 2019-09-27 17:53:11 1955
sklearn.preprocessing.RobustScaler:Initsignature:RobustScaler(with_centering=True,with_scaling=True,quantile_range=(25.0,75.0),copy=True,)Docstring:Scalefeaturesusingstatisticsthatarerobusttooutliers.ThisScalerremovesthemedianands
系統 2019-09-27 17:52:43 1955
如果直接從生成驗證碼的頁面把驗證碼下載到本地后識別，再構造表單數據發送的話，會有一個驗證碼同步的問題，即請求了兩次驗證碼，而識別出來的驗證碼并不是實際需要發送的驗證碼。有如下幾種方法解決。法1:用session：mysession=requests.Session()login_url='http://xxx.com'checkcode_url='http://yyy.com'html=mysession.get(login_url,timeout=60*
系統 2019-09-27 17:52:42 1955
在學習轉換之前先了解以下它們的基本概念RDD：彈性分布式數據集，是一個只讀分區集合DataFrame：以命名列方式組織的分布式數據集，概念上和關系型數據庫的一張表一樣DataSet：分布式數據集合，Python暫時不支持了解了基本的概念之后，接下來我們通過代碼編寫三種數據集的形成RDD的形成frompyspark.sqlimportSparkSessionif__name__=='__main__':spark=SparkSession\.builder\
系統 2019-09-27 17:52:31 1955
3.5.2for循環hello大家好，不知道在上節中大家練習while循環練習得怎么樣了，相信大家都已經熟悉while循環了吧，那么現在我在這里在向大家講解一下for循環。大家肯定也很懵圈，怎么有個while循環，又有個for循環，for循環又是干嘛的？相信很多剛接觸編程的朋友一定很懵圈，哈哈......因為我當時也很懵圈。好了，廢話不多說，接下來就給大家將一下for循環和while循環的區別，以及for循環是什么東西。while循環的功能非常強大，它可以
系統 2019-09-27 17:52:18 1955
看python社區大媽組織的內容里邊有一篇講python內存優化的，用到了__slots__。然后查了一下，總結一下。感覺非常有用python類在進行實例化的時候，會有一個__dict__屬性，里邊有可用的實例屬性名和值。聲明__slots__后，實例就只會含有__slots__里有的屬性名。#coding:utf-8classA(object):x=1def__init__(self):self.y=2a=A()printa.__dict__print(
系統 2019-09-27 17:52:11 1955
python修改大數據文件時，如果全加載到內存中，可能會導致內存溢出。因此可借用如下方法，將分件分段讀取修改。withopen('file.txt','r')asold_file:withopen('file.txt','r+')asnew_file:current_line=0#定位到需要刪除的行whilecurrent_line<(3-1):#(del_line-1)old_file.readline()current_line+=1#當前光標在被刪除
系統 2019-09-27 17:51:18 1955
使用python腳本備份zk中的配置python備份代碼python3back.pyimportosimportos.pathfromkazoo.clientimportKazooClientfromkazoo.clientimportKazooStatezk=KazooClient('test:2181')zk.start()zkBashPath="/conf/base/"backUp_path="/tmp/test/"cs=zk.get_childre
系統 2019-09-27 17:50:23 1955
一、and:在Python中，and和or執行布爾邏輯演算，如你所期待的一樣，但是它們并不返回布爾值；而是，返回它們實際進行比較的值之一。復制代碼代碼如下:>>>'a'and'b''b'>>>''and'b'''>>>'a'and'b'and'c''c'在布爾上下文中從左到右演算表達式的值，如果布爾上下文中的所有值都為真，那么and返回最后一個值。如果布爾上下文中的某個值為假，則and返回第一個假值二、or:復制代碼代碼如下:>>>'a'or'b''a'>
系統 2019-09-27 17:49:41 1955
