黄色网页视频 I 影音先锋日日狠狠久久 I 秋霞午夜毛片 I 秋霞一二三区 I 国产成人片无码视频 I 国产 精品 自在自线 I av免费观看网站 I 日本精品久久久久中文字幕5 I 91看视频 I 看全色黄大色黄女片18 I 精品不卡一区 I 亚洲最新精品 I 欧美 激情 在线 I 人妻少妇精品久久 I 国产99视频精品免费专区 I 欧美影院 I 欧美精品在欧美一区二区少妇 I av大片网站 I 国产精品黄色片 I 888久久 I 狠狠干最新 I 看看黄色一级片 I 黄色精品久久 I 三级av在线 I 69色综合 I 国产日韩欧美91 I 亚洲精品偷拍 I 激情小说亚洲图片 I 久久国产视频精品 I 国产综合精品一区二区三区 I 色婷婷国产 I 最新成人av在线 I 国产私拍精品 I 日韩成人影音 I 日日夜夜天天综合

python網(wǎng)絡(luò)爬蟲——正則解析

系統(tǒng) 1963 0

?

- re.I # 忽略大小寫
- re.M # 多行匹配,將正則作用到源數(shù)據(jù)的每一行
- re.S # 單行匹配,將正則作用到整個源數(shù)據(jù),輸出一個整體字符串(包括換行符也打印)

            string = 
            
              '''
            
            
              fall in love with you
i love you very much
i love she
i love her
            
            
              '''
            
            
              #
            
            
               去除以i開頭的每一行數(shù)據(jù)
            
            
re.findall(
            
              '
            
            
              ^i.*
            
            
              '
            
            ,string,re.M)
          
          ['i love you very much', 'i love she', 'i love her']
        
            
              #
            
            
              匹配全部行
            
            
string1 = 
            
              """
            
            
              細(xì)思極恐
你的隊友在看書
你的敵人在磨刀
你的閨蜜在減肥
隔壁老王在練腰

            
            
              """
            
            
              
re.findall(
            
            
              '
            
            
              .*
            
            
              '
            
            ,string1,re.S)
          
          ['細(xì)思極恐\n你的隊友在看書\n你的敵人在磨刀\n你的閨蜜在減肥\n隔壁老王在練腰\n', '']
          

爬取糗事百科中所有的圖片進(jìn)行保存
            
              import
            
            
               requests

            
            
              import
            
            
               re

            
            
              import
            
            
               urllib

            
            
              import
            
            
               os

url 
            
            = 
            
              '
            
            
              https://www.qiushibaike.com/pic/page/%d/?s=5170552
            
            
              '
            
            
              
# 自定義請求頭信息
headers 
            
            =
            
               {
    
            
            
              '
            
            
              User-Agent
            
            
              '
            
            :
            
              '
            
            
              Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.119 Safari/537.36
            
            
              '
            
            
              
}
              
# 判斷是否存在名為qiutu的文件夾,如果不存在則創(chuàng)建文件夾
if not os.path.exists( ' ./qiutu ' ): os.mkdir( ' ./qiutu ' )
# 手動輸入開始頁,結(jié)束頁 start_page
= int(input( ' start>>> ' )) end_page = int(input( ' end>>> ' )) for page in range(start_page,end_page+1 ):
  # 按照每頁url形式拼接指定url new_url
= format(url% page)
  # 發(fā)起請求 page_text
= requests.get(url=new_url,headers= headers).text
  # 使用正則找出page_text頁面中所有圖片url img_url_list
= re.findall( '
.*? .*?</div
' ,page_text,re.S)
  # 給每一個圖片url添加https協(xié)議頭
for img_url in img_url_list: img_url = ' https: ' + img_url
     # 將圖片url切割去除圖片名稱,作為存儲時圖片的名稱 img_name
= img_url.split( ' / ' )[-1 ] img_path = ' qiutu/ ' + img_name、
     # 對圖片做持久化存儲 urllib.request.urlretrieve(url
=img_url,filename= img_path) print (img_path, ' 下載成功 ' ) print ( ' over ' )

?

          



更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯(lián)系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發(fā)表我的評論
最新評論 總共0條評論