黄色网页视频 I 影音先锋日日狠狠久久 I 秋霞午夜毛片 I 秋霞一二三区 I 国产成人片无码视频 I 国产 精品 自在自线 I av免费观看网站 I 日本精品久久久久中文字幕5 I 91看视频 I 看全色黄大色黄女片18 I 精品不卡一区 I 亚洲最新精品 I 欧美 激情 在线 I 人妻少妇精品久久 I 国产99视频精品免费专区 I 欧美影院 I 欧美精品在欧美一区二区少妇 I av大片网站 I 国产精品黄色片 I 888久久 I 狠狠干最新 I 看看黄色一级片 I 黄色精品久久 I 三级av在线 I 69色综合 I 国产日韩欧美91 I 亚洲精品偷拍 I 激情小说亚洲图片 I 久久国产视频精品 I 国产综合精品一区二区三区 I 色婷婷国产 I 最新成人av在线 I 国产私拍精品 I 日韩成人影音 I 日日夜夜天天综合

Python爬蟲環境配置設置

系統 2030 0

1.原本安裝了Python,還有必要安裝Anaconda嗎?

有必要

Anaconda,其包含了conda、Python等180多個科學包及其依賴項,是一個開源的包、環境管理器,能夠在不同的環境之間切換.

2.什么是MongoDB?

MongoDB 是由C++語言編寫的,是一個基于分布式文件存儲的開源數據庫系統。在高負載的情況下,添加更多的節點,可以保證服務器性能。

3.什么是Robomogo?

MongoDB的可視化界面。下載Robomogo免費版就足夠用了

4.什么是Redis?

其遵守BSD協議,是一個高性能的key-value數據庫。

5.什么是RedisDesktopManager?

Redis的可視化界面

6.Python爬蟲常用庫有哪些?

?

urllib

提供了一系列用于操作URL的功能。urllib的 request 模塊可以非常方便地抓取URL內容,也就是發送一個GET請求到指定的頁面,然后返回HTTP的響應。

Re

執行正則表達式需要使用的模塊

selenium

此庫驅動瀏覽器獲取渲染后的網頁信息。

頁面渲染:加載-解析-渲染(構建渲染樹,對各個元素進行位置計算、樣式計算等等,然后根據渲染樹對頁面進行渲染(可以理解為“畫”元素))

注意:因為最新版本的selenium已經拋棄了舊版本的ChromeDriver ,所以,用2.幾版本的可以保證程序正常通過。

phantomjs

無界面瀏覽器,無需彈出瀏覽器進行爬蟲

lxml,?beautifulsour4?

可對網頁進行解析

pyquery?
pymysql?
pymongo?

分別對應最開始介紹的安裝軟件

flask?

代理設置


django?

Web服務器框架


jupyter?

日志文檔,可以在線跑代碼等
?

?


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論