日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

Python爬蟲環境配置設置

系統 1829 0

1.原本安裝了Python,還有必要安裝Anaconda嗎?

有必要

Anaconda,其包含了conda、Python等180多個科學包及其依賴項,是一個開源的包、環境管理器,能夠在不同的環境之間切換.

2.什么是MongoDB?

MongoDB 是由C++語言編寫的,是一個基于分布式文件存儲的開源數據庫系統。在高負載的情況下,添加更多的節點,可以保證服務器性能。

3.什么是Robomogo?

MongoDB的可視化界面。下載Robomogo免費版就足夠用了

4.什么是Redis?

其遵守BSD協議,是一個高性能的key-value數據庫。

5.什么是RedisDesktopManager?

Redis的可視化界面

6.Python爬蟲常用庫有哪些?

?

urllib

提供了一系列用于操作URL的功能。urllib的 request 模塊可以非常方便地抓取URL內容,也就是發送一個GET請求到指定的頁面,然后返回HTTP的響應。

Re

執行正則表達式需要使用的模塊

selenium

此庫驅動瀏覽器獲取渲染后的網頁信息。

頁面渲染:加載-解析-渲染(構建渲染樹,對各個元素進行位置計算、樣式計算等等,然后根據渲染樹對頁面進行渲染(可以理解為“畫”元素))

注意:因為最新版本的selenium已經拋棄了舊版本的ChromeDriver ,所以,用2.幾版本的可以保證程序正常通過。

phantomjs

無界面瀏覽器,無需彈出瀏覽器進行爬蟲

lxml,?beautifulsour4?

可對網頁進行解析

pyquery?
pymysql?
pymongo?

分別對應最開始介紹的安裝軟件

flask?

代理設置


django?

Web服務器框架


jupyter?

日志文檔,可以在線跑代碼等
?

?


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 固原市| 石门县| 嘉兴市| 通渭县| 新乡市| 通道| 资阳市| 成安县| 揭东县| 敦煌市| 巨野县| 根河市| 永寿县| 唐海县| 陆良县| 伊吾县| 赤峰市| 南昌县| 甘洛县| 花莲县| 越西县| 镇雄县| 姚安县| 简阳市| 秦安县| 广灵县| 平邑县| 上蔡县| 盐边县| 宜黄县| 广东省| 芦溪县| 普洱| 长白| 开封县| 双江| 屏山县| 塘沽区| 宜章县| 柯坪县| 江门市|