1.原本安裝了Python,還有必要安裝Anaconda嗎?
有必要
Anaconda,其包含了conda、Python等180多個科學包及其依賴項,是一個開源的包、環境管理器,能夠在不同的環境之間切換.
2.什么是MongoDB?
MongoDB 是由C++語言編寫的,是一個基于分布式文件存儲的開源數據庫系統。在高負載的情況下,添加更多的節點,可以保證服務器性能。
3.什么是Robomogo?
MongoDB的可視化界面。下載Robomogo免費版就足夠用了
4.什么是Redis?
其遵守BSD協議,是一個高性能的key-value數據庫。
5.什么是RedisDesktopManager?
Redis的可視化界面
6.Python爬蟲常用庫有哪些?
?
urllib
提供了一系列用于操作URL的功能。urllib的
request
模塊可以非常方便地抓取URL內容,也就是發送一個GET請求到指定的頁面,然后返回HTTP的響應。
Re
執行正則表達式需要使用的模塊
selenium
此庫驅動瀏覽器獲取渲染后的網頁信息。
頁面渲染:加載-解析-渲染(構建渲染樹,對各個元素進行位置計算、樣式計算等等,然后根據渲染樹對頁面進行渲染(可以理解為“畫”元素))
注意:因為最新版本的selenium已經拋棄了舊版本的ChromeDriver ,所以,用2.幾版本的可以保證程序正常通過。
phantomjs
無界面瀏覽器,無需彈出瀏覽器進行爬蟲
lxml,?beautifulsour4?
可對網頁進行解析
pyquery?
pymysql?
pymongo?
分別對應最開始介紹的安裝軟件
flask?
代理設置
django?
Web服務器框架
jupyter?
日志文檔,可以在線跑代碼等
?
?
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
