日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評

系統 1711 0

一、在豆瓣電影網爬取影片的短評以及相關的信息:

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評_第1張圖片

二、參考代碼

            
              import requests
from bs4 import BeautifulSoup
import pandas as pd

url_list = []
for i in range(5):
    url_list.append('https://movie.douban.com/subject/26794435/comments?start=%s&limit=20&sort=new_score&status=P'%(i*20))

n = 0
commentInfo_list =[]
for url in url_list:
    txt = requests.get(url).text # 網頁的獲取
    soup = BeautifulSoup(txt,'lxml')  # 網頁的解析

    divs = soup.find('div',id='comments').find_all('div',class_='comment')        
    for div in divs:
        comments_dict ={}        
        comments_dict['用戶名'] = div.find('span',class_ = 'comment-info').find('a').text
        comments_dict['評論時間'] = div.find('span',class_= 'comment-time').text.replace(' ','').replace('\n','')
        comments_dict['有用數量'] = div.find('span',class_= 'votes').text
        comments_dict['評論內容'] = div.find('span',class_='short').text
        
        commentInfo_list.append(comments_dict)            
        n += 1        
print('已成功采集%s條評論'%n)    

df = pd.DataFrame(commentInfo_list)
            
          

三、查看爬取下來的短評以及相關的信息:

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評_第2張圖片


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 博湖县| 香港 | 沙湾县| 五指山市| 万载县| 永嘉县| 宜都市| 江安县| 会泽县| 阿克陶县| 海兴县| 江都市| 赞皇县| 财经| 渝北区| 饶平县| 崇阳县| 北安市| 桃园市| 炎陵县| 黑龙江省| 都匀市| 商丘市| 台南县| 马龙县| 申扎县| 万安县| 拉孜县| 阿拉尔市| 新干县| 定南县| 英山县| 平利县| 顺义区| 东山县| 普兰店市| 嘉荫县| 牟定县| 天水市| 丹凤县| 孟州市|