日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評

系統 2164 0

一、在豆瓣電影網爬取影片的短評以及相關的信息:

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評_第1張圖片

二、參考代碼

            
              import requests
from bs4 import BeautifulSoup
import pandas as pd

url_list = []
for i in range(5):
    url_list.append('https://movie.douban.com/subject/26794435/comments?start=%s&limit=20&sort=new_score&status=P'%(i*20))

n = 0
commentInfo_list =[]
for url in url_list:
    txt = requests.get(url).text # 網頁的獲取
    soup = BeautifulSoup(txt,'lxml')  # 網頁的解析

    divs = soup.find('div',id='comments').find_all('div',class_='comment')        
    for div in divs:
        comments_dict ={}        
        comments_dict['用戶名'] = div.find('span',class_ = 'comment-info').find('a').text
        comments_dict['評論時間'] = div.find('span',class_= 'comment-time').text.replace(' ','').replace('\n','')
        comments_dict['有用數量'] = div.find('span',class_= 'votes').text
        comments_dict['評論內容'] = div.find('span',class_='short').text
        
        commentInfo_list.append(comments_dict)            
        n += 1        
print('已成功采集%s條評論'%n)    

df = pd.DataFrame(commentInfo_list)
            
          

三、查看爬取下來的短評以及相關的信息:

python爬蟲小案例_從豆瓣爬取《哪吒之魔童降世》的短評_第2張圖片


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 宁城县| 微山县| 讷河市| 修武县| 孝义市| 正安县| 克拉玛依市| 葵青区| 湖北省| 霞浦县| 岳阳县| 宣武区| 称多县| 镇巴县| 繁昌县| 万全县| 巫山县| 杭锦后旗| 巧家县| 迁西县| 红原县| 车险| 彭水| 茶陵县| 阳信县| 陆河县| 彰化县| 康乐县| 介休市| 依安县| 保亭| 澳门| 阜新市| 宾川县| 卓尼县| 贺州市| 修水县| 克什克腾旗| 永嘉县| 扬州市| 新平|