日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

python爬取歐美美女圖片---xpath方法

系統 1699 0

這里爬取的是http://sc.chinaz.com/tag_tupian/OuMeiMeiNv.html網站
獻上歐美美女!!!!

            
              from lxml import etree
import urllib.request,os,time

class OuMeiSpider(object):
    def __init__(self,start_page,end_page):
        self.start_page = start_page
        self.end_page = end_page
        self.first_url = 'http://sc.chinaz.com/tag_tupian/OuMeiMeiNv.html'
        self.url = 'http://sc.chinaz.com/tag_tupian/OuMeiMeiNv_{}.html'
        self.headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.100 Safari/537.36',}
    def get_request(self,page):
        #判斷使得否為第一頁
        if page == 1:
            url = self.first_url
        else:
            url = self.url.format(page)
        #構建請求對象
        request = urllib.request.Request(url=url,headers=self.headers)
        return request

    def parse_content(self,content):
        #生成tree對象
        tree = etree.HTML(content)
        #圖片地址
        img_src_list = tree.xpath('//div[@id="container"]/div/div/a/img/@src2')
        # print(len(img_src))
        img_name_list = tree.xpath('//div[@id="container"]/div/div/a/img/@alt')
        #下載圖片
        for img_src in img_src_list:
            filename = img_name_list[img_src_list.index(img_src)] + '.' + img_src.split('.')[-1]
            dirname = 'oumei'
            print("正在下載%s-----"%filename)
            filepath = os.path.join(dirname,filename)
            #寫入圖片
            urllib.request.urlretrieve(img_src,filepath)
            print("結束下載%s-----" % filename)
            time.sleep(2)



    def run(self):
        for page in range(self.start_page,self.end_page+1):
            #拼接地址
            request = self.get_request(page)
            #發送請求得到響應,并且將響應直接轉化為內容
            content = urllib.request.urlopen(request).read().decode('utf8')
            #解析內容
            self.parse_content(content)



def main():
    start_page = int(input("請輸入起始頁"))
    end_page = int(input("請輸入終止頁"))
    obj = OuMeiSpider(start_page,end_page)
    obj.run()

if __name__ == '__main__':
    main()


            
          

更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 海阳市| 友谊县| 肇州县| 大宁县| 新乐市| 清丰县| 灵寿县| 乌拉特前旗| 陆川县| 达日县| 阜新| 隆尧县| 巴林左旗| 富锦市| 云和县| 明溪县| 庐江县| 佳木斯市| 报价| 留坝县| 梁平县| 孝义市| 当涂县| 新余市| 武宣县| 宿松县| 闽清县| 夏河县| 阿拉善右旗| 德昌县| 西宁市| 奇台县| 呼玛县| 五台县| 延津县| 聊城市| 梓潼县| 得荣县| 遂川县| 缙云县| 永新县|