五月天青色头像情侣网名,国产亚洲av片在线观看18女人,黑人巨茎大战俄罗斯美女,扒下她的小内裤打屁股

歡迎光臨散文網(wǎng) 會(huì)員登陸 & 注冊(cè)

黑馬程序員Python爬蟲(chóng)基礎(chǔ),快速入門Scrapy爬蟲(chóng)框架

2023-08-26 15:40 作者:明明ai小明  | 我要投稿
#拿到頁(yè)面原地阿瑪
#拿到所有ul上面得a標(biāo)簽

from lxml import etree
import re
import requests
import json
domain = 'https://desk.zol.com.cn'
url = 'https://desk.zol.com.cn/'
resp = requests.get(url)
resp.encoding = 'gbk'
# print(resp.text)
et = etree.HTML(resp.text)
result = et.xpath('//ul[@class="pic-list2 clearfix"]/li/a/@href')
# print(result)

for item in result:
    url = domain + item
    print(url)
    # url = 'https://desk.zol.com.cn/bizhi/10055_120350_2.html'
    resp = requests.get(url)
    # print(resp.text)
    obj = re.compile(r'var deskPicArr.*?=(?P<deskPicArr>.*?);',re.S)
    result = obj.search(resp.text)
    deskPicArr = result.group('deskPicArr')
    # print(deskPicArr)
    dic = json.loads(deskPicArr)
    # print(dic)
    for item in dic['list']:
        oriSize = item.get('oriSize')
        imgsrc = item.get('imgsrc')
        # print(oriSize,imgsrc)
        imgsrc = imgsrc.replace('##SIZE##',oriSize)
        print(imgsrc)
        #發(fā)送網(wǎng)絡(luò)請(qǐng)求
        name = imgsrc.split('/')[-1]
        resp_img = requests.get(imgsrc)
        #此時(shí)拿到的不是resp.text, resp.content拿到的是字節(jié)
        with open(f"img/{name}",mode="wb") as f:
            f.write(resp_img.content)
            # print(f)


黑馬程序員Python爬蟲(chóng)基礎(chǔ),快速入門Scrapy爬蟲(chóng)框架的評(píng)論 (共 條)

分享到微博請(qǐng)遵守國(guó)家法律
阳高县| 大理市| 山阴县| 建始县| 陕西省| 佛山市| 玛纳斯县| 台湾省| 岳普湖县| 商南县| 萨迦县| 墨竹工卡县| 宝坻区| 康平县| 鄂托克前旗| 富裕县| 鄂尔多斯市| 当雄县| 桂东县| 汉阴县| 呼和浩特市| 靖边县| 冀州市| 卫辉市| 房山区| 贺州市| 襄樊市| 文安县| 大庆市| 田林县| 台江县| 福州市| 蒙自县| 合肥市| 弥勒县| 腾冲县| 芮城县| 辛集市| 本溪| 穆棱市| 濮阳市|