import requests; import re; import os; import parsel; 1.請求網頁 header = { "user-agent":'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_5) AppleWebKit/537. ...
import requests;
import re;
import os;
import parsel;
1.請求網頁
header = {
"user-agent":'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'
}
response = requests.get('https://www.doutula.com/photo/list/',headers=header)
html = response.text
2.解析網頁
selector = parsel.Selector(html)
print(selector)
dir_name = 'doutu_list'
if not os.path.exists(dir_name):
os.mkdir(dir_name)
result_list = selector.xpath('//a[@class="col-xs-6 col-sm-3"]')
for result in result_list:
title = result.xpath('./img/@alt').get()
img_url = result.xpath('./img/@data-original').get()
ext = img_url.split('.')[-1]
file_name = title+'.'+ext
print(title,img_url)
# 保存
response = requests.get(img_url,headers=header)
with open(dir_name+'/'+file_name,'wb') as f:
f.write(response.content)
高顏值後臺管理系統免費使用 ### 子楓後臺管理系統 ###，可在寶塔面板直接安裝
歡迎關註我的公眾號：子楓的奇妙世界，獲得獨家整理的學習資源和日常乾貨推送。
如果您對我的其他專題內容感興趣，直達我的個人博客：www.wangmingchang.com 。
