前言 嗨嘍，大家好呀~這裡是愛看美女的茜茜吶 環境使用: Python 3.8 Pycharm [模塊使用]: requests >>> 數據請求模塊 parsel >>> 數據解析模塊 re 正則表達式 在CMD裡面進行安裝 輸入安裝命令 pip install 模塊名 思路基本流程: 一. 分析 ...
前言
嗨嘍，大家好呀~這裡是愛看美女的茜茜吶
環境使用:
-
Python 3.8
-
Pycharm
[模塊使用]:
-
requests >>> 數據請求模塊
-
parsel >>> 數據解析模塊
-
re 正則表達式
在CMD裡面進行安裝 輸入安裝命令 pip install 模塊名
思路基本流程:
一. 分析我們想要數據內容 來自於哪裡
F12 開發者工具進行抓包分析
-
打開 F12 或者 滑鼠右鍵點擊檢查 刷新網頁
-
點擊搜索按鈕, 輸入搜索內容, 點擊回車 找到數據包
請求 網址, 就可以得到我們想要內容
二. 代碼實現的步驟過程:
-
發送請求, 模擬瀏覽器對於 發送請求
-
獲取數據, 獲取伺服器返迴響應數據 ---> 開發者工具裡面response
-
解析數據, 提取我們想要數據內容, 章節名字
-
保存數據, 保存本地文件
採集一章免費的 ---> 採集多章免費
採集多頁數據內容, 多個數據內容 ---> 去分析請求url參數變化
並不是完整等差數列 --> 有點點沒有規律 就去目錄頁面抓包, 分析一下我們想要章節url有沒有
代碼
導入模塊
# 導入數據請求模塊 ---> 第三方模塊 需要安裝 pip install requests
import requests
# 導入數據解析模塊 ---> 第三方模塊 需要安裝 pip install parsel
import parsel
# 導入獲取VIP章節代碼
import Vip
# 導入圖片文字識別代碼
import spot
# 導入os模塊
import os
更多資料獲取加Q裙：261823976 點擊藍字加入【python學習裙】
