python3爬取電影網站電影下載鏈接

来源:https://www.cnblogs.com/Python6359/archive/2018/09/06/9601786.html
-Advertisement-
Play Games

本文使用簡單的面向過程的編程思想,更容易理解。 說明: 本文使用了簡單的模塊:requests和re模塊,當然也可以使用urlib模塊。 開發環境是:Python3.5 開發工具:VsCode 代碼如下: vscode結果如下圖所示: 本地文件如圖所示: ...


本文使用簡單的面向過程的編程思想,更容易理解。

說明:

本文使用了簡單的模塊:requests和re模塊,當然也可以使用urlib模塊。

開發環境是:Python3.5

開發工具:VsCode

代碼如下:

 1 import requests
 2 import re 
 3 #Python學習交流群:548377875
 4 #迴圈製造網頁
 5 for page in range(1,2):  #這裡預設爬取了一頁,爬取多頁修改此處即可
 6     url='http://www.ygdy8.net/html/gndy/oumei/list_7_'+str(page)+'.html'
 7     html=requests.get(url)     #請求網頁
 8     html.encoding='gb2312'      #修改編碼格式,根據網頁上的要求修改
 9     dyData=re.findall('<a href="(.*?)" class=',html.text)  #使用re表達式獲取網頁代碼
10  
11     for m in dyData:
12         xqUrl='http://www.ygdy8.net'+m
13         #獲取網頁源代碼
14         html2=requests.get(xqUrl)
15         html2.encoding='gb2312'
16         try:
17             dyLink=re.findall('<a href="(.*?)">.*?</a></td>',html2.text)[0]
18             print(dyLink)
19         except:
20             print('沒有匹配到信息')
21  
22         with open('X:\\Users\\zhaomeng\\Desktop\\1234\\111.txt','a+')as ff:  #寫入本地文件夾
23             ff.write(dyLink+'\n')

vscode結果如下圖所示:

 

本地文件如圖所示:


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 目錄 分隔符 字元類和類型 重覆 子表達式 子表達式計數 定位到字元串的開始或末尾 分支 匹配特殊字元 特殊字元含義 分隔符 正則表達式必須包含在一對分隔符中。可以選擇任何非字母,數字,"\" 或空格的字元作為分隔符。字元串的開始和結束必須有匹配的分隔符。 最常用的分隔符是"/"。 如匹配"shop ...
  • typeHandler作用: 1.傳參時將javaType類型轉換成jdbcType 2.結果集中ResultSet中取值時,jdbcType轉換為javaType; 系統自定義的typeHandler: mybatis系統內部定義了一系列的typeHandler;基本涵蓋了我們正常使用的類型轉換; ...
  • laravel的啟動需要通過路由、中間件、控制器、模型、視圖最後出現在瀏覽器。而路由、中間件、模型,這些功能都有自己的類,比如Route::any()、DB::table()、$this->middleware()等等,這些功能都是由一個叫IOC(服務容器)的對象來調配的。 它就像框架里的一個管家, ...
  • 昨天對springboot中的mybatis逆向工程與分頁應用進行了整理,今天對ssm項目中的逆向工程與分頁進行整理。 項目運行環境:eclipse+jdk1.8+maven+tomcat 搭建ssm項目 首先新建maven project,項目Archetype選擇:maven archetype ...
  • 對於職位管理,我們可以理解它為角色許可權的管理,就像前面所說的一樣,有了職位管理,後臺管理系統綁定好對應的許可權以後,新進員工、離職或崗位調整,管理員操作起來就非常的便捷了,只需要重新綁定對應職位就可以做好許可權的切換工作。 為了方便職位管理,我們可以將頁面設計成下麵這個樣子 左邊顯示部分列表,點擊其中一 ...
  • [異常描述] 方法1: 新建一個包,將預設包中的類文件拖入新建包中,刷新,預設包會消失 ...
  • DB數據源之SpringBoot+MyBatis踏坑過程(二)手工配置數據源與載入Mapper.xml掃描 原創文章,版權所有,未經允許進位轉載 吐槽之後應該有所改了,該方式可以作為一種過渡方式來使用。 1.環境說明 初次使用springboot,時間有限,需要迅速搭建好架構,沒有時間研究 使用sp ...
  • c/c++ 標準庫 string 標準庫 string的小例子 test1~test10 c++ include using namespace std; int main(void){ //test1 //string s1,s2; //cin s1 s2; //cout wd){ // cout ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...