【java+selenium】網易雲音樂刷累計聽歌數

来源:https://www.cnblogs.com/w-y-c-m/archive/2019/03/27/10605198.html
-Advertisement-
Play Games

背景 應該是在去年的時候，刷知乎看到一個問題，大概是說怎麼刷網易雲音樂個人累計聽歌數，然後有一個高贊回答，貼了一段js代碼，直接在瀏覽器console執行就可以了。當時試了下，直接一下子刷了有好幾萬。悲劇的是，第二天又回到原來的樣子了，很明顯這種方式被網易雲音樂發現封掉了。而且後續網易雲還針對累計聽 ...


背景

應該是在去年的時候，刷知乎看到一個問題，大概是說怎麼刷網易雲音樂個人累計聽歌數，然後有一個高贊回答，貼了一段js代碼，直接在瀏覽器console執行就可以了。當時試了下，直接一下子刷了有好幾萬。悲劇的是，第二天又回到原來的樣子了，很明顯這種方式被網易雲音樂發現封掉了。而且後續網易雲還針對累計聽歌數加了一些限制，每天最多增加300首。今天帶來一種通過java+selenium的方式，自動播放歌曲，來達到刷累計聽歌數的效果。另外藉助這個demo，對selenium的使用更加熟悉，也算是爬蟲應用中一些有趣的東西了。

思路

  • 登錄，有以下兩種方式可以選擇： a. 模擬web端的登錄過程。優點：這種方式更加通用，便於動態切換賬號。缺點：比直接使用cookie稍微麻煩一些，並且有一定幾率會出現圖形驗證碼，需要考慮這種情況。

    b. 設置cookie。優點：不用處理登錄過程，比較簡單方便，在cookie的過期時間比較長情況下還是比較方便的，不用頻繁切換。缺點：切換賬號比較麻煩，不能達到自動化。我這裡選擇的該方式。

  • 播放：上一個步驟中登錄成功後，直接打開歌單列表頁面。如下圖，在歌單列表頁面可以看到。有3個地方是可以點擊播放的，我最先想到是最下麵一個播放按鈕，然後一直保持底部播放組件的顯示，實時獲取播放的動態。嘗試通過模擬點擊播放按鈕，始終不成功，最終點擊最上面的播放按鈕可以播放的。

  • 獲取播放動態：為了確定播放是否在正常進行，可以通過實時獲取個人home頁面的累計聽歌數相關信息，用於監控，由於已經有一個頁面在播放歌曲了，為了不影響原有播放歌曲的頁面，可以打開一個新的tab頁來獲取個人home頁面，打開新的table頁，這裡採用js的方式window.open('about:blank')。最終都會看到如下類似如下格式日誌，那就說明成功了：
2019-03-26 09:25:10,406 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-00:00 / 00:00---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:16,817 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:00 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:23,157 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:06 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:29,394 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:13 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:35,592 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:19 / 07:19---當前播放第1首歌曲, 累計聽歌:20572
2019-03-26 09:25:41,974 INFO [,main] - [com.github.wycm.Music163] - 伊犁河畔-01:25 / 07:19---當前播放第1首歌曲, 累計聽歌:20572

完整代碼

package com.github.wycm;

import org.openqa.selenium.*;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

import java.util.*;
import java.util.concurrent.TimeUnit;
import java.util.regex.Matcher;
import java.util.regex.Pattern;

/**
 * Created by wycm
 */
public class Music163 {
    private static Logger logger = LoggerFactory.getLogger(Music163.class);

    //拷貝登錄成功的瀏覽器原始cookie
    private final static String RAW_COOKIES = "cookie1=value1; cookie2=value2";
    private final static String CHROME_DRIVER_PATH = "/Users/wangyang/Downloads/chromedriver";
    //歌曲列表id
    private static String startId = "22336453";
    
    
    private static String userId = null;
    private static Set<String> playListSet = new HashSet<>();
    private static Pattern pattern = Pattern.compile("<span class=\"j-flag time\"><em>(.*?)</em>(.*?)</span>");
    private static Pattern songName = Pattern.compile("class=\"f-thide name fc1 f-fl\" title=\"(.*?)\"");
    private static ChromeOptions chromeOptions = new ChromeOptions();
    private static WebDriver driver = null;
    static {
        System.setProperty("webdriver.chrome.driver", CHROME_DRIVER_PATH);
        chromeOptions.addArguments("--no-sandbox");
    }
    public static void main(String[] args) throws InterruptedException {
        while (true){
            try {
                driver = new ChromeDriver(chromeOptions);
                playListSet.add(startId);
                invoke();
            } catch (Exception e){
                logger.error(e.getMessage(), e);
            } finally {
                driver.quit();
            }
            Thread.sleep(1000 * 10);
        }
    }

    /**
     * 初始化cookies
     */
    private static void initCookies(){
        Arrays.stream(RAW_COOKIES.split("; ")).forEach(rawCookie -> {
            String[] ss = rawCookie.split("=");
            Cookie cookie = new Cookie.Builder(ss[0], ss[1]).domain(".163.com").build();
            driver.manage().addCookie(cookie);
        });
    }
    private static void invoke() throws InterruptedException {
        driver.manage().timeouts().implicitlyWait(5, TimeUnit.SECONDS);
        driver.manage().timeouts().pageLoadTimeout(15, TimeUnit.SECONDS);
        String s = null;
        driver.get("http://music.163.com/");
        initCookies();
        driver.get("http://music.163.com/");
        s = driver.getPageSource();
        userId = group(s, "userId:(\\d+)", 1);
        driver.get("https://music.163.com/#/playlist?id=" + startId);
        driver.switchTo().frame("contentFrame");
        WebElement element = driver.findElement(By.cssSelector("[id=content-operation]>a:first-child"));
        element.click();
        ((JavascriptExecutor) driver).executeScript("window.open('about:blank')");
        ArrayList<String> tabs = new ArrayList<String>(driver.getWindowHandles());
        driver.switchTo().window(tabs.get(0));
        driver.switchTo().defaultContent();
        int i = 0;
        String lastSongName = "";
        int count = 0;
        while (true){
            if(i > Integer.MAX_VALUE - 2){
                break;
            }
            i++;
            s = driver.getPageSource();
            driver.switchTo().window(tabs.get(1)); //switches to new tab
            String songs = null;
            try{
                driver.get("https://music.163.com/user/home?id=" + userId);
                driver.switchTo().frame("contentFrame");
                songs = group(driver.getPageSource(), "累積聽歌(\\d+)首", 1);
            } catch (TimeoutException e){
                logger.error(e.getMessage(), e);
            }
            driver.switchTo().window(tabs.get(0));
            Matcher matcher = pattern.matcher(s);
            Matcher songNameMatcher = songName.matcher(s);
            if (matcher.find() && songNameMatcher.find()){
                String songNameStr = songNameMatcher.group(1);
                if (!songNameStr.equals(lastSongName)){
                    count++;
                    lastSongName = songNameStr;
                }
                logger.info(songNameStr + "-" + matcher.group(1) + matcher.group(2) + "---當前播放第" + count + "首歌曲, 累計聽歌:" + songs);
            } else {
                logger.info("解析歌曲播放記錄或歌曲名失敗");
            }
            Thread.sleep(1000 * 30);
        }
    }
    public static String group(String str, String regex, int index) {
        Pattern pattern = Pattern.compile(regex);
        Matcher matcher = pattern.matcher(str);
        return matcher.find() ? matcher.group(index) : "";
    }
}

運行註意事項

  • 修改自己相關chromedriver路徑配置
  • 登錄自己的web端網易雲音樂：https://music.163.com/
  • 複製自己登錄成功的原始cookies，至代碼中的RAW_COOKIES欄位
  • 切換歌單，如果預設的歌單播放完成後，可以搜索一些沒有播放過的歌單，類似https://music.163.com/#/playlist?id=22336453的url，提取出id，直接替換代碼中的startId欄位。

總結

  • 大家可能會有疑問，我想把這個任務放到自己的伺服器上直接後臺運行。這就是伺服器上搭建selenium運行環境的問題了，可以參考我上一篇文章。阿裡雲和騰訊雲最低配的伺服器都能夠跑起來的。

  • 另外這裡為啥採用selenium的方式，有沒有其他更簡單的方式，直接通過簡單的Http請求的方式達到刷的效果。我個人嘗試過像通過純http 請求的方式，找到增加個人累計聽歌數的請求，由於網銀雲的請求都做了加密，最終沒有找到。所以就用selenium的方式來代替。

    最後

  • 完整工程代碼見:https://github.com/wycm/crawler-set/tree/master/music163

版權聲明
作者：wycm
出處：https://my.oschina.net/wycm/blog/3023967
您的支持是對博主最大的鼓勵，感謝您的認真閱讀。
本文版權歸作者所有，歡迎轉載，但未經作者同意必須保留此段聲明，且在文章頁面明顯位置給出原文連接，否則保留追究法律責任的權利。
一個程式員日常分享，包括但不限於爬蟲、Java後端技術，歡迎關註


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 聊聊在AOP模式下的緩存方案
    面向方法的數據集緩存 使用了autofac做為ioc容器，使用Autofac.Extras.DynamicProxy2作為方法攔截器，緩存面向方法，直接在方法上添加CachingAttribute特性即可。 緩存註冊流程 1. 關於方法攔截器 1. 緩存名稱設計 1. 添加ioc 1. 添加攔截器與 ...
  • BUAA OO 2019 第一單元作業總結
    [TOC] 總 本博文是2019年北航面向對象（OO）課程第一單元作業（多項式求導）的總結。三次作業的要求大致如下： 第一次作業：簡單冪函數的求導，如 $1 + x^5 + 4 x^3$ 第二次作業：簡單冪函數和簡單正餘弦函數的求導，如 $ 5 sin(x)^2+5 cos(x) cos(x)+12 ...
  • 關於Java中構造方法的問題以及回答
    構造方法 概念： 又叫 構造器，區分於傳統的方法，是一個在創建對象時被系統自動調用的特殊方法 作用： 一：為對象進行初始化（成員變數）的工作 二：為對象在堆記憶體中開闢獨立的記憶體空間 定義格式： 訪問修飾符 方法名(){ } 用法： 只能通過new關鍵字進行調用 註意事項： 一：方法名必須和類名保持一 ...
  • 2019北航OO第一單元作業總結
    一、前三次作業內容分析總結 前言 前三次作業，我提交了三次，但是有效作業只有兩次，最後一次作業沒能實現多項式求導的基本功能因此無疾而終，反思留給後文再續，首先我介紹一下這三次作業，三次作業圍繞著多項式求導展開，輸出目的都是一致的，即對輸入的多項式進行求導，將求導結果列印到顯示屏，作業難度遞增，每一次 ...
  • 掃描二維碼登錄實現原理分析
    記得比較早使用手機掃碼登錄是網頁版微信，這種免去輸入繁瑣的賬號密碼，拿起手機掃一掃就可以登錄的方式一開始還是比較驚艷的，確實使用起來很方便。 那它是如何實現的呢？我們來簡單研究下。（以淘寶網二維碼登錄為例） 首先，任何一個二維碼表示的都是一串字元串。 我們打開淘寶登錄頁面： "https://log ...
  • OO第一單元總結
    第一次作業 第一次作業需要完成的任務為簡單多項式導函數的求解。 思路 因為僅僅是簡單多項式的求導，所以求導本身沒有什麼可說的，直接套用冪函數的求導公式就行了，主要的精力是花在了正則表達式上。這裡推薦兩個網站： https://github.com/ziishaned/learn regex http ...
  • 第一單元總結
    第一單元總結 作業總結 一 程式結構分析 ​ 因為在此之前並沒有接觸過 java 語言或者是與之相似的語言, 而不用說 OO 的概念, 所以一切都是全新的. 開始的時候腦子並沒有任何面向對象的概念, 類這個概念僅僅建立在 C 語言的某個 .c 文件之上, 簡單地認為 java 中的類就是 C 中的 ...
  • BUAAOO-First-Summary
    目錄 homework & class & trainning : 兩次上機、三次作業、四周課堂 code analysis & review : 為什麼我沒有bug 黑盒測試和白盒測試 OO 設計感言 Scanning: Creational Pattern & Multithreading 一、 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類