一鍵導出微信讀書的書籍和筆記

来源:https://www.cnblogs.com/cloudbird/archive/2020/04/12/12683546.html
-Advertisement-
Play Games

全民閱讀的時代已經來臨,目前使用讀書軟體的用戶數2.1億,日活躍用戶超過500萬,其中19-35歲年輕用戶占比超過60%,本科及以上學歷用戶占比高達80%,北上廣深及其他省會城市/直轄市用戶占比超過80%。**本人習慣使用微信讀書,為了方便整理書籍和導出筆記,便開發了這個小工具。** ...


簡介


全民閱讀的時代已經來臨,目前使用讀書軟體的用戶數2.1億,日活躍用戶超過500萬,其中19-35歲年輕用戶占比超過60%,本科及以上學歷用戶占比高達80%,北上廣深及其他省會城市/直轄市用戶占比超過80%。本人習慣使用微信讀書,為了方便整理書籍和導出筆記,便開發了這個小工具。



部分截圖









代碼思路

1. 目錄結構

首先,我們先看一下整體目錄結構

Code
├─ excel_func.py                   讀寫excel文件
├─ pyqt_gui.py                     PyQt GUI界面
└─ wereader.py                     微信讀書相關api

  • excel_func.py
    使用xlrd和xlwt庫對excel文件進行讀寫操作

  • pyqt_gui.py
    使用PyQt繪製GUI界面

  • wereader.py
    通過抓包解析獲得相關api


2. excel_func.py

def write_excel_xls(path, sheet_name_list, value):
    # 新建一個工作簿
    workbook = xlwt.Workbook()

    # 獲取需要寫入數據的行數
    index = len(value)

    for sheet_name in sheet_name_list:

        # 在工作簿中新建一個表格
        sheet = workbook.add_sheet(sheet_name)

        # 往這個工作簿的表格中寫入數據
        for i in range(0, index):
            for j in range(0, len(value[i])):
                sheet.write(i, j, value[i][j])

    # 保存工作簿
    workbook.save(path)

該函數的代碼流程為:

  1. 創建excel文件
  2. 創建表格
  3. 往表格寫入數據


3. pyqt_gui.py

class MainWindow(QMainWindow):

    def __init__(self, *args, **kwargs):
        super().__init__(*args, **kwargs)

        self.DomainCookies = {}

        self.setWindowTitle('微信讀書助手') # 設置視窗標題
        self.resize(900, 600) # 設置視窗大小
        self.setWindowFlags(Qt.WindowMinimizeButtonHint) # 禁止最大化按鈕
        self.setFixedSize(self.width(), self.height()) # 禁止調整視窗大小

        url = 'https://weread.qq.com/#login' # 目標地址
        self.browser = QWebEngineView() # 實例化瀏覽器對象

        QWebEngineProfile.defaultProfile().cookieStore().deleteAllCookies() # 初次運行軟體時刪除所有cookies

        QWebEngineProfile.defaultProfile().cookieStore().cookieAdded.connect(self.onCookieAdd) # cookies增加時觸發self.onCookieAdd()函數
        self.browser.loadFinished.connect(self.onLoadFinished) # 網頁載入完畢時觸發self.onLoadFinished()函數

        self.browser.load(QUrl(url)) # 載入網頁
        self.setCentralWidget(self.browser) # 設置中心視窗

該函數的代碼流程為:

  1. 新建QT視窗
  2. 實例化QWebEngineView對象
  3. 綁定self.onCookieAdd事件
  4. 綁定self.onLoadFinished事件
  5. 載入網頁


    # 網頁載入完畢事件
    def onLoadFinished(self):

        global USER_VID
        global HEADERS

        # 獲取cookies
        cookies = ['{}={};'.format(key, value) for key,value in self.DomainCookies.items()]
        cookies = ' '.join(cookies)
        # 添加Cookie到header
        HEADERS.update(Cookie=cookies)

        # 判斷是否成功登錄微信讀書
        if login_success(HEADERS):
            print('登錄微信讀書成功!')

            # 獲取用戶user_vid
            if 'wr_vid' in self.DomainCookies.keys():
                USER_VID = self.DomainCookies['wr_vid']
                print('用戶id:{}'.format(USER_VID))

                # 關閉整個qt視窗
                self.close()

        else:
            print('請掃描二維碼登錄微信讀書...')

該函數的代碼流程為:

  1. 當網頁載入完畢時,檢測是否成功登錄微信讀書
  2. 如果成功登錄微信讀書,則關閉QT視窗,開始進行數據導出
  3. 如果失敗登錄微信讀書,則繼續等待用戶掃描二維碼


    # 添加cookies事件
    def onCookieAdd(self, cookie):
        if 'weread.qq.com' in cookie.domain():
            name = cookie.name().data().decode('utf-8')
            value = cookie.value().data().decode('utf-8')
            if name not in self.DomainCookies:
                self.DomainCookies.update({name: value})

該函數的代碼流程為:

  1. 保存微信讀書網址的cookies,以便後續操作


    books = get_bookshelf(USER_VID, HEADERS) # 獲取書架上的書籍
    books_finish_read = books['finishReadBooks']
    books_recent_read = books['recentBooks']
    books_all = books['allBooks']
    write_excel_xls_append(data_dir + '我的書架.xls', '已讀完的書籍', books_finish_read) # 追加寫入excel文件
    write_excel_xls_append(data_dir + '我的書架.xls', '最近閱讀的書籍', books_recent_read)  # 追加寫入excel文件
    write_excel_xls_append(data_dir + '我的書架.xls', '所有的書籍', books_all)  # 追加寫入excel文件

    # 獲取書架上的每本書籍的筆記
    for index, book in enumerate(books_finish_read):
        book_id = book[0]
        book_name = book[1]
        notes = get_bookmarklist(book[0], HEADERS)

        with open(note_dir + book_name + '.txt', 'w') as f:
            f.write(notes)
        print('導出筆記 {} ({}/{})'.format(note_dir + book_name + '.txt', index+1, len(books_finish_read)))


該函數的代碼流程為:

  1. 調用write_excel_xls_append函數,保存書籍,並且導出筆記


4. wereader.py

def get_bookshelf(userVid, headers):
    """獲取書架上所有書"""
    url = "https://i.weread.qq.com/shelf/friendCommon"
    params = dict(userVid=userVid)
    r = requests.get(url, params=params, headers=headers, verify=False)
    if r.ok:
        data = r.json()
    else:
        raise Exception(r.text)

    books_finish_read = set() # 已讀完的書籍
    books_recent_read = set() # 最近閱讀的書籍
    books_all = set() # 書架上的所有書籍


    for book in data['recentBooks']:
        if not book['bookId'].isdigit(): # 過濾公眾號
            continue
        b = Book(book['bookId'], book['title'], book['author'], book['cover'], book['intro'], book['category'])
        books_recent_read.add(b)

    books_all = books_finish_read + books_recent_read

    return dict(finishReadBooks=books_finish_read, recentBooks=books_recent_read, allBooks=books_all)

該函數的代碼流程為:

  1. 獲取最近閱讀的書籍、已經讀完的書籍、所有書籍
  2. 過濾公眾號部分
  3. 將書籍數據保存為字典格式


def get_bookmarklist(bookId, headers):
    """獲取某本書的筆記返回md文本"""
    url = "https://i.weread.qq.com/book/bookmarklist"
    params = dict(bookId=bookId)
    r = requests.get(url, params=params, headers=headers, verify=False)

    if r.ok:
        data = r.json()
        # clipboard.copy(json.dumps(data, indent=4, sort_keys=True))
    else:
        raise Exception(r.text)
    chapters = {c['chapterUid']: c['title'] for c in data['chapters']}
    contents = defaultdict(list)

    for item in sorted(data['updated'], key=lambda x: x['chapterUid']):
        # for item in data['updated']:
        chapter = item['chapterUid']
        text = item['markText']
        create_time = item["createTime"]
        start = int(item['range'].split('-')[0])
        contents[chapter].append((start, text))

    chapters_map = {title: level for level, title in get_chapters(int(bookId), headers)}
    res = ''
    for c in sorted(chapters.keys()):
        title = chapters[c]
        res += '#' * chapters_map[title] + ' ' + title + '\n'
        for start, text in sorted(contents[c], key=lambda e: e[0]):
            res += '> ' + text.strip() + '\n\n'
        res += '\n'

    return res

該函數的代碼流程為:

  1. 獲取某一本書籍的筆記
  2. 將返回的字元串改寫成markdown格式並輸出



如何運行

# 跳轉到當前目錄
cd 目錄名
# 先卸載依賴庫
pip uninstall -y -r requirement.txt
# 再重新安裝依賴庫
pip install -r requirement.txt -i https://pypi.tuna.tsinghua.edu.cn/simple
# 開始運行
python pyqt_gui.py


補充

完整版源代碼存放在github上,有需要的請點擊這裡下載

項目持續更新,歡迎您star本項目



License

The MIT License (MIT)


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 眾所周知,前端工程師的首要工作就是開發用戶界面,因此我們可以把前端工程師看做是用戶體驗的把控者。正所謂責任越大能力越大,前端工程師的工作內容也讓這一崗位需要具備更多的能力,除了精通HTML、CSS這樣的基礎知識,對前端要求更高的其實是非技術因素。下麵我們一起來看看前端工程師需要具備哪些基本素質。 1 ...
  • 1.react + axios 跨域訪問一個功能變數名稱 配置非常簡單,只需要在當前的 package.json 文件裡面配置: "proxy":"http://iot-demo-web-dev.autel.com", //當然,這裡是一個假地址 像這樣: 這樣跨域便完成了,當然,也可以像網上那樣,多幾段代 ...
  • 根據上上篇的鍵盤ui界面我添加了一個輸入框讓鍵盤有了輸入效果如下 界面代碼可以去上上篇看: https://www.cnblogs.com/2979100039-qq-con/p/12641603.html 這那個代碼基礎上加了一個輸入框,在把鍵盤縮放0.7倍就可以了 接下重點是js代碼同樣用的是j ...
  • 自己製作單選框樣式: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <meta name="viewport" content="width=device-width, initial-scale=1.0"> <titl ...
  • 申明:本文轉載至:https://github.com/dawn-plex/translate/blob/master/articles/5-Tips-to-Write-Better-Conditionals-in-JavaScript.md 感謝作者,感謝分享 原文地址:5 Tips to Wri ...
  • 最近看到一個有意思的圖片,包含了鮮為人知的秘密。。。 先看看這張有意思的圖片。 圖左應該講的是基督教中的三位一體。翻譯成中文如下。 當然這不是我們的重點,我們的重點在右邊這個圖。講的是js中相等操作。 是js中的寬鬆相等(loose equals)。 是嚴格相等(strict equals)。 這兩 ...
  • thrift類似java裡面的socket和sockchannel中server和client通信 thrift最重要的是跨語言,裡面提供了序列化和反序列化、json和實體對象等方法 Apache Thrift軟體框架(用於可擴展的跨語言服務開發)將軟體堆棧與代碼生成引擎結合在一起,以構建可在C++ ...
  • 作為一個碼農,你知道如何啟動一個java線程嗎? 啟動線程 public class PrintThread extends Thread { public void run() { System.out.println("我是線程! 繼承自Thread"); } public static voi ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...