7. 彤哥說netty系列之Java NIO核心組件之Selector

来源:https://www.cnblogs.com/tong-yuan/archive/2019/12/05/11992860.html
-Advertisement-
Play Games

——日拱一卒,不期而至! 你好,我是彤哥,本篇是netty系列的第七篇。 簡介 上一章我們一起學習了Java NIO的核心組件Buffer,它通常跟Channel一起使用,但是它們在網路IO中又該如何使用呢,今天我們將一起學習另一個NIO核心組件—— Selector ,沒有它可以說就乾不起來網路I ...


——日拱一卒,不期而至!

nio

你好,我是彤哥,本篇是netty系列的第七篇。

簡介

上一章我們一起學習了Java NIO的核心組件Buffer,它通常跟Channel一起使用,但是它們在網路IO中又該如何使用呢,今天我們將一起學習另一個NIO核心組件——Selector,沒有它可以說就乾不起來網路IO。

概念

我們先來看兩段Selector的註釋,見類java.nio.channels.Selector

註釋I

A multiplexor of {@link SelectableChannel} objects.

它是SelectableChannel對象的多路復用器,從這裡我們也可以知道Java NIO實際上是多路復用IO。

SelectableChannel有幾個子類,你會非常熟悉:

  • DatagramChannel,UDP協議連接
  • SocketChannel,TCP協議連接
  • ServerSocketChannel,專門處理TCP協議Accept事件

我們有必要複習一下多路復用IO的流程

multiplexing-io

第一階段通過select去輪詢檢查有沒有連接準備好數據,第二階段把數據從內核空間拷貝到用戶空間。

在Java中,就是通過Selector這個多路復用器來實現第一階段的。

註釋II

A selector may be created by invoking the {@link #open open} method of this class, which will use the system's default {@link java.nio.channels.spi.SelectorProvider selector provider} to create a new selector. A selector may also be created by invoking the {@link java.nio.channels.spi.SelectorProvider#openSelector openSelector} method of a custom selector provider. A selector remains open until it is closed via its {@link #close close} method.

Selector可以通過它自己的open()方法創建,它將通過預設的java.nio.channels.spi.SelectorProvider類創建一個新的Selector。也可以通過實現java.nio.channels.spi.SelectorProvider類的抽象方法openSelector()來自定義實現一個Selector。Selector一旦創建將會一直處於open狀態直到調用了close()方法為止。

那麼,預設使用的Selector究竟是哪個呢?

通過跟蹤源碼:

> java.nio.channels.Selector#open()
  1> java.nio.channels.spi.SelectorProvider#provider()
    1.1> sun.nio.ch.DefaultSelectorProvider#create() // 返回WindowsSelectorProvider
  2> sun.nio.ch.WindowsSelectorProvider#openSelector() // 返回WindowsSelectorImpl

可以看到,在Windows平臺下,預設實現的Provider是WindowsSelectorProvider,它的openSelector()方法返回的是WindowsSelectorImpl,它就是Windows平臺預設的Selector實現。

為什麼要提到在Windows平臺呢,難道在Linux下麵實現不一樣?

是滴,因為網路IO是跟操作系統息息相關的,不同的操作系統的實現可能都不一樣,Linux下麵JDK的實現完全不一樣,那麼我們為什麼沒有感知到呢?我的代碼在Windows下麵寫的,拿到Linux下麵不是一樣運行?那是Java虛擬機(或者說Java運行時環境)幫我們把這個事幹了,它屏蔽了跟操作系統相關的細節,這也是Java代碼可以“Write Once, Run Anywhere”的精髓所在。

Selector與Channel的關係

上面我們說了selector是多路復用器,它是在網路IO的第一階段用來輪詢檢查有沒有連接準備好數據的,那麼它和Channel是什麼關係呢?

nio

Selector通過不斷輪詢的方式同時監聽多個Channel的事件,註意,這裡是同時監聽,一旦有Channel準備好了,它就會返回這些準備好了的Channel,交給處理線程去處理。

所以,在NIO編程中,通過Selector我們就實現了一個線程同時處理多個連接請求的目標,也可以一定程式降低伺服器資源的消耗。

基本用法

創建Selector

通過調用Selector.open()方法是我們常用的方式:

Selector selector = Selector.open();

當然,也可以通過實現java.nio.channels.spi.SelectorProvider.openSelector()抽象方法自定義一個Selector。

將Channel註冊到Selector上

為了將Channel跟Selector綁定在一起,需要將Channel註冊到Selector上,調用Channel的register()方法即可:

channel.configureBlocking(false);

SelectionKey key = channel.register(selector, SelectionKey.OP_READ);

Channel必須是非阻塞模式才能註冊到Selector上,所以,無法將一個FileChannel註冊到Selector,因為FileChannel沒有所謂的阻塞還是非阻塞模式,本文來源於工從號彤哥讀源碼。

註冊的時候第二個參數傳入的是監聽的事件,一共有四種事件:

  • Connect
  • Accept
  • Read
  • Write

當Channel觸發了某個事件,通常也叫作那個事件就緒了。比如,數據準備好可以讀取了就叫作讀就緒了,同樣地,還有寫就緒、連接就緒、接受就緒,當然後面兩個不常聽到。

在Java中,這四種監聽事件是定義在SelectionKey中的:

  • SelectionKey.OP_READ,值為 1 << 0 = 0000 0001
  • SelectionKey.OP_WRITE,值 為 1 << 2 = 0000 0100
  • SelectionKey.OP_CONNECT,值為 1 << 3 = 0000 1000
  • SelectionKey.OP_ACCEPT,值為 1 << 4 = 0001 0000

所以,也可以通過位或命令監聽多個感興趣的事件:

int interestSet = SelectionKey.OP_READ | SelectionKey.OP_WRITE;

SelectionKey

正如上面所看到的,Channel註冊到Selector後返回的是一個SelectionKey,所以SelectionKey又可以看作是Channel和Selector之間的一座橋梁,把兩者綁定在了一起。

SelectionKey具有以下幾個重要屬性:

  • interest set,感興趣的事件集
  • ready set,就緒的事件集
  • 保存著的Channel
  • 保存著的Selector
  • attached object,附件

interest set

裡面保存了註冊Channel到Selector時傳入的第二個參數,即感興趣的事件集。

int interestSet = selectionKey.interestOps();

boolean isInterestedInAccept  = interestSet & SelectionKey.OP_ACCEPT;
boolean isInterestedInConnect = interestSet & SelectionKey.OP_CONNECT;
boolean isInterestedInRead    = interestSet & SelectionKey.OP_READ;
boolean isInterestedInWrite   = interestSet & SelectionKey.OP_WRITE;    

可以通過位與運算查看是否註冊了相應的事件。

ready set

裡面保存了就緒了的事件集。

int readySet = selectionKey.readyOps();
selectionKey.isAcceptable();
selectionKey.isConnectable();
selectionKey.isReadable();
selectionKey.isWritable();

可以通過readyOps()方法獲取所有就緒了的事件,也可以通過isXxxable()方法檢查某個事件是否就緒。

保存的Channel和Selector

Channel  channel  = selectionKey.channel();

Selector selector = selectionKey.selector();    

通過channel()selector()方法可以獲取綁定的Channel和Selector。

attachment

可以調用attach(obj)方法綁定一個對象到SelectionKey上,併在後面需要用到的時候通過attachment()方法取出綁定的對象,也可以翻譯為附件,它可以看作是數據傳遞的一種媒介,跟ThreadLocal有點類似,在前面綁定數據,在後面使用。

selectionKey.attach(theObject);

Object attachedObj = selectionKey.attachment();

當然,也可以在註冊Channel到Selector的時候就綁定附件:

SelectionKey key = channel.register(selector, SelectionKey.OP_READ, theObject);

Selector.select()

一旦將一個或多個Channel註冊到Selector上了,我們就可以調用它的select()方法了,它會返回註冊時感興趣的事件中就緒的事件,本文來源於工從號彤哥讀源碼。

select()方法有三種變體:

  • select(),無參數,阻塞直到某個Channel有就緒的事件了才返回(當然是我們註冊的感興趣的事件)
  • select(timeout),帶超時,阻塞直到某個Channel有就緒的事件了,或者超時了才返回
  • selectNow(),立即返回,不會阻塞,不管有沒有就緒的Channel都立即返回

select()的返回值為int類型,表示兩次select()之間就緒的Channel,即使上一次調用select()時返回的就緒Channel沒有被處理,下一次調用select()也不會再返回上一次就緒的Channel。比如,第一次調用select()返回了一個就緒的Channel,但是沒有處理它,第二次調用select()時又有一個Channel就緒了,那也只會返回1,而不是2。

Selector.selectedKeys()

一旦調用select()方法返回了有就緒的Channel,我們就可以使用selectedKeys()方法來獲取就緒的Channel了。

Set<SelectionKey> selectedKeys = selector.selectedKeys();    

然後,就可以遍歷這些SelectionKey來查看感興趣的事件是否就緒了:

Set<SelectionKey> selectedKeys = selector.selectedKeys();

Iterator<SelectionKey> keyIterator = selectedKeys.iterator();

while(keyIterator.hasNext()) {
    
    SelectionKey key = keyIterator.next();

    if(key.isAcceptable()) {
        // a connection was accepted by a ServerSocketChannel.

    } else if (key.isConnectable()) {
        // a connection was established with a remote server.

    } else if (key.isReadable()) {
        // a channel is ready for reading

    } else if (key.isWritable()) {
        // a channel is ready for writing
    }

    keyIterator.remove();
}

最後,一定要記得調用keyIterator.remove();移除已經處理的SelectionKey。

Selector.wakeup()

前面我們說了調用select()方法時,調用者線程會進入阻塞狀態,直到有就緒的Channel才會返回。其實也不一定,wakeup()就是用來破壞規則的,可以在另外一個線程調用wakeup()方法強行喚醒這個阻塞的線程,這樣select()方法也會立即返回。

如果調用wakeup()時並沒有線程阻塞在select()上,那麼,下一次調用select()將立即返回,不會進入阻塞狀態。這跟LockSupport.unpark()方法是比較類似的。

Selector.close()

調用close()方法將會關閉Selector,同時也會將關聯的SelectionKey失效,但不會關閉Channel。

舉個慄子

nio

public class EchoServer {
    public static void main(String[] args) throws IOException {
        // 創建一個Selector
        Selector selector = Selector.open();
        // 創建ServerSocketChannel
        ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
        // 綁定8080埠
        serverSocketChannel.bind(new InetSocketAddress(8080));
        // 設置為非阻塞模式,本文來源於工從號彤哥讀源碼
        serverSocketChannel.configureBlocking(false);
        // 將Channel註冊到selector上,並註冊Accept事件
        serverSocketChannel.register(selector, SelectionKey.OP_ACCEPT);

        while (true) {
            // 阻塞在select上
            selector.select();

            // 如果使用的是select(timeout)或selectNow()需要判斷返回值是否大於0

            // 有就緒的Channel
            Set<SelectionKey> selectionKeys = selector.selectedKeys();
            // 遍歷selectKeys
            Iterator<SelectionKey> iterator = selectionKeys.iterator();
            while (iterator.hasNext()) {
                SelectionKey selectionKey = iterator.next();
                // 如果是accept事件
                if (selectionKey.isAcceptable()) {
                    // 強制轉換為ServerSocketChannel
                    ServerSocketChannel ssc = (ServerSocketChannel) selectionKey.channel();
                    SocketChannel socketChannel = ssc.accept();
                    System.out.println("accept new conn: " + socketChannel.getRemoteAddress());
                    socketChannel.configureBlocking(false);
                    // 將SocketChannel註冊到Selector上,並註冊讀事件
                    socketChannel.register(selector, SelectionKey.OP_READ);
                } else if (selectionKey.isReadable()) {
                    // 如果是讀取事件
                    // 強制轉換為SocketChannel
                    SocketChannel socketChannel = (SocketChannel) selectionKey.channel();
                    // 創建Buffer用於讀取數據
                    ByteBuffer buffer = ByteBuffer.allocate(1024);
                    // 將數據讀入到buffer中
                    int length = socketChannel.read(buffer);
                    if (length > 0) {
                        buffer.flip();
                        byte[] bytes = new byte[buffer.remaining()];
                        // 將數據讀入到byte數組中
                        buffer.get(bytes);

                        // 換行符會跟著消息一起傳過來
                        String content = new String(bytes, "UTF-8").replace("\r\n", "");
                        if (content.equalsIgnoreCase("quit")) {
                            selectionKey.cancel();
                            socketChannel.close();
                        } else {
                            System.out.println("receive msg: " + content);
                        }
                    }
                }
                iterator.remove();
            }
        }
    }
}

總結

今天我們學習了Java NIO核心組件Selector,到這裡,NIO的三個最重要的核心組件我們就學習完畢了,說實話,NIO這塊最重要的還是思維的問題,時刻記著在NIO中一個線程是可以處理多個連接的。

看著Java原生NIO實現網路編程似乎也沒什麼困難的嗎?那麼為什麼還要有Netty呢?下一章我們將正式進入Netty的學習之中,我們將在其中尋找答案。

最後,也歡迎來我的工從號彤哥讀源碼系統地學習源碼&架構的知識。

nio


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 一、寫在前頭 接到某廠電話問什麼是事件代理的時候,一開始說addEventListener,然後他說直接綁定新的元素不會報dom不存在的錯誤嗎?然後我就混亂了,我印象中這個方法是可以綁定新節點的。後面才知道,原來他要考察的是事件委托(代理)的原理,他指的是未來還不清楚會創建多少個節點,所以沒辦法實現 ...
  • 首先是typeorm的官方地址, 國內有人翻了中文版,不保證時效性 ·通過npm安裝下列包: typeorm //typeorm連接資料庫 @types/node //類型系統 typescript //ts基礎 oracledb //oracle基礎 ts-node //nodejs編譯運行ts的 ...
  • 慕課網 實戰班 就業班 2019年12月5號 更新資料整理 300套 百度網盤資料鏈接: 鏈接:https://pan.baidu.com/s/1qORPsgM6ukDPOSjU5ck5yA提取碼:qnlu複製這段內容後打開百度網盤手機App,操作更方便哦 微雲鏈接: https://docs.qq ...
  • 從 2004 年發佈 1.0 版本開始,Spring 目前已經演進至 5.x 版本了,為不同時期的應用開發提供了強有力的支撐。現在我們正面對微服務、DevOps、雲計算這些新的挑戰,Spring 家族的新生力量 Spring Cloud 又將給我們提供哪些方面的支撐呢? ...
  • Spring Cloud,它將幫我們填平橫跨在應用開發與微服務、DevOps、雲計算之間的溝壑,讓我們輕鬆擁抱雲上微服務,但你知道它是如何做到的嗎?你對它有全面的瞭解嗎?你知道如何正確使用它嗎?新概念新技術層出不窮,讓人雲里霧裡,你是否想撥開雲霧對它們有更清晰的認知? ...
  • 類的變數分成2種: 1、成員變數 概念:在構造方法中的變數,前面帶有self 作用:可以在類中不同的方法間使用 2、類變數-靜態變數 概念:在類中,構造方法和普通方法之外,定義的變數 作用: 1、調用 1、類名可以調用 類名.類變數 2、對象名也可以調用 對象名.類變數 ... ...
  • 原鏈接:https://zhuanlan.zhihu.com/p/73001806 在使用PC時與PC交互的主要途徑是看屏幕顯示、聽聲音,點擊滑鼠和敲鍵盤等等。在自動化辦公的趨勢下,繁瑣的工作可以讓程式自動完成。比如自動化測試、自動下單交易等。很多軟體除了可以GUI方式操作外還可以用CLI介面操作, ...
  • IO概述 當我們在生活中把電腦上的數據拷貝到U盤或者硬碟上時,就是進行數據傳輸,按照數據的流動方向,我們分為輸入(input)和輸出(output),即就是所謂IO流 Java中I/O操作主要是指使用 java.io 包下的內容,進行輸入、輸出操作。輸入也叫做讀取數據,輸出也叫做作寫出數據 IO的分 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...