吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習

天天熬夜敲代碼 2021-09-19 01:23:44 阅读数:881

http 教程 大牛 教你 java

一、網絡編程基礎回顧

1. Socket

Socket本身有“插座”的意思,不是Java中特有的概念,而是一個語言無關的標准,任何可以實現網絡編程的編程語言都有Socket。在Linux環境下,用於錶示進程間網絡通信的特殊文件類型,其本質為內核借助緩沖區形成的偽文件。既然是文件,那麼理所當然的,我們可以使用文件描述符引用套接字。

與管道類似的,Linux系統將其封裝成文件的目的是為了統一接口,使得讀寫套接字和讀寫文件的操作一致。區別是管道主要應用於本地進程間通信,而套接字多應用於網絡進程間數據的傳遞。

可以這麼理解:Socket就是網絡上的兩個應用程序通過一個雙向通信連接實現數據交換的編程接口API。

Socket通信的基本流程具體步驟如下所示:

(1)服務端通過Listen開啟監聽,等待客戶端接入。

(2)客戶端的套接字通過Connect連接服務器端的套接字,服務端通過Accept接收客戶端連接。在connect-accept過程中,操作系統將會進行三次握手。

(3)客戶端和服務端通過writeread發送和接收數據,操作系統將會完成TCP數據的確認、重發等步驟。

(4)通過close關閉連接,操作系統會進行四次揮手。

針對Java編程語言,java.net包是網絡編程的基礎類庫。其中ServerSocketSocket是網絡編程的基礎類型。

SeverSocket是服務端應用類型。Socket是建立連接的類型。當連接建立成功後,服務器和客戶端都會有一個Socket對象示例,可以通過這個Socket對象示例,完成會話的所有操作。對於一個完整的網絡連接來說,Socket是平等的,沒有服務器客戶端分級情况。

2. IO模型介紹

對於一次IO操作,數據會先拷貝到內核空間中,然後再從內核空間拷貝到用戶空間中,所以一次read操作,會經曆兩個階段:

(1)等待數據准備

(2)數據從內核空間拷貝到用戶空間

基於以上兩個階段就產生了五種不同的IO模式。

  1. 阻塞IO:從進程發起IO操作,一直等待上述兩個階段完成,此時兩階段一起阻塞。
  2. 非阻塞IO:進程一直詢問IO准備好了沒有,准備好了再發起讀取操作,這時才把數據從內核空間拷貝到用戶空間。第一階段不阻塞但要輪詢,第二階段阻塞。
  3. 多路複用IO:多個連接使用同一個select去詢問IO准備好了沒有,如果有准備好了的,就返回有數據准備好了,然後對應的連接再發起讀取操作,把數據從內核空間拷貝到用戶空間。兩階段分開阻塞。
  4. 信號驅動IO:進程發起讀取操作會立即返回,當數據准備好了會以通知的形式告訴進程,進程再發起讀取操作,把數據從內核空間拷貝到用戶空間。第一階段不阻塞,第二階段阻塞。
  5. 异步IO:進程發起讀取操作會立即返回,等到數據准備好且已經拷貝到用戶空間了再通知進程拿數據。兩個階段都不阻塞。

這五種IO模式不難發現存在這兩對關系:同步和异步、阻塞和非阻塞。那麼稍微解釋一下:

同步和异步

  • 同步: 同步就是發起一個調用後,被調用者未處理完請求之前,調用不返回。
  • 异步: 异步就是發起一個調用後,立刻得到被調用者的回應錶示已接收到請求,但是被調用者並沒有返回結果,此時我們可以處理其他的請求,被調用者通常依靠事件,回調等機制來通知調用者其返回結果。

同步和异步的區別最大在於异步的話調用者不需要等待處理結果,被調用者會通過回調等機制來通知調用者其返回結果。

阻塞和非阻塞

  • 阻塞: 阻塞就是發起一個請求,調用者一直等待請求結果返回,也就是當前線程會被掛起,無法從事其他任務,只有當條件就緒才能繼續。
  • 非阻塞: 非阻塞就是發起一個請求,調用者不用一直等著結果返回,可以先去幹其他事情。

阻塞和非阻塞是針對進程在訪問數據的時候,根據IO操作的就緒狀態來采取的不同方式,說白了是一種讀取或者寫入操作方法的實現方式,阻塞方式下讀取或者寫入函數將一直等待,而非阻塞方式下,讀取或者寫入方法會立即返回一個狀態值。

如果組合後的同步阻塞(blocking-IO)簡稱BIO、同步非阻塞(non-blocking-IO)簡稱NIO和异步非阻塞(asynchronous-non-blocking-IO)簡稱AIO又代錶什麼意思呢?

  • BIO (同步阻塞I/O模式): 數據的讀取寫入必須阻塞在一個線程內等待其完成。這裏使用那個經典的燒開水例子,這裏假設一個燒開水的場景,有一排水壺在燒開水,BIO的工作模式就是, 叫一個線程停留在一個水壺那,直到這個水壺燒開,才去處理下一個水壺。但是實際上線程在等待水壺燒開的時間段什麼都沒有做。
  • NIO(同步非阻塞): 同時支持阻塞與非阻塞模式,但這裏我們以其同步非阻塞I/O模式來說明,那麼什麼叫做同步非阻塞?如果還拿燒開水來說,NIO的做法是叫一個線程不斷的輪詢每個水壺的狀態,看看是否有水壺的狀態發生了改變,從而進行下一步的操作。
  • AIO(异步非阻塞I/O模型): 异步非阻塞與同步非阻塞的區別在哪裏?异步非阻塞無需一個線程去輪詢所有IO操作的狀態改變,在相應的狀態改變後,系統會通知對應的線程來處理。對應到燒開水中就是,為每個水壺上面裝了一個開關,水燒開之後,水壺會自動通知我水燒開了。

java 中的 BIONIOAIO理解為是 Java 語言在操作系統層面對這三種 IO 模型的封裝。程序員在使用這些 封裝API 的時候,不需要關心操作系統層面的知識,也不需要根據不同操作系統編寫不同的代碼,只需要使用Java的API就可以了。由此,為了使讀者對這三種模型有個比較具體和遞推式的了解,並且和本文主題NIO有個清晰的對比,下面繼續延伸。

Java BIO

BIO編程方式通常是是Java的上古產品,自JDK 1.0-JDK1.4就有的東西。編程實現過程為:首先在服務端啟動一個ServerSocket來監聽網絡請求,客戶端啟動Socket發起網絡請求,默認情况下SeverSocket會建立一個線程來處理此請求,如果服務端沒有線程可用,客戶端則會阻塞等待或遭到拒絕。服務器實現模式為一個連接一個線程,即客戶端有連接請求時服務器端就需要啟動一個線程進行處理。大致結構如下:

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_Java

如果要讓 BIO 通信模型能够同時處理多個客戶端請求,就必須使用多線程(主要原因是 socket.accept()socket.read()socket.write() 涉及的三個主要函數都是同步阻塞的),也就是說它在接收到客戶端連接請求之後為每個客戶端創建一個新的線程進行鏈路處理,處理完成之後,通過輸出流返回應答給客戶端,線程銷毀。這就是典型的 一請求一應答通信模型 。我們可以設想一下如果這個連接不做任何事情的話就會造成不必要的線程開銷,不過可以通過線程池機制改善,線程池還可以讓線程的創建和回收成本相對較低。使用線程池機制改善後的 BIO 模型圖如下:

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_Java_02

BIO方式適用於連接數目比較小且固定的架構,這種方式對服務器資源要求比較高,並發局限於應用中,是JDK1.4以前的唯一選擇,但程序直觀簡單易懂。Java BIO編程示例網上很多,這裏就不進行coding舉例了,畢竟後面NIO才是重點。

Java NIO

NIO(New IO或者No-Blocking IO),從JDK1.4 開始引入的非阻塞IO,是一種非阻塞+ 同步的通信模式。這裏的No Blocking IO用於區分上面的BIO

NIO本身想解决 BIO的並發問題,通過Reactor模式的事件驅動機制來達到Non Blocking的。當 socket 有流可讀或可寫入 socket 時,操作系統會相應的通知應用程序進行處理,應用再將流讀取到緩沖區或寫入操作系統。

也就是說,這個時候,已經不是一個連接就 要對應一個處理線程了,而是有效的請求,對應一個線程,當連接沒有數據時,是沒有工作線程來處理的。

當一個連接創建後,不需要對應一個線程,這個連接會被注册到 多路複用器上面,所以所有的連接只需要一個線程就可以搞定,當這個線程中的多路複用器 進行輪詢的時候,發現連接上有請求的話,才開啟一個線程進行處理,也就是一個請求一個線程模式。

NIO提供了與傳統BIO模型中的SocketServerSocket相對應的SocketChannelServerSocketChannel兩種不同的套接字通道實現,如下圖結構所示。這裏涉及的Reactor設計模式、多路複用SelectorBuffer等暫時不用管,後面會講到。

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_後端_03

NIO 方式適用於連接數目多且連接比較短(輕操作)的架構,比如聊天服務器,並發局 限於應用中,編程複雜,JDK1.4 開始支持。同時,NIO和普通IO的區別主要可以從存儲數據的載體、是否阻塞等來區分:

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_程序員_04

Java AIO

NIO 不同,當進行讀寫操作時,只須直接調用 API 的 readwrite 方法即可。這兩種方法均為异步的,對於讀操作而言,當有流可讀取時,操作系統會將可讀的流傳入 read 方 法的緩沖區,並通知應用程序;對於寫操作而言,當操作系統將 write 方法傳遞的流寫入完畢時,操作系統主動通知應用程序。即可以理解為,read/write 方法都是异步的,完成後會主動調用回調函數。在 JDK7 中,提供了异步文件通道和异步套接字通道的實現,這部分內容被稱作 NIO.

AIO 方式使用於連接數目多且連接比較長(重操作)的架構,比如相册服務器,充分調用 OS 參與並發操作,編程比較複雜,JDK7 開始支持。

目前來說 AIO 的應用還不是很廣泛,Netty 之前也嘗試使用過 AIO,不過又放弃了。

二、NIO核心組件介紹

1. Channel

NIO中,基本所有的IO操作都是從Channel開始的,Channel通過Buffer(緩沖區)進行讀寫操作。

read()錶示讀取通道中數據到緩沖區,write()錶示把緩沖區數據寫入到通道。

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_程序員_05

Channel有好多實現類,這裏有三個最常用:

  • SocketChannel:一個客戶端發起TCP連接的Channel
  • ServerSocketChannel:一個服務端監聽新連接的TCP Channel,對於每一個新的Client連接,都會建立一個對應的SocketChannel
  • FileChannel:從文件中讀寫數據

其中SocketChannelServerSocketChannel是網絡編程中最常用的,一會在最後的示例代碼中會有講解到具體用法。

2. Buffer

概念

Buffer也被成為內存緩沖區,本質上就是內存中的一塊,我們可以將數據寫入這塊內存,之後從這塊內存中讀取數據。也可以將這塊內存封裝成NIO Buffer對象,並提供一組常用的方法,方便我們對該塊內存進行讀寫操作。

Bufferjava.nio中被定義為抽象類:

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_後端_06

我們可以將Buffer理解為一個數組的封裝,我們最常用的ByteBuffer對應的數據結構就是byte[]

屬性

Buffer中有4個非常重要的屬性:capacity、limit、position、mark

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_程序員_07

最後

 CodeChina開源項目:【一線大廠Java面試題解析+核心總結學習筆記+最新講解視頻】

吹爆這份HTTP頂級教程,字節大牛教你手撕Java學習_Java_08

版权声明:本文为[天天熬夜敲代碼]所创,转载请带上原文链接,感谢。 https://gsmany.com/2021/09/20210919012344146Y.html