Java網絡編程：Java網絡編程基礎

轉自： https://www.cnblogs.com/midiyu/p/7875574.html

關於網絡

網絡協議

如同人與人之間相互交流是需要遵循一定的規矩一樣，計算機之間能夠進行相互通信是因為它們都共同遵守一定的規則，即網絡協議。

網絡體系結構

計算機網絡是個復雜的系統，按照人們解決復雜問題的方法，把計算機網絡實現的功能分到不同的層次上，層與層之間用接口連接。通信的雙方具有相同的層次，層次實現的功能由協議數據單元(PDU)來描述。不同系統中的同一層構成對等層，對等層之間通過對等層協議進行通信，理解彼此定義好的規則和約定。

計算機網絡體系結構是計算機網絡層次和協議的集合，網絡體系結構對計算機網絡實現的功能，以及網絡協議、層次、接口和服務進行了描述，但並不涉及具體的實現。接口是同一節點內相鄰層之間交換信息的連接處，也叫服務訪問點(SAP)。

計算機網絡層次模型

 

OSI參考模型

 前面我們介紹了計算機網絡的體系結構，因為計算機網絡是個復雜的系統，所以把計算機網絡實現的功能分到不同的層次上，而計算機網絡體系結構是計算機網絡層次和協議的集合。那么，計算機網絡如何進行分層呢？下面先介紹的是OSI參考模型。

 OSI模型把網絡通信的工作分為7層，分別是物理層、數據鏈路層、網絡層、傳輸層、會話層、表示層和應用層。

OSI參考模型的7個層次

OSI模型層次功能

物理層

　　物理層處於OSI的最底層，是整個開放系統的基礎。物理層設計通信信道上傳輸的原始比特流（bits），它的功能主要是為數據段設備提供傳送數據的通路以及傳輸數據。

數據鏈路層

　　 數據鏈路層的主要任務是實現計算機網絡中相鄰節點之間的可靠傳輸，把原始的、有差錯的物理傳輸線路加上數據鏈路協議之后，構成邏輯上可靠地數據鏈路。需要完成的功能有鏈路管理、成幀、差錯控制以及流量控制等。其中成幀是對物理層的原始比特流進行界定，數據鏈路層也能夠對幀的丟失進行處理。

網絡層

　　網絡層涉及源主機節點到目的主機主機節點之間可靠地網絡傳輸，它需要完成的功能主要包括路由選擇、網絡尋址、流量控制、擁塞控制、網絡互連等。

傳輸層

　　傳輸層起着承上啟下的作用，涉及源端節點到目的端節點之間可靠的信息傳輸。傳輸層需要解決跨越網絡連接的建立和釋放，對底層不可靠的網絡，建立連接時需要三次握手，釋放連接時需要四次揮手。

會話層

　　會話層的主要功能負責應用層序之間建立、維持和中斷會話。同時也提供對設備和節點之間的會話控制，協調系統和服務之間的交流，並通過提供單工、半雙工和全雙工3種不同的通信方式，使系統和服務之間有序地進行通信。

表示層

　　表示層關心所傳輸數據信息的格式定義，其主要功能是把應用層提供的信息變換為能夠共同理解的形式，提供字符代碼、數據格式、控制信息格式、加密等的統一表示。

應用層

　　應用層為OSI的最高層，是直接為應用進程提供服務的。其作用是在實現多個系統應用進程相互通信的同時，完成一系列業務處理所需的服務。

 

TCP/IP 參考模型

OSI參考模型的初衷是提供全世界范圍的計算機網絡都要遵循的統一標准，但是由於存在模型和協議自身的缺陷，遲遲沒有成熟的產品推出。TCP/IP協議在實踐中不斷完善和發展取得成功，作為網絡的基礎，Internet的語言，可以說沒有TCP/IP協議就沒有互聯網的今天。

TCP/IP，即Transmission Control Protocol/Internet Protocol的簡寫，中譯名為傳輸控制協議/因特網互聯協議，是Internet最基本的協議、Internet國際互聯網絡的基礎。

TCP/IP協議是一個開放的網絡協議簇，它的名字主要取自最重要的網絡層IP協議和傳輸層TCP協議。TCP/IP協議定義了電子設備如何連入因特網，以及數據如何在它們之間傳輸的標准。

TCP/IP參考模型采用4層的層級結構，每一層都呼叫它的下一層所提供的協議來完成自己的需求，這4個層次分別是：網絡接口層、互聯網層(IP層)、傳輸層(TCP層)、應用層。

OSI 和 TCP/IP模型對比

 TCP/IP 模型層次功能

網絡接口層

　　TCP/IP協議對網絡接口層沒有給出具體的表述，網絡接口層對應着物理層和數據鏈路層。一般來說，五層TCP/IP模型網絡接口層是分為物理層和數據鏈路層。 

網絡互連層（IP層）

　　互聯網層是整個TCP/IP協議棧的核心。它的功能是把分組發往目標網絡或主機。同時，為了盡快地發送分組，可能需要沿不同的路徑同時進行分組傳遞。因此，分組到達的順序和發送的順序可能不同，這就需要上層必須對分組進行排序。互聯網層除了需要完成路由的功能外，也可以完成將不同類型的網絡（異構網）互連的任務。除此之外，互聯網層還需要完成擁塞控制的功能。

傳輸層（TCP層）

　　TCP層負責在應用進程之間建立端到端的連接和可靠通信，它只存在與端節點中。TCP層涉及兩個協議，TCP和UDP。　　　

　　其中，TCP協議提供面向連接的服務，提供按字節流的有序、可靠傳輸，可以實現連接管理、差錯控制、流量控制、擁塞控制等。　　　

　　UDP協議提供無連接的服務，用於不需要或無法實現面向連接的網絡應用中。

應用層　　 

　　應用層為Internet中的各種網絡應用提供服務。

 

常見網絡協議

上面主要介紹了OSI參考模型和TCP/IP模型的相關內容，從下面這張圖可以看出TCP/IP協議簇中不同的層次中有着很多不同的網絡協議，下面主要介紹傳輸層的TCP、UDP協議和應用層的HTTP協議。

(一)TCP協議

 簡介

TCP（Transmission Control Protocol ，傳輸控制協議）是面向連接的傳輸層協議。TCP層是位於IP層之上，應用層之下的中間層。 

不同主機的應用層之間經常需要可靠的、像管道一樣的連接，但是IP層不提供這樣的流機制，而是提供不可靠的包交換。

TCP協議采用字節流傳輸數據。

TCP報文段格式

TCP報文段包括協議首部和數據兩部分，協議首部的固定部分有20個字節，首部的固定部分后面是選項部分。 

TCP報文段

 下面是報文段首部各個字段的含義。

1. 源端口號以及目的端口號，各占2個字節，端口是傳輸層和應用層的服務接口，用於尋找發送端和接收端的進程，一般來講，通過端口號和IP地址，可以唯一確定一個TCP連接，在網絡編程中，通常被稱為一個socket接口。
2. 序號，占4字節，用來標識從TCP發送端向TCP接收端發送的數據字節流。
3. 確認序號，占4字節，包含發送確認的一端所期望收到的下一個序號，因此，確認序號應該是上次已經成功收到數據字節序號加1.
4. 數據偏移，占4位，用於指出TCP首部長度，若不存在選項，則這個值為20字節，數據偏移的最大值為60字節。
5. 保留字段占6位，暫時可忽略，值全為0
6. 標志位
   URG（緊急） : 為1時表明緊急指針字段有效
   ACK（確認）：為1時表明確認號字段有效
   PSH（推送）：為1時接收方應盡快將這個報文段交給應用層
   RST（復位）：為1時表明TCP連接出現故障必須重建連接
   SYN（同步）：在連接建立時用來同步序號
   FIN （終止）： 為1時表明發送端數據發送完畢要求釋放連接
7. 接收窗口占2個字節，用於流量控制和擁塞控制，表示當前接收緩沖區的大小。在計算機網絡中，通常是用接收方的接收能力的大小來控制發送方的數據發送量。TCP連接的一端根據緩沖區大小確定自己的接收窗口值，告訴對方，使對方可以確定發送數據的字節數。
8. 校驗和占2個字節，范圍包括首部和數據兩部分。
9. 選項是可選的，默認情況是不選。

 

 三次握手與四次揮手

TCP是面向連接的協議，因此每個TCP連接都有3個階段：連接建立、數據傳送和連接釋放。

連接建立經歷三個步驟，通常稱為“三次握手”。TCP三次握手過程如下：

TCP三次握手

 1.第一次握手

　　客戶機發送連接請求報文段到服務器，兵近日SYN_SENT狀態，等待服務器確認。（SYN=1，seq=x）

2.第二次握手

　　服務器接收到連接請求保溫，如果同意建立連接，向客戶機發揮確認報文段，並未該TCP連接分配TCP緩存和變量。（SYN=1，ACK=1，seq=y，ack=x+1）

 3.第三次握手

　　客戶機收到服務器的確認報文段后，向服務器給出確認報文段，並且也要給該鏈接分配緩存和變量。此包發送完畢，客戶端和服務器進行ESTABLEISHED（TCP連接成功）狀態，完成三次握手。（ACK=1，seq=x+1，ack=y+1）

 

連接釋放經歷四個步驟，通常稱為“四次揮手”。TCP四次揮手過程如下：

四次揮手

 由於TCP連接是全雙工，因此每個方向必須單獨進行關閉。這原則是當一方完成它的數據發送任務后就能發送一個FIN來終止這個方向的連接。收到一個FIN只意味着一方向上沒有數據流動，一個TCP連接在收到一個FIN后仍能發送數據。首先進行關閉的乙方將執行主動關閉，而另一方執行被動關閉。

 1.第一次揮手

　　TCP客戶端發送一個FIN，用來關閉客戶到服務器的數據傳送

2.第二次揮手

　　服務器收到這個FIN，它發回一個ACK，確認序號為收到的序號+1.和SYN一樣，一個FIN將占用一個序號。

3.第三次揮手

　　服務器關閉客戶端的連接，發送一個FIN給客戶端。

4.第四次揮手

　　客戶端發回ACK報文確認，並將確認序號設置為收到序號+1.

 

為什么要進行三次握手四次揮手

 

 

(二)UDP協議

簡介

UDP，用戶數據報協議，英文全稱是User Datagram Protocol，它是TCP/IP協議簇中無連接的運輸層協議。

 

UDP協議格式

UDP格式

從圖中可以看到，UDP協議十分簡單，它由兩部分組成：首部和數據。其中，首部僅有8個字節，包括源端口和目的端口，長度（UDP用於數據報的長度），校驗和。

 

(三)HTTP協議

簡介

HTTP，超文本傳輸協議，英文全稱是Hypertext Transfer Protocol，它是互聯網上應用最為廣泛的一種網絡協議。HTTP是一種應用層協議，它是基於TCP協議之上的請求/響應式的協議，即一個客戶端與服務器建立連接后，向服務器發送一個請求；服務器接到請求后，給予相應的響應信息。HTTP協議默認的端口號為80.

現在使用的HTTP協議是HTTP/1.1版本，1997年之前采用的是HTTP1.0版本。HTTP連接在1.0版本中采用非持續連接工作方式，1.1版本采用的是持續連接工作方式，持續連接是指服務器在發送響應后仍然在一段時間內保持這條由TCP運輸層協議建立起來的連接，使客戶機和服務器可以繼續在這條連接上傳輸HTTP報文。

是否采用持續連接工作方式，1.0中默認是關閉的，需要在HTTP頭加入"Connection:Keep-Alive"，才能啟用Keep-Alive。HTTP1.1中默認啟用Keep-Alive，如果加入"Connection:close"，才關閉。目前大部分瀏覽器都是用HTTP1.1協議，也就是說默認都會發起Keep-Alive的連接請求了，所以是否能完成一個完整的Keep- Alive連接就看服務器設置情況。

 

HTTP報文

HTTP協議是基於TCP協議之上的請求/響應式協議，下面主要介紹HTTP報文的格式，HTTP報文主要有請求報文和響應報文兩種。

請求報文的格式：

HTTP請求報文格式

HTTP請求報文由請求行、首部行和實體主體組成，由瀏覽器發送給服務器。上面這張圖中SP表示空格，cr lf表示回車和換行。 

 

響應報文格式

HTTP響應報文格式

HTTP響應報文，它由狀態行、首部行和實體主體組成。

 

下面兩張圖是在谷歌瀏覽器內訪問服務器查看的HTTP請求和響應。

HTTP請求報文例子

 

 

 

HTTP響應報文例子

 

HTTP請求方法和響應狀態碼

在上面的HTTP請求報文例子中，我們可以看到請求方法是GET，這表示請求讀取由URL所標志的信息，除了GET，還有其它幾種常用的方法。

HTTP請求報文的一些方法

 

在HTTP響應報文的例子中，我們可以看到狀態碼是200，表示響應成功。下表是其它狀態碼，總共5大類，33種。

 

HTTP響應報文的狀態碼

 

(四)HTTPS和HTTP的區別

HTTPS（全稱：Hyper Text Transfer Protocol over Secure Socket Layer），是以安全為目標的HTTP通道，簡單講是HTTP的安全版。即HTTP下加入SSL層，HTTPS的安全基礎是SSL，因此加密的詳細內容就需要SSL。它是一個URI scheme（抽象標識符體系），句法類同http:體系。用於安全的HTTP數據傳輸。https:URL表明它使用了HTTP，但HTTPS存在不同於HTTP的默認端口及一個加密/身份驗證層（在HTTP與TCP之間）。

超文本傳輸協議HTTP協議被用於在Web瀏覽器和網站服務器之間傳遞信息。HTTP協議以明文方式發送內容，不提供任何方式的數據加密，如果攻擊者截取了Web瀏覽器和網站服務器之間的傳輸報文，就可以直接讀懂其中的信息，因此HTTP協議不適合傳輸一些敏感信息，比如信用卡號、密碼等。 

為了解決HTTP協議的這一缺陷，需要使用另一種協議：安全套接字層超文本傳輸協議HTTPS。為了數據傳輸的安全，HTTPS在HTTP的基礎上加入了SSL協議，SSL依靠證書來驗證服務器的身份，並為瀏覽器和服務器之間的通信加密。 

 

HTTPS和HTTP的區別主要為以下四點：

1、https協議需要到ca申請證書，一般免費證書很少，需要交費。

2、http是超文本傳輸協議，信息是明文傳輸，https 則是具有安全性的ssl加密傳輸協議。

3、http和https使用的是完全不同的連接方式，用的端口也不一樣，前者是80，后者是443。

4、http的連接很簡單，是無狀態的；HTTPS協議是由SSL+HTTP協議構建的可進行加密傳輸、身份認證的網絡協議，比http協議安全。

 

 

 

(五)Java網絡編程

Java的網絡編程主要涉及到的內容是Socket編程，那么什么是Socket呢？簡單地說，Socket，套接字，就是兩台主機之間邏輯連接的端點。

TPC/IP協議是傳輸層協議，主要解決數據如何在網絡中傳輸，而HTTP是應用層協議，主要解決如何包裝數據。Socket，本質上就是一組接口，是對TCP/IP協議的封裝和應用(程序員層面上)。

整體流程

Socket變成主要涉及到客戶端和服務器端兩個方面，首先是在服務器端創建一個服務器套接字(ServerSocket)，並把它附加到一個端口上，服務器從這個端口監聽連接。端口號的范圍是0到65536，但是0到1024是為特權服務保留的端口號，我們可以選擇任意一個當前沒有被其他進程使用的端口。

客戶端請求與服務器進行連接的時候，根據服務器的域名或者IP地址，加上端口號，打開一個套接字。當服務器接受連接后，服務器和客戶端之間的通信就像輸入輸出流一樣進行操作。

 

 實例一

 下面是一個客戶端和服務器端進行數據交互的簡單例子，客戶端輸入正方形的邊長，服務器端接收到后計算面積並返回給客戶端，通過這個例子可以初步對Socket編程有個把握。

服務器端

import java.io.*;
import java.util.*;
import java.net.*;

public class SocketServer{
    public static void main(String[] args) throws IOException{
        // 端口號
        int port = 7000;
        // 在端口上創建一個服務器套接字
        ServerSocket serverSocket = new ServerSocket(port);
        // 監聽來自客戶端的連接
        Socket socket = serverSocket.accept();

        DataInputStream dis = new DataInputStream(
                new BufferedInputStream(socket.getInputStream()));

        DataOutputStream dos = new DataOutputStream(
                new BufferedOutputStream(socket.getOutputStream()));

        do{
            double length = dis.readDouble();
            System.out.println("服務器收到的邊長數據為：" + length);
            double result = length * length;
            dos.writeDouble(result);
            dos.flush();
        }while (dis.readInt() != 0);

        socket.close();

        serverSocket.close();
    }
}

客戶端

import java.io.*;
import java.util.*;
import java.net.*;

public class SocketClient{
    public static void main(String[] args) throws UnknownHostException, IOException{
        int port = 7000;

        String host = "localhost";

        //創建一個套接字並將其連接到指定端口號
        Socket socket = new Socket(host, port);

        DataInputStream dis = new DataInputStream(
                new BufferedInputStream(socket.getInputStream()));

        DataOutputStream dos = new DataOutputStream(
                new BufferedOutputStream(socket.getOutputStream()));

        Scanner sc = new Scanner(System.in);

        boolean flag = false;

        while (!flag){
            System.out.println("請輸入正方形的邊長：");
            double length = sc.nextDouble();

            dos.writeDouble(length);
            dos.flush();

            double area = dis.readDouble();

            System.out.println("服務器返回的計算面積為：" + area);

            while (true){
                System.out.println("繼續計算？（Y/N）");

                String str = sc.next();

                if (str.equalsIgnoreCase("N")){
                    dos.writeInt(0);
                    dos.flush();
                    flag = true;
                    break;
                }else if(str.equalsIgnoreCase("Y")){
                    dos.writeInt(1);
                    dos.flush();
                    break;
                }
            }
        }
        socket.close();
    }
}

客戶端傳輸數據

 

服務器端接收數據

 

 

實例二

 可以看到上面的服務器端程序和客戶端程序是一對一的關系，為了能讓一個服務器端程序能同時為多個客戶提供服務，可以使用多線程機制，每個客戶端的請求都由一個獨立的線程進行處理。下面是改寫后的服務器端程序。

import java.io.*;
import java.util.*;
import java.net.*;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;

public class SocketServerM{
    public static void main(String[] args) throws IOException{
        // 端口號
        int port = 7001;

        // 客戶端編號
        int clientNo = 1;

        // 在端口上創建一個服務器套接字
        ServerSocket serverSocket = new ServerSocket(port);

        //創建線程池
        ExecutorService exec = Executors.newCachedThreadPool();
        try{
            while (true){
                // 監聽來自客戶端的連接
                Socket socket = serverSocket.accept();
                exec.execute(new SingleServer(socket, clientNo));
                clientNo++;
            }
        }finally{
            serverSocket.close();
        }
    }
}

import java.io.*;
import java.util.*;
import java.net.*;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;

class SingleServer implements Runnable{
    private Socket socket;
    private int clientNo;

    public SingleServer(Socket socket, int clientNo){
        this.socket = socket;
        this.clientNo = clientNo;
    }

    @Override
    public void run(){
        try{

            DataInputStream dis = new DataInputStream(
                    new BufferedInputStream(socket.getInputStream()));

            DataOutputStream dos = new DataOutputStream(
                    new BufferedOutputStream(socket.getOutputStream()));

            do{
                double length = dis.readDouble();
                System.out.println("從客戶端" + clientNo + "接收到的邊長為：" + length);
                double result = length * length;
                dos.writeDouble(result);
                dos.flush();
            }while (dis.readInt() != 0);
        }catch (IOException e){
            e.printStackTrace();
        }finally{
            System.out.println("與客戶端" + clientNo + "通信結束");
            try{
                socket.close();
            } catch(IOException e){
                e.printStackTrace();
            }
        }
    }
}

上面改進后的服務器端代碼可以支持不斷地並發響應網絡中的客戶請求。關鍵的地方在於多線程機制的運用，同時利用線程池可以改善服務器程序的性能。

 

(六)常見問題

到這里，關於計算機網絡部分的總結內容就結束了，下面是幾個常見的問題，匯總在這里。

1.OSI參考模型的分為哪幾層，每層的功能？

OSI，開放系統互連參考模型，它的7個層次自頂到下依次為

　　應用層

　　表示層

　　會話層

　　傳輸層

　　網絡層

　　數據鏈路層

　　物理層

各層功能見文章開始。

 

2.TCP協議和UDP協議的區別？

TCP協議是傳輸控制協議，UDP協議是用戶數據報協議，兩者都是傳輸層的協議。

主要區別在於前者是可靠的，面向連接的協議，后者是不可靠的，無連接的協議。

其它的區別還有，TCP協議傳輸速度慢，UDP常用於一次性傳輸比較少量數據的網絡應用。

 

3.TCP三次握手為什么不能是兩次?

為了實現可靠數據傳輸， TCP 協議的通信雙方， 都必須維護一個序列號， 以標識發送出去的數據包中， 哪些是已經被對方收到的。 三次握手的過程即是通信雙方相互告知序列號起始值， 並確認對方已經收到了序列號起始值的必經步驟
如果只是兩次握手， 至多只有連接發起方的起始序列號能被確認， 另一方選擇的序列號則得不到確認。查看更多

另外一種解釋

主要是防止兩次握手情況下已經失效的連接請求報文段突然又傳送到服務端而產生錯誤。例如，客戶機A向服務器B發送TCP連接請求，第一個連接請求報文在網絡的某個節點長時間滯留，A超時后認為報文丟失，於是再重傳一次連接請求，B收到后建立連接。數據傳輸完畢后雙方斷開連接，而這時之前滯留的連接請求到達了服務端B，而B認為A又發來連接請求。如果兩次握手建立連接，A並無連接請求，造成B的資源浪費。

 

4.HTTP請求的GET方法和POST方法的區別？

GET和POST是HTTP請求的兩種方法，主要區別在於GET方法是請求讀取由URL所標志的信息，POST是給服務器添加信息。查看更多

 

5.在瀏覽器中輸入網址到顯示出頁面的整個過程？

（1）輸出包含域名的網址

（2）瀏覽器向DNS請求解析域名對應的IP地址

（3）域名系統解析出域名對應的IP地址

（4）瀏覽器與該服務器建立TCP連接

（5）瀏覽器發送HTTP請求

（6）服務器通過HTTP響應把頁面文件發送給瀏覽器

（7）TCP連接釋放

（8）瀏覽器解釋文件，並顯示