1.信令流和媒體流的關(guān)系

文章目錄1. 信令服務(wù)器簡(jiǎn)介2. 信令服務(wù)器的作用3. 信令服務(wù)的實(shí)現(xiàn)4. http://socket.io優(yōu)勢(shì)+原理+API1. 信令服務(wù)器簡(jiǎn)介信令是協(xié)調(diào)通信的過(guò)程為了使WebRTC應(yīng)用程序能夠建立一個(gè)“通話”，其客戶需要交換以下信息：。

2.什么是信令和媒體

# 會(huì)話控制消息用于打開或關(guān)閉通信 # 錯(cuò)誤消息 # 媒體元數(shù)據(jù)，如編解碼器和編解碼器設(shè)置，帶寬和媒體類型 # 密鑰數(shù)渦蟲據(jù)，用于建立安全的連接

3.信令加密與媒體流加密區(qū)別

# 網(wǎng)絡(luò)數(shù)據(jù)，如外界縮減的主機(jī)IP地址和端口這個(gè)信令過(guò)程需要一個(gè)方式使客戶來(lái)回地進(jìn)行消息傳遞2. 信令服務(wù)器的作用沒(méi)有信令服務(wù)器，各個(gè)WebRTC之間是沒(méi)辦法通信的傳遞媒體數(shù)據(jù)有兩個(gè)信息，必須經(jīng)過(guò)信令服務(wù)器進(jìn)行交換。

4.信令流和數(shù)據(jù)流

如下圖是信令服務(wù)器擔(dān)任的角色

5.信息流媒體是什么意思

如果我們沒(méi)有信令服務(wù)器，WebRTC之間是肯定不能通信的，我們來(lái)看一下上圖，這張圖就表達(dá)了信令服務(wù)器在整個(gè)通話過(guò)程中它起到的作用我們要實(shí)現(xiàn)p2p直接的通信，需要交換幾個(gè)信息：媒體信息，網(wǎng)絡(luò)信息，具體業(yè)務(wù)。

6.信令面 媒體面

一、媒體信息通過(guò)SDP來(lái)表示，如編解碼器是渦蟲什么？是否支持音頻視頻？編碼方式是什么？等這些信息是通過(guò)SDP協(xié)議描述出來(lái)，通過(guò)信令服務(wù)器中轉(zhuǎn)的二、網(wǎng)絡(luò)信息兩個(gè)WebRTC客戶端會(huì)盡可能選擇P2P進(jìn)行連接，那么進(jìn)行連接前是如何發(fā)現(xiàn)對(duì)方的？就是通過(guò)信令服務(wù)器。

7.信息流媒體有哪些

首先將你所有網(wǎng)絡(luò)相關(guān)信息傳到信令服務(wù)器，服務(wù)器幫你交換到對(duì)端，對(duì)端拿到你的信息后，若在同一局域網(wǎng)內(nèi)，直接通過(guò)P2P傳輸；若不在，首先進(jìn)行P2P穿越，看是否能打通，打通則傳輸，打不通則中轉(zhuǎn)等三、具體業(yè)務(wù)還有一點(diǎn)也需要信令服務(wù)器進(jìn)行傳輸，比如加入房間，離開房間，禁言等功能

8.信息流媒介是什么意思

那么我們下面詳細(xì)分析一下上圖信令服務(wù)器需要處理的事情：首先我們先看下面藍(lán)色的發(fā)渦蟲起端和接受端，這個(gè)發(fā)起端和接受端如果想傳遞媒體數(shù)據(jù)的時(shí)候 ，它有兩個(gè)信息是必須要經(jīng)過(guò)信令服務(wù)器交換之后才能進(jìn)行通信的，這個(gè)兩個(gè)信息。

9.信息流類媒體

第一個(gè)就是媒體信息，它是通過(guò)SDP來(lái)表述可以簡(jiǎn)單的理解，我們雙方要通信，你的編解碼的器是什么，比如說(shuō)我現(xiàn)在可以進(jìn)行視頻傳輸，我的編碼是H264，那么對(duì)方也要告訴我你的編解碼器能不能支持H264的碼，比如我們給你傳過(guò)去H264的碼，你說(shuō)只能解H265的，那肯定雙方之間就沒(méi)法通信了。

所有這個(gè)信息是必須要傳遞的此外你是否支持視頻是否支持音頻，你們的編碼方式是什么，這些信息是通過(guò)SDP給它描述出來(lái)，通過(guò)信令服務(wù)器，首先客戶端要將這個(gè)SDP信息發(fā)送到服務(wù)端 渦蟲，服務(wù)端再中轉(zhuǎn)，中轉(zhuǎn)到另一端，大家已經(jīng)知道了為什么要通過(guò)信令服務(wù)器進(jìn)行中轉(zhuǎn)，因?yàn)檫@個(gè)時(shí)候相互之間還沒(méi)有進(jìn)行連接，相互之間還不知道對(duì)方的存在。

那這是第一個(gè)要傳遞的信息，第二個(gè)要傳遞的信息是網(wǎng)絡(luò)信息，大家知道WebRTC最終之間盡可能通過(guò)P2P進(jìn)行傳輸，那在他們連接之前，他們?nèi)绾伟l(fā)現(xiàn)對(duì)方呢？也是通過(guò)信令服務(wù)器，首先你要將所有網(wǎng)絡(luò)相關(guān)的信息傳到服務(wù)器，那么這個(gè)服務(wù)器在幫你交換到對(duì)端，那對(duì)端拿到你的信息之后，才知道我們是在同一個(gè)局域網(wǎng)內(nèi)，那就直接通過(guò)P2P就傳輸好了。

那如果不在同一個(gè)網(wǎng)絡(luò)內(nèi)，那我要通過(guò)P2P穿越 ，看看之間能不能打通，這里面又分了好幾種類型，對(duì)于對(duì)稱是肯定打通不了，對(duì)于非對(duì)稱的那就可以渦蟲嘗試打通，打通之后，他們之間才能進(jìn)行通信如果打通不了，還要通過(guò)服務(wù)端進(jìn)行中轉(zhuǎn)。

所以這個(gè)信令服務(wù)器最基礎(chǔ)的要傳輸媒體相關(guān)的信息進(jìn)行交換，第二個(gè)是網(wǎng)絡(luò)相關(guān)的信息要進(jìn)行交換，再有第三個(gè)就是你的具體的業(yè)務(wù)，加入房間，離開房間，禁言，將對(duì)方禁止發(fā)言，或者給對(duì)方權(quán)限讓他發(fā)言等等有很多信令，可以根據(jù)自己的業(yè)務(wù)模型去設(shè)置。

這個(gè)就是信令服務(wù)器在整個(gè)WebRTC在整個(gè)WebRTC通訊中的作用，所以這是WebRTC中必須要有的信令服務(wù)器LinuxC++音視頻開發(fā)視頻：免費(fèi)】FFmpeg/WebRTC/RTMP/NDK/Android音視頻流媒體高級(jí)開發(fā)。

【文章福利】：音視頻學(xué)習(xí)資料、視頻和學(xué)習(xí)路線圖資料、以及面試題渦蟲（資料包括C/C++，Linux，F(xiàn)Fmpeg webRTC rtmp hls rtsp ffplay srs 等），免費(fèi)分享，有需要的可以加君羊領(lǐng)取哦！

~學(xué)習(xí)交流君羊994289133點(diǎn)擊加入領(lǐng)取資料

3. 信令服務(wù)的實(shí)現(xiàn)為什么WebRTC中不提供信令服務(wù)：WebRTC是沒(méi)有將信令服務(wù)納入到整個(gè)的規(guī)范中，更多的是規(guī)范了客戶端這邊的所有的過(guò)程，那為什么沒(méi)有將信令服務(wù)器放到規(guī)范中，各個(gè)公司它的業(yè)務(wù)模型都是不一樣的，很難將每個(gè)公司的信令都統(tǒng)一訂成一套規(guī)范。

所有與其這個(gè)不如讓他們各自自己去定義只有是我必須的這些信息的交換可以實(shí)現(xiàn)，其他的業(yè)務(wù)你可以自己去定義，這個(gè)比較靈活，各個(gè)公司也比較容易接受這套方案渦蟲這個(gè)對(duì)整個(gè)WebRTC的推廣其實(shí)是有好處的4. http://。

socket.io 簡(jiǎn)介4.1 http://socket.io 優(yōu)勢(shì)要實(shí)現(xiàn)一個(gè)信令服務(wù)器，有很多種方式，我們可以使用最原始的套機(jī)制通信，也可以用第三方開源庫(kù)，我們這里使用的是http://socket.io

，主要是因?yàn)樗袔讉€(gè)優(yōu)點(diǎn)：http://socket.io是WebSocket超集http://socket.io它本身就有WebSocket功能，我們都知道在整個(gè)音視頻傳輸?shù)臅r(shí)候，一般有兩種協(xié)議，TCP和UDP，底層協(xié)議里面UDP主要用于流媒體的傳輸，比如音頻、視頻、文本可以通過(guò) UDP進(jìn)行傳輸，UDP的問(wèn)題在于它是不可靠的渦蟲傳輸，也就是說(shuō)我是可以丟包的，對(duì)于音頻視頻來(lái)說(shuō)這是沒(méi)有任何問(wèn)題的。

當(dāng)我網(wǎng)絡(luò)不好的時(shí)候，我丟了音頻數(shù)據(jù)，它頂多就卡一下，它還能繼續(xù)運(yùn)行，不太影響我們正常的通話如果對(duì)于信令來(lái)說(shuō)就不一樣了，信令一般就使用TCP，叫做可靠性連接，我的包是要必須保證到達(dá)的，否則我就斷開連接了，因?yàn)榫W(wǎng)絡(luò)就不能支持我的整個(gè)業(yè)務(wù)運(yùn)轉(zhuǎn)。

所以它要么就必須達(dá)到，我們就甭玩了就這兩種狀況，所以我們的信令在傳輸?shù)倪^(guò)程中是必須要到達(dá)的如果我們的媒體信息和網(wǎng)絡(luò)信息不能交換的話，那肯定就是不能工作的，所以對(duì)于 信令來(lái)說(shuō)我們一般使用TCP，websocket

底層使用的就是TCP，所以http://socket.io底層使用的也是 TCPhtt渦蟲p://socket.io有房間的概念http://socket.io有房間的概念，http://socket.io。

兩個(gè)人或者多個(gè)人進(jìn)行通訊的時(shí)候，首先我要進(jìn)入到 一個(gè)房間里，這是很自然的一個(gè)邏輯，我們 要上課 或者開會(huì)，首先大家要聚集在一起，有一個(gè)虛擬的邏輯的概念，就是大家要在一個(gè)房間里，大家在這個(gè)房間大家就可以相互通信了。

我們可以看webrtc官方提供的例子，實(shí)際上他有三種服務(wù)器，分別是房間服務(wù)器，信令服務(wù)器，流媒體中轉(zhuǎn)服務(wù)器，我們這里用了http://socket.io我們這里就不用單獨(dú)寫一個(gè)房間服務(wù)器了，也就是說(shuō)房間服務(wù)器和信令服務(wù)器是在同一個(gè)服務(wù)器上。

http://socket.i渦蟲o跨平臺(tái)、跨終端、跨語(yǔ)言socket.io跨平臺(tái)、跨終端、跨語(yǔ)言，這樣就方便我們?cè)诟鱾€(gè)端上去實(shí)現(xiàn)信令的各個(gè)端，去與我們的服務(wù)端進(jìn)行連接，所以特別方便，這就是使用socket

來(lái)實(shí)現(xiàn)socket.io來(lái)實(shí)現(xiàn)信令服務(wù)器的根本原因。4.2 http://socket.io 工作原理

如上圖所示，http://socket.io的工作原理其實(shí)非常簡(jiǎn)單，http://socket.io其他它是一個(gè)js庫(kù)，它是基于node.js 的Server的，這個(gè)和我們的技術(shù)選項(xiàng)有關(guān)，我們之前選擇web服務(wù)器的時(shí)候選擇的是nodeJS，在這個(gè)nodeJS的服務(wù)器上

我們?cè)谠黾舆@個(gè)http://socket.io，那么我們整渦蟲個(gè)服務(wù)器端就完成了，非常簡(jiǎn)單但是如果我們單獨(dú)寫一套的話，那要花很長(zhǎng)很長(zhǎng)時(shí)間，在我們現(xiàn)有的nodeJS， web服務(wù)器上我們只有增加了http://socket.io。

，簡(jiǎn)簡(jiǎn)單單的修改幾行代碼，我們就實(shí)現(xiàn)了一個(gè)服務(wù)器端其實(shí)光有服務(wù)器它還是不能工作的，所以還有客戶端在網(wǎng)頁(yè)端也好，在安卓或者IOS也好，在任何終端都可以引入http://socket.io這個(gè)client lib客戶端的庫(kù)，那么客戶端這個(gè)庫(kù)我們就可以連接到NodeJS 的。

http://socket.io的這個(gè)服務(wù)上，這樣就建立了連接建立了連接之后，我們才可以創(chuàng)建房間或者加入到房間里，那么在整個(gè)房間內(nèi)的用戶就可以相互通信了，這塊的邏輯渦蟲非常的簡(jiǎn)單此外這個(gè)http://socket.io

它是可以橫向擴(kuò)展的，還可以級(jí)聯(lián)部署很多個(gè)http://socket.io服務(wù)，還可以串到一起，這時(shí)當(dāng)我去發(fā)送信息的時(shí)候，它是可以在各個(gè)http://socket.io上傳輸?shù)谋热缬袃蓚€(gè)用戶，第一個(gè)用戶在北京那個(gè)節(jié)點(diǎn)上，有一個(gè) 用戶是上海這個(gè)節(jié)點(diǎn)上，沒(méi)關(guān)系在它上層也就是它服務(wù)端可以串在一起的，那么北京的用戶首先將你的信息發(fā)送到北京的服務(wù)端，北京的服務(wù)端通過(guò)整個(gè)網(wǎng)絡(luò)曾然后傳到上海的節(jié)點(diǎn)，上海的節(jié)點(diǎn)最終找到上海的用戶，最后發(fā)送出去，這樣他們之間就實(shí)現(xiàn)了通信。

4.3 http://socket.io 提供的api給本次鏈接發(fā)送消息:socket.emi渦蟲t() :這表示客戶端發(fā)送了一個(gè)消息給服務(wù)端 ，服務(wù)端收到這個(gè)消息之后給了一個(gè)callback. 也就是一個(gè)返回，比如說(shuō)我要加入房間，當(dāng)我加入之后他給我回一個(gè)已經(jīng)加入成功。

只是給我本人發(fā)的我收到加入成功之后，我就可以做后面的邏輯處理了這樣就形成了一個(gè)異步的操作給某個(gè)房間內(nèi)所有人發(fā)消息:io.in(room).emit():這相當(dāng)于是一個(gè)廣播了，所有人就包括我自己，我發(fā)的這個(gè)消息我自己也要知道。

比如還以加入房間為例，其實(shí)他要給房間中的每一個(gè)人都要發(fā)送一個(gè)消息，這個(gè)用戶已經(jīng)加入房間了當(dāng)然有的業(yè)務(wù)就不需要，他只是給你發(fā)送者回了“你已經(jīng)加入成功了”還有就是各個(gè)端都要維護(hù)一個(gè)用戶列表，那誰(shuí)來(lái)了誰(shuí)出去了，渦蟲我都要清楚，這個(gè)時(shí)候就要每一個(gè)人都收到這個(gè)消息，對(duì)于發(fā)送者來(lái)說(shuō)，我收到這個(gè)消息，就可以做后面的邏輯處理，做音視頻的采集等。

對(duì)于其他用戶來(lái)說(shuō)，當(dāng)我收到用戶已經(jīng)加入的消息的時(shí)候，就更新 一個(gè)我的用戶列表，將這個(gè)用戶添加到我的用戶列表當(dāng)中去，這是給某個(gè)房間內(nèi)的所有人發(fā)消息io就代表整個(gè)節(jié)點(diǎn)，我們部署的socket節(jié)點(diǎn)里，上面的所有的人都包含在內(nèi)，room就代表某個(gè)具體的房間，也就是說(shuō)房間內(nèi)的所有人要發(fā)送 。

除本連接外，給某個(gè)房間內(nèi)所有人發(fā)消息 : socket.broadcast.emit() :這個(gè)是除本人外，給所有人發(fā)消息，在一個(gè)IO節(jié)點(diǎn)里，可能有很多個(gè)房間，比如10個(gè)或者20個(gè)房間，那么這個(gè)b渦蟲roadcast就是廣播，我要給除我之外的所有人（整個(gè)站點(diǎn)的所有人）發(fā)消息。

比如我發(fā)了一個(gè)通知，將節(jié)點(diǎn)中的所有用戶都切掉，就是都要斷掉去連另外的節(jié)點(diǎn)，然后你可以通過(guò)超級(jí)管理員的用戶，給所有人發(fā)消息4.3.1 發(fā)送action命令發(fā)送action命令：S: socket.emit(action); C: socket.on(action,function(){...});。

當(dāng)S(server端)發(fā)送一個(gè)消息action，也就是一個(gè)動(dòng)作，那么C(client端)要監(jiān)聽這個(gè)動(dòng)作，通過(guò)socket.on監(jiān)聽這個(gè)action，它處理的時(shí)候后面帶了一個(gè)函數(shù)，后面是一個(gè)具體的邏輯發(fā)送了一個(gè)a渦蟲ction命令，還有data數(shù)據(jù):

S: socket.emit(action, data); C: socket.on(action, function(data){...});發(fā)送了一個(gè)action, 還有兩個(gè)數(shù)據(jù):S: socket.emit(action, arg1, arg1); C: socket.on(action, function(arg1,arg2){...});

發(fā)送了一個(gè)action命令，在emit方法中包含回調(diào)函數(shù):S: socket.emit(action,data,function(arg1,arg2){}); C: s渦蟲ocket.on(action,function(data,fn){fn(a,b);});