Webrtc實時通訊的構建流程:PeerConnection對等通訊的實現方式

語言: CN / TW / HK

webrtc是一個實時通訊技術,很簡單的應用在web瀏覽器中應用實時通訊技術,包括音視訊通話。在使用webrtc技術時,瀏覽器端都已經基本封裝好,只要呼叫相應的api,就可實現簡單的通話,其中一個主要物件就是RTCPeerConnection 支援音訊和視訊媒體資料通訊。本文我們就分享一下一套完整的對等通訊是如何實現的。

瀏覽器端

1、建立webrtc對等連線方法。

let pc = new PTCPeerConnection({
iceServers: [{ urls: ’stun:stun.l.google.com:19302’ }]
})

2、通過瀏覽器api建立流(開啟攝像頭、桌面截圖和獲取canvas流)

navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia || navigator.mozGetUserMedia;這個是獲取的攝像頭流

3、再把攝像頭的流新增到webrtc流的軌道。

stream.getTracks.forEach(track => pc.addTrack(track))

4、以上步驟都建立好,下一步建立offer和answer把獲取到的sdp通過伺服器進行資料交換,再傳遞ICE資訊。最後監聽PTCPeerConnection裡面的方法ontrack來獲取到流。如果斷開也可監聽onconnectionstatechange方法來獲取斷開和錯誤的狀態。

c++ 端

c++端比js端複雜太多,但也是大致流程都差不多,稍微比較複雜。
1、先建立一個對等連線的工廠

peer_connection_factory_ = webrtc::CreatePeerConnectionFactory(
      nullptr /* network_thread */, nullptr /* worker_thread */,
      nullptr /* signaling_thread */, nullptr /* default_adm */,
      webrtc::CreateBuiltinAudioEncoderFactory(),
      webrtc::CreateBuiltinAudioDecoderFactory(),
      webrtc::CreateBuiltinVideoEncoderFactory(),
      webrtc::CreateBuiltinVideoDecoderFactory(), nullptr /* audio_mixer */,
      nullptr /* audio_processing */);

2、通過對等連線工程來建立一個對等連線的例項

webrtc::PeerConnectionInterface::RTCConfiguration config;
  config.sdp_semantics = webrtc::SdpSemantics::kUnifiedPlan;
  config.enable_dtls_srtp = dtls;
  webrtc::PeerConnectionInterface::IceServer server;
  server.uri = GetPeerConnectionString();
  config.servers.push_back(server);

  peer_connection_ = peer_connection_factory_->CreatePeerConnection(
      config, nullptr, nullptr, this);

3、獲取視訊和音訊流,並新增到peer_connection_中AddTrack方法。

視訊:

rtc::scoped_refptr<CapturerTrackSource> video_device =
      CapturerTrackSource::Create();
  if (video_device) {
    rtc::scoped_refptr<webrtc::VideoTrackInterface> video_track_(
        peer_connection_factory_->CreateVideoTrack(kVideoLabel, video_device));
auto result_or_error2 = peer_connection_->AddTrack(video_track_, {kStreamId});

音訊:

rtc::scoped_refptr<webrtc::AudioTrackInterface> audio_track(
	  peer_connection_factory_->CreateAudioTrack(
		  kAudioLabel, peer_connection_factory_->CreateAudioSource(
			  cricket::AudioOptions())));
  auto result_or_error = peer_connection_->AddTrack(audio_track, { kStreamId });

4、也是發起端建立offer,遠端建立answer來交換sdp資訊,在監聽OnIceCandidate方法,並傳遞ice,這樣本地也遠端都可以實時通訊。