SDL中文论坛

标题: iOS下，AssignPayloadTypesAndDefaultCodecs没有返回h264格式 [打印本页]

---

作者: ancientcc    时间: 2020-10-9 09:19
标题: iOS下，AssignPayloadTypesAndDefaultCodecs没有返回h264格式


调用AssignPayloadTypesAndDefaultCodecs，而不是使用webrtc内置的方法得到系统支持哪些编、解码格式时，ios下会得不到h264格式。以下是webrtc内置方法。

1. bool trtc_client::InitializePeerConnection()
   
2. {
   
3.   ...
   
4.   cricket::WebRtcVideoEncoderFactory* encoder_factory = NULL;
   
5.   cricket::WebRtcVideoDecoderFactory* decoder_factory = NULL;
   
6. #if defined(__APPLE__) && TARGET_OS_IPHONE
   
7. 
   
8. #elif defined(ANDROID)
   
9.   encoder_factory = new webrtc::jni::MediaCodecVideoEncoderFactory();
   
10.   decoder_factory = new webrtc::jni::MediaCodecVideoDecoderFactory();
    
11. #endif
    
12. 
    
13.   peer_connection_factory_ = webrtc::CreatePeerConnectionFactory(
    
14.         _networkThread.get(), _workerThread.get(), signalingThread,
    
15.         nullptr,
    
16.                 webrtc::CreateBuiltinAudioEncoderFactory(),
    
17.                 webrtc::CreateBuiltinAudioDecoderFactory(),
    
18.                 encoder_factory, decoder_factory);
    
19.   ...
    
20. }

复制代码

当有信令服务器时，webrtc用webrtc::CreatePeerConnectionFactory创建编/解码器，我记得在这版本的webrtc，iOS的encoder_factory、decoder_factory传nullptr就行。不论是做为主叫还是被叫，都支持h264编、码解。

之后要用AssignPayloadTypesAndDefaultCodecs单独得到系统支持哪些编/解码格式，像trtspcapture、tmemcapture。要是encoder_factory传nullptr。

1. encoder_factory_ = cricket::ConvertVideoEncoderFactory(std::unique_ptr<cricket::WebRtcVideoEncoderFactory>(encoder_factory));
   
2. std::vector<cricket::VideoCodec> recv_codecs = cricket::AssignPayloadTypesAndDefaultCodecs(encoder_factory_->GetSupportedFormats());

复制代码

此时得到的recv_codecs没有包括h264格式！

以下临时解决办法，下次升级webrtc时要仔细检查这方法。

1.   cricket::WebRtcVideoEncoderFactory* encoder_factory = NULL;
   
2.   cricket::WebRtcVideoDecoderFactory* decoder_factory = NULL;
   
3. 
   
4. #if defined(__APPLE__) && TARGET_OS_IPHONE
   
5.   encoder_factory = webrtc::CreateObjCEncoderFactory2().release();
   
6.   decoder_factory = webrtc::CreateObjCDecoderFactory2().release();
   
7. #elif defined(ANDROID)
   
8.   encoder_factory = new webrtc::jni::MediaCodecVideoEncoderFactory();
   
9.   decoder_factory = new webrtc::jni::MediaCodecVideoDecoderFactory();
   
10. #endif
    
11. 
    
12. <webrtc>/modules/video_coding/codecs/test/objc_codec_h264_test.mm
    
13. std::unique_ptr<cricket::WebRtcVideoEncoderFactory> CreateObjCEncoderFactory2() {
    
14.   return rtc::MakeUnique<ObjCVideoEncoderFactory>([[RTCVideoEncoderFactoryH264 alloc] init]);
    
15. }
    
16. 
    
17. std::unique_ptr<cricket::WebRtcVideoDecoderFactory> CreateObjCDecoderFactory2() {
    
18.   return rtc::MakeUnique<ObjCVideoDecoderFactory>([[RTCVideoDecoderFactoryH264 alloc] init]);
    
19. }

复制代码

webrtc内在机制在处理webrtc::CreatePeerConnectionFactory时，的确是能够支持h264格式，至于是不是创建了RTCVideoEncoderFactoryH264、RTCVideoDecoderFactoryH264，这不清楚。目前，没了跟踪CreatePeerConnectionFactory如何执行的测试环境，但在下次升级webrtc时，须要弄清：为什么调用CreatePeerConnectionFactory时，传encoder_factory=nullptr、decoder_factory=nullptr，依旧能得到h264。换句话说，要清楚cricket::AssignPayloadTypesAndDefaultCodecs得到recv_codecs的全过程。

---

欢迎光临 SDL中文论坛 (http://www.libsdl.cn/bbs/)

Powered by Discuz! X3.3