iOSデバイスからビデオをストリームする方法（自分のカメラからではなく）

Question

iOSデバイスから外部ビデオを送信したい。 RTSP（ないiPhoneのカメラからの）サーバーまたはHLSのURL： このビデオは、ライブストリーミングから受信されています。

現在、私は（内部CameraSourceとMicSourceを使用して）VideoCoreを使用してiPhoneから私のカメラのビデオをストリーミングすることができますが、今、私はストリーミングしたい動画がURLから来ています。 Periscope streaming video from GoPro Camと同様です。

問題1：私はRTSPのURLのオーディオおよびビデオから抽出する方法がわからない

問題2：私は、この抽出されたビデオからMicSource O CameraSourceを作成する方法がわからないと、オーディオ。

あなたはどこの例を見つけることを知っていますかあなたは私には、この技術的な課題に助けることができますか？

Answer 1

私は、最初の問題のための最初のアプローチを見つけた：すべてのVSYNCで：

AVPlayerItem *item = [AVPlayerItem playerItemWithURL:URL]; 
    AVAsset *asset = [item asset]; 

    [asset loadValuesAsynchronouslyForKeys:@[@"tracks"] completionHandler:^{ 
     if ([asset statusOfValueForKey:@"tracks" error:nil] == AVKeyValueStatusLoaded) { 
      NSArray *videoTracks = [asset tracksWithMediaType:AVMediaTypeVideo]; 
      NSArray *audioTracks = [asset tracksWithMediaType:AVMediaTypeAudio]; 

      //VIDEO 
      //videoOutput is a AVPlayerItemVideoOutput * property 
      [item addOutput:self.videoOutput]; 

      //AUDIO 
      AVMutableAudioMixInputParameters *inputParams = [AVMutableAudioMixInputParameters audioMixInputParametersWithTrack:[audioTracks objectAtIndex:0]]; 
      MTAudioProcessingTapCallbacks callbacks;    
      callbacks.version = kMTAudioProcessingTapCallbacksVersion_0; 
      callbacks.clientInfo = (__bridge void *)self, 
      callbacks.init = tap_InitCallback; 
      callbacks.finalize = tap_FinalizeCallback; 
      callbacks.prepare = tap_PrepareCallback; 
      callbacks.unprepare = tap_UnprepareCallback; 
      callbacks.process = tap_ProcessCallback;    
      MTAudioProcessingTapRef tap; 
      OSStatus err = MTAudioProcessingTapCreate(kCFAllocatorDefault, &callbacks, 
                 kMTAudioProcessingTapCreationFlag_PostEffects, &tap);   
      inputParams.audioTapProcessor = tap; 
      AVMutableAudioMix *audioMix = [AVMutableAudioMix audioMix]; 
      audioMix.inputParameters = @[inputParams]; 
      item.audioMix = audioMix;  
    }]; 

はその後displayPixelBufferをコールバックしますCADisplayLinkとコールバックを作成します。

self.displayLink = [CADisplayLink displayLinkWithTarget:self selector:@selector(displayLinkCallback:)]; 
    [[self displayLink] addToRunLoop:[NSRunLoop currentRunLoop] forMode:NSDefaultRunLoopMode]; 
    [[self displayLink] setPaused:YES]; 

と、この方法でpixelBufferを取得し、オーディオ出力 に送る、AURenderCallbackStructを使用してコールバックを準備中で同様のタスクを実行します。