Я хочу позвонить 20 раз в секунду installTapOnBus: bufferSize: format: block:

Question

Я хочу отображать волну в режиме реального времени с микрофона. Я был реализован с использованием installTapOnBus: bufferSize: format: block :, Эта функция вызывается три раза за одну секунду. Я хочу, чтобы эту функцию вызывали 20 раз в секунду. Где я могу установить?

AVAudioSession *audioSession = [AVAudioSession sharedInstance]; 

NSError* error = nil; 
if (audioSession.isInputAvailable) [audioSession setCategory:AVAudioSessionCategoryPlayAndRecord error:&error]; 
if(error){ 
    return; 
} 

[audioSession setActive:YES error:&error]; 
if(error){ 
    retur; 
} 

self.engine = [[[AVAudioEngine alloc] init] autorelease]; 

AVAudioMixerNode* mixer = [self.engine mainMixerNode]; 
AVAudioInputNode* input = [self.engine inputNode]; 
[self.engine connect:input to:mixer format:[input inputFormatForBus:0]]; 

// tap ... 1 call in 16537Frames 
// It does not change even if you change the bufferSize 
[input installTapOnBus:0 bufferSize:4096 format:[input inputFormatForBus:0] block:^(AVAudioPCMBuffer* buffer, AVAudioTime* when) { 

    for (UInt32 i = 0; i < buffer.audioBufferList->mNumberBuffers; i++) { 
     Float32 *data = buffer.audioBufferList->mBuffers[i].mData; 
     UInt32 frames = buffer.audioBufferList->mBuffers[i].mDataByteSize/sizeof(Float32); 

     // create waveform 
     ... 
    } 
}]; 

[self.engine startAndReturnError:&error]; 
if (error) { 
    return; 
} 

Answer 1

Класс AVAudioNode эталонных состояний, что реализация может выбрать размер буфера, кроме того, что вы поставляете, так, насколько я знаю, мы застряли с очень большим размером буфера. Это печально, потому что AVAudioEngine - отличная оболочка Core Audio. Поскольку мне тоже нужно использовать входной сигнал для чего-то другого, кроме записи, я смотрю на The Amazing Audio Engine, а также на Core Audio C API (см. IBook Learning Core Audio для отличных обучающих программ на нем) в качестве альтернативы.

*** Обновление: Оказывается, вы можете получить доступ к AudioUnit AVAudioInputNode и установить на него обратный вызов визуализации. Через AVAudioSession вы можете установить желаемый размер буфера аудиосеанса (не гарантируется, но, конечно, лучше, чем удаленные узлы). До сих пор я получил размеры буфера до 64 образцов, используя этот подход. Я отправлю обратно сюда код, как только у меня будет возможность проверить это.

Answer 2

Для достижения этой цели вы можете использовать CADisplayLink. A CADisplayLink даст вам обратный вызов каждый раз, когда экран обновляется, что обычно будет намного больше 20 раз в секунду (так что может потребоваться дополнительная логика для дросселирования или ограничения количества раз, когда ваш метод выполняется в вашем случае).

Это, очевидно, решение, которое довольно дискретно от вашей аудиоработы, и в той степени, в которой вам требуется решение, которое отражает вашу сессию, оно может не работать. Но когда нам нужны частые повторяющиеся обратные вызовы в iOS, это часто подход к выбору, так что это идея.

Answer 3

они говорят, Apple Support ответил нет: (сен 2014)

Да, в настоящее время внутри страны мы имеем фиксированный размер буфера крана (0.375s), и клиент указанный размер буфера для крана не действует.

но кто-то изменяет размер буфера и получает 40мс https://devforums.apple.com/thread/249510?tstart=0

Не может проверить это, Нина в ObjC :(

UPD это работает только одна строка:

[input installTapOnBus:0 bufferSize:1024 format:[mixer outputFormatForBus:0] block:^(AVAudioPCMBuffer *buffer, AVAudioTime *when) { 
    buffer.frameLength = 1024; //here 

Answer 4

Не знаю, почему или даже если это работает, просто попробуйте несколько вещей. Но наверняка NSLogs указывают интервал 21 мс, 1024 образцы, поступающие в буфер ...

 AVAudioEngine* sEngine = NULL; 
     - (void)applicationDidBecomeActive:(UIApplication *)application 
     { 
      /* 
      Restart any tasks that were paused (or not yet started) while the application was inactive. If the application was previously in the background, optionally refresh the user interface. 
      */ 

      [glView startAnimation]; 

      AVAudioSession *audioSession = [AVAudioSession sharedInstance]; 

      NSError* error = nil; 
      if (audioSession.isInputAvailable) [audioSession setCategory:AVAudioSessionCategoryPlayAndRecord error:&error]; 
      if(error){ 
       return; 
      } 

      [audioSession setActive:YES error:&error]; 
      if(error){ 
       return; 
      } 

      sEngine = [[AVAudioEngine alloc] init]; 

      AVAudioMixerNode* mixer = [sEngine mainMixerNode]; 
      AVAudioInputNode* input = [sEngine inputNode]; 
      [sEngine connect:input to:mixer format:[input inputFormatForBus:0]]; 

      __block NSTimeInterval start = 0.0; 

      // tap ... 1 call in 16537Frames 
      // It does not change even if you change the bufferSize 
      [input installTapOnBus:0 bufferSize:1024 format:[input inputFormatForBus:0] block:^(AVAudioPCMBuffer* buffer, AVAudioTime* when) { 

       if (start == 0.0) 
        start = [AVAudioTime secondsForHostTime:[when hostTime]]; 

       // why does this work? because perhaps the smaller buffer is reused by the audioengine, with the code to dump new data into the block just using the block size as set here? 
       // I am not sure that this is supported by apple? 
       NSLog(@"buffer frame length %d", (int)buffer.frameLength); 
       buffer.frameLength = 1024; 
       UInt32 frames = 0; 
       for (UInt32 i = 0; i < buffer.audioBufferList->mNumberBuffers; i++) { 
        Float32 *data = buffer.audioBufferList->mBuffers[i].mData; 
        frames = buffer.audioBufferList->mBuffers[i].mDataByteSize/sizeof(Float32); 
        // create waveform 
        /// 
       } 
       NSLog(@"%d frames are sent at %lf", (int) frames, [AVAudioTime secondsForHostTime:[when hostTime]] - start); 
      }]; 

      [sEngine startAndReturnError:&error]; 
      if (error) { 
       return; 
      } 

     }