Чтение аудио сэмплов через AVAssetReader
Как вы читаете аудио-образцы через AVAssetReader? Я нашел примеры дублирования или микширования с использованием AVAssetReader, но эти петли всегда управляются контуром AVAssetWriter. Можно ли просто создать AVAssetReader и прочитать его, получить каждый образец и выбросить int32 каждого аудио-образца в массив?
Благодарю.
- Сортировка NSArray пользовательских объектов по их свойствам NSDate
- Сериализация и десериализация объектов Objective-C в JSON
- XCode 4 зависает при «Присоединении к (имя приложения)»
- UIButton внутри представления с UITapGestureRecognizer
- Почему NSUserDefaults не удалось сохранить NSMutableDictionary в iPhone SDK?
- Типы в объективе-c на iPhone
- как я могу использовать анимацию в cocos2d?
- Как установить приложение Cocoa в качестве браузера по умолчанию?
- Сравнение двух NSDates и игнорирование временной составляющей
- iOS8 - ограничения двусмысленно указывают на высоту нуля
- Убедитесь, что вход в UITextField только числовой
- как увеличить размер шрифта в UIWebView
- Могу ли я делать запросы POST или GET из приложения iphone?
Чтобы расширить ответ на @ amrox, вы можете получить AudioBufferList из CMBlockBufferRef, например
CMItemCount numSamplesInBuffer = CMSampleBufferGetNumSamples(buffer); AudioBufferList audioBufferList; CMSampleBufferGetAudioBufferListWithRetainedBlockBuffer( buffer, NULL, &audioBufferList, sizeof(audioBufferList), NULL, NULL, kCMSampleBufferFlag_AudioBufferList_Assure16ByteAlignment, &buffer ); for (int bufferCount=0; bufferCount < audioBufferList.mNumberBuffers; bufferCount++) { SInt16* samples = (SInt16 *)audioBufferList.mBuffers[bufferCount].mData; for (int i=0; i < numSamplesInBuffer; i++) { // amplitude for the sample is samples[i], assuming you have linear pcm to start with } } //Release the buffer when done with the samples //(retained by CMSampleBufferGetAudioBufferListWithRetainedblockBuffer) CFRelease(buffer); AVAssetReader *reader = [[AVAssetReader alloc] initWithAsset:asset error:&error]; AVAssetTrack *track = [[asset tracksWithMediaType:AVMediaTypeAudio] objectAtIndex:0]; NSDictionary *settings = @{ AVFormatIDKey : [NSNumber numberWithInt:kAudioFormatLinearPCM] }; AVAssetReaderTrackOutput *readerOutput = [AVAssetReaderTrackOutput assetReaderTrackOutputWithTrack:track outputSettings:settings]; [reader addOutput:readerOutput]; [reader startReading]; CMSampleBufferRef sample = [readerOutput copyNextSampleBuffer]; while ( sample ) { sample = [readerOutput copyNextSampleBuffer]; if ( ! sample ) { continue; } CMBlockBufferRef buffer = CMSampleBufferGetDataBuffer(sample); size_t lengthAtOffset; size_t totalLength; char *data; if ( CMBlockBufferGetDataPointer( buffer, 0, &lengthAtOffset, &totalLength, &data ) != noErr ) { NSLog(@"error!"); break; } // do something with data... CFRelease(sample); }
Ответы здесь не общие. Вызов CMSampleBufferGetAudioBufferListWithRetainedBlockBuffer может завершиться неудачно, если AudioBufferList должен быть разным. При использовании в качестве примера неперечисленных образцов.
Правильный способ – дважды вызвать CMSampleBufferGetAudioBufferListWithRetainedBlockBuffer . Первый вызов запрашивает размер, необходимый для AudioBufferList а второй фактически заполняет AudioBufferList .
size_t bufferSize = 0; CMSampleBufferGetAudioBufferListWithRetainedBlockBuffer( sampleBuffer, &bufferSize, NULL, 0, NULL, NULL, 0, NULL ); AudioBufferList *bufferList = malloc(bufferSize); CMBlockBufferRef blockBuffer = NULL; CMSampleBufferGetAudioBufferListWithRetainedBlockBuffer( sampleBuffer, NULL, bufferList, bufferSize, NULL, NULL, kCMSampleBufferFlag_AudioBufferList_Assure16ByteAlignment, &blockBuffer ); // handle audio here free(bufferList); CFRelease(blockBuffer);
В реальном мире вы должны выполнить обработку ошибок, а также не должны malloc каждый кадр, а затем кэшировать AudioBufferList .