iOS开发音频、视频

一、音频
播放音频可以使用框架：AVFoundation.framework
1、音效播放
又称“短音频”，通常在程序中的播放时长为30秒以内

在应用程序中起到点缀效果，提升整体用户体验

- (void)touchesBegan:(NSSet<UITouch *> *)touches withEvent:(UIEvent *)event {        //1、设置播放音效的地址    NSURL *url = [[NSBundle mainBundle] URLForResource:@"buyao.wav" withExtension:nil];        //2、定义系统音效文件的id，根据该id查找到音效文件    SystemSoundID soundID;        //3、创建音效文件    AudioServicesCreateSystemSoundID((__bridge CFURLRef _Nonnull)(url), &soundID);        //4、播放音效文件    //4.1、不带震动的播放    AudioServicesPlaySystemSound(soundID);        //4.2、带震动的播放//    AudioServicesPlayAlertSound(soundID);    //5、释放音效所占的内存//    AudioServicesDisposeSystemSoundID(soundID);    }//在AppDelegate中进行音效文件的释放- (void)applicationDidReceiveMemoryWarning:(UIApplication *)application {    }

音效播放工具类的封装

#import <Foundation/Foundation.h>#import <AVFoundation/AVFoundation.h>@interface ZMAudioTools : NSObject//不带震动的播放+ (void)playSystemSoundWithURL:(NSURL *)url;//带震动的播放+ (void)playAlertSystemSoundWithURL:(NSURL *)url;//清空音效文件，在控制器收到内存警告时调用+ (void)ClearMemory;@end

#import "ZMAudioTools.h"//缓存字典static NSMutableDictionary *soundIDDict;@implementation ZMAudioTools//只要头文件参与了编译，就会调用//+ (void)load {//    //}+ (void)initialize {    //缓存字典初始化    soundIDDict = [NSMutableDictionary dictionary];}//不带震动的播放+ (void)playSystemSoundWithURL:(NSURL *)url{        AudioServicesPlaySystemSound([self loadSoundIDWithURL:url]);}//带震动的播放+ (void)playAlertSystemSoundWithURL:(NSURL *)url {    AudioServicesPlayAlertSound([self loadSoundIDWithURL:url]);}+ (void)ClearMemory{    [soundIDDict enumerateKeysAndObjectsUsingBlock:^(id  _Nonnull key, id  _Nonnull obj, BOOL * _Nonnull stop) {        SystemSoundID soundID = [obj intValue];        AudioServicesDisposeSystemSoundID(soundID);    }];    }+ (SystemSoundID)loadSoundIDWithURL:(NSURL *)url {        NSString *urlStr = url.absoluteString;        //从缓存字典中取出soundID    //2、定义系统音效文件的id，根据该id查找到音效文件    SystemSoundID soundID = [soundIDDict[urlStr] intValue];        if (soundID == 0) {        //3、创建音效文件        AudioServicesCreateSystemSoundID((__bridge CFURLRef _Nonnull)(url), &soundID);                soundIDDict[urlStr] = @(soundID);    } else {            }    return soundID;}@end

2、音乐播放
一般播放时间较长，音乐播放用到一个叫做AVAudioPlayer的类

- (void)viewDidLoad {    [super viewDidLoad];        //1、设置音乐文件的URL路径    NSURL *url = [[NSBundle mainBundle] URLForResource:@"爱.mp3" withExtension:nil];        //2、创建音乐播放器    NSError *error;    self.player = [[AVAudioPlayer alloc] initWithContentsOfURL:url error:&error];    if (error) {        NSLog(@"%@", error.localizedDescription);    }}- (void)touchesBegan:(NSSet<UITouch *> *)touches withEvent:(UIEvent *)event {    /***<   播放音乐    **/    //1、准备播放，把音频文件加载到内存中，默认会隐式被调用，可以省略    [self.player prepareToPlay];    //2、开始播放    [self.player play];        /***<   暂停播放    **/    [self.player pause];            /***<   停止播放    **/    [self.player stop];    //把播放时刻归零    self.player.currentTime = 0;}

3、录音
3.1、录音的简单使用

- (void)viewDidLoad {    [super viewDidLoad];        //1、定义录音文件的存放地址，不改变录音文件的位置，重复录音会覆盖    NSString *path = [NSSearchPathForDirectoriesInDomains(NSLibraryDirectory, NSUserDomainMask, YES)[0] stringByAppendingPathComponent:@"1.wav"];        NSURL *url = [NSURL fileURLWithPath:path];            //2、录音参数设置字典，如果传值为空默认就是高质量录音    NSDictionary *settings = [NSDictionary dictionary];        //3、创建录音对象    //NSError的标准定义    __autoreleasing NSError *error;    _recorder = [[AVAudioRecorder alloc] initWithURL:url settings:settings error:&error];    }- (void)prepareRecorder {    //1、准备录音    [self.recorder prepareToRecord];        //2、开始录音    [self.recorder record];}- (void)pauseRecorder {    //暂停录音，不会保存录音文件，需要进行停止    [self.recorder pause];}- (void)stopRecorder {    //停止录音，会产生最终的录音文件    [self.recorder stop];}

3.2、检测自动停止录音

- (void)viewDidLoad {    [super viewDidLoad];        //1、定义录音文件的存放地址，不改变录音文件的位置，重复录音会覆盖    NSString *path = [NSSearchPathForDirectoriesInDomains(NSLibraryDirectory, NSUserDomainMask, YES)[0] stringByAppendingPathComponent:@"1.wav"];        NSURL *url = [NSURL fileURLWithPath:path];            //2、录音参数设置字典，如果传值为空默认就是高质量录音    NSDictionary *settings = [NSDictionary dictionary];        //3、创建录音对象    //NSError的标准定义    __autoreleasing NSError *error;    _recorder = [[AVAudioRecorder alloc] initWithURL:url settings:settings error:&error];        //4、打开录音分贝检测    self.recorder.meteringEnabled = YES;        //5、在真机上需要    AVAudioSession *session = [AVAudioSession new];    [session setCategory:AVAudioSessionCategoryRecord error:nil];}- (void)prepareRecorder {    //1、准备录音    [self.recorder prepareToRecord];    //2、开始录音    [self.recorder record];    //3、添加计时器，对录音分贝进行循环检测    [self updateMetering];}- (void)updateMetering{    if (self.displayLink == nil) {        //1、创建录音计时器        self.displayLink = [CADisplayLink displayLinkWithTarget:self selector:@selector(updateMeterSay)];        //2、把计时器加入到运行循环中        [self.displayLink addToRunLoop:[NSRunLoop mainRunLoop] forMode:NSDefaultRunLoopMode];    }    //如果录音计时器暂停了，就打开    if (self.displayLink.isPaused) {        self.displayLink.paused = NO;    }}//录音计时器循环调用的方法- (void)updateMeterSay {    //根据分贝的大小，来自动停止录音    //1、更新分贝信息    [self.recorder updateMeters];    //2、获取分贝信息    //取值为：0(大)～-160    CGFloat power = [self.recorder averagePowerForChannel:0];    //3、若2秒没有声音，自动停止录音    static NSInteger number;    //4、displayLink，一秒默认60次    if (power < -30) {        //判断是否很安静        number++;        if (number/120 > 2)        {            [self stopRecorder];        }    }}- (void)pauseRecorder {    //暂停录音，不会保存录音文件，需要进行停止    [self.recorder pause];    //暂停循环    self.displayLink.isPaused = YES;}- (void)stopRecorder {    //停止录音，会产生最终的录音文件    [self.recorder stop];    //暂停循环    self.displayLink.paused = YES;}

3.3、录音参数的设置

#import<AVFoundation/AudioSettings.h>//settings 设置参数 录音相关参数 声道 速率 采样率 NSMutableDictionary *setting = [NSMutableDictionary dictionary]; // 音频格式 setting[AVFormatIDKey] = @(kAudioFormatAppleIMA4); // 音频采样率 setting[AVSampleRateKey] = @(600.0); // 音频通道数 setting[AVNumberOfChannelsKey] = @(1); // 线性音频的位深度 setting[AVLinearPCMBitDepthKey] = @(8);

3.4、录音编码 

1、编码是信息从一种形式转换为另一种形式的过程。 编码格式：

 2、文件格式(不同的文件格式, 可保存不同的编码格式编码的文件)：   

 .wav：特点: 音质最好的格式, 对应PCM编码；适用: 多媒体开发、保存音乐和音效素材。   

 .mp3：特点: 音质好，压缩比比较高，被大量软件和硬件支持；适用: 适合用于比较高要求的音乐欣赏。        

.caf：特点: 适用于几乎iOS中所有的编码格式 注：caf 文件格式, 因为某些编码设置, 文件有可能会很大, 而且caf, 格式并不是很通用, 所以在开发过程中, 一般会进行压缩转码MP3; 

  二、视频

iOS提供了MPMoviePlayerController、MPMoviePlayerViewController两个类，可以用来轻松播放视频和网络流媒体/网络音频，MPMoviePlayerViewController只能全屏播放视频，这两个类都定义在了MediaPlayer框架中。

 MPMoviePlayerController类的简介：继承自NSObject 内部有个view可以展示视频内容将该视图添加其他控制器的view上，即可显示视频内容 MPMoviePlayerController可以播放的视频格式包括：H.264、MPEG-4等支持的文件扩展名包括：avi,mkv,mov,m4v,mp4等 

可以从苹果官网：http://support.apple.com/kb/HT1425下载一些用来测试的视频文件，文件都比较小 

提示：MPMoviePlayerController并不支持所有的视频格式，如果要播放不支持的视频格式，需要借助第三方框架进行解码，如VLC   https://github.com/videolan/vlc

 1、视频播放 实现方案四种 

1.1、AVPlayer 

优点:       

可以自定义UI, 进行控制

 缺点:      

 单纯的播放, 没有控制UI, 而且如果要显示播放界面, 需要借助AVPlayerLayer, 添加图层到需要展示的图层上

//1、通过远程URL创建AVPlayer对象    NSURL *remoteURL = [NSURL URLWithString:@"http://xxx.com/e-b734-ac55ab528aa8/L.mp4"];    _player = [AVPlayer playerWithURL:remoteURL];    开始播放        [self.player play];        //2、存在问题    //只能播放声音, 看不到图像    //解决方案: 需要借助AVPlayerLayer对象, 根据player创建图层, 添加到视图上    //3、 实现视频显示功能    AVPlayerLayer *layer = [AVPlayerLayer playerLayerWithPlayer:self.player];        layer.frame = CGRectMake(0, 0, self.view.bounds.size.width, self.view.bounds.size.height * 9 / 16);    //添加到需要展示的视图上即可        [self.view.layer addSublayer:layer];

1.2、MPMoviePlayerController
优点:      
自带的播放控制UI, 不需要手动添加
缺点:    
不能自定义UI    
只能将此控制器视图添加到其他视图进行展示    
此控制器不是视图控制器, 不能弹出

#import <MediaPlayer/MediaPlayer.h>#import <AVKit/AVKit.h>- (IBAction)playNoViewMovie:(UIButton *)sender { //方式二：不带view的播放器的控制器 //1、获取视频文件的url地址NSURL *fileUrl = [[NSBundle mainBundle] URLForResource:@"Cupid_高清.mp4" withExtension:nil]; //2、创建不带view的视频播放器 //ios9.0过期 _mpC = [[MPMoviePlayerController alloc] initWithContentURL:fileUrl]; //3、设置View.frame _mpC.view.frame = CGRectMake(0, 0, 300, 400); //4、添加到控制器view // [self.view addSubview:_mpC.view]; //5、准备播放，默认play隐式调用 [_mpC prepareToPlay]; //6、开始播放 [_mpC play]; //7、控制模式 self.mpC.controlStyle = MPMovieControlStyleNone;}

1.3、MPMoviePlayerViewController
优点:      
自带的播放控制UI, 不需要手动添加     
此控制器是视图控制器, 可以弹出, 可以压栈    
也可以手动调整视图大小, 添加到其他视图上
缺点:     
不能自定义UI

#import <MediaPlayer/MediaPlayer.h>#import <AVKit/AVKit.h>- (IBAction)moviePlayer:(UIButton *)sender {    //方式一：带view的播放器的控制器，播放完成会自动退出    //1、获取视频文件的url地址    NSURL *fileUrl = [[NSBundle mainBundle] URLForResource:@"minion_01.mp4" withExtension:nil];    //2、创建带view的视频播放器    //ios9.0过期    MPMoviePlayerViewController *mpMV = [[MPMoviePlayerViewController alloc] initWithContentURL:fileUrl];    //3、模态跳出播放器    [self presentViewController:mpMV animated:YES completion:nil];}

1.4、MPMoviePlayerController、MPMoviePlayerViewController视频播放的通知监听

- (void)viewDidLoad {    [super viewDidLoad];        //监听播放完成的通知    [[NSNotificationCenter defaultCenter] addObserver:self selector:@selector(moviePlayerPlaybackDidFinishNotification:) name:MPMoviePlayerPlaybackDidFinishNotification object:nil];}- (void)moviePlayerPlaybackDidFinishNotification:(NSNotification *)notif {        MPMovieFinishReason reason = [notif.userInfo[MPMoviePlayerPlaybackDidFinishReasonUserInfoKey] integerValue];    switch (reason) {        case MPMovieFinishReasonPlaybackEnded:            NSLog(@"播放结束");            //进行视频切换，更换播放视频的地址            break;        case MPMovieFinishReasonPlaybackError:            NSLog(@"播放错误");            break;        case MPMovieFinishReasonUserExited:            NSLog(@"播放退出");            break;        default:            break;    }}

1.5、针对于第2种和第3种实现方案, 在iOS9.0之后, 统一使用AVPlayerViewController
优点: 
     自带的播放控制UI, 不需要手动添加
     此控制器是视图控制器, 可以弹出, 可以压栈
     也可以手动调整视图大小, 添加到其他视图上
缺点:
     不能自定义UI

#import <AVKit/AVKit.h>#import <AVFoundation/AVFoundation.h>- (IBAction)playNoViewMovie:(UIButton *)sender {    //1、获取视频文件的url地址    NSURL *fileUrl = [[NSBundle mainBundle] URLForResource:@"Cupid_高清.mp4" withExtension:nil];    //2、创建播放器    AVPlayerViewController *playerVc = [AVPlayerViewController new];    //3、创建player    playerVc.player = [AVPlayer playerWithURL:fileUrl];    //4、开始播放    [playerVc.player play];    //5、模态播放器    // [self presentViewController:playerVc animated:YES completion:nil];    //5、自定义播放器视图的大小    playerVc.view.frame = CGRectMake(0, 0, 300, 400);    [self.view addSubview:playerVc.view];}

2、视频截图
把视频中的某一帧作为视频的封面

#import <AVFoundation/AVFoundation.h>//点击屏幕开始截图- (void)touchesBegan:(NSSet<UITouch *> *)touches withEvent:(UIEvent *)event {    //1、获取视频文件的url地址    NSURL *fileUrl = [[NSBundle mainBundle] URLForResource:@"Cupid_高清.mp4" withExtension:nil];    //2、创建资源    AVAsset *asset = [AVAsset assetWithURL:fileUrl];    //3、创建资源图片生成器    AVAssetImageGenerator *imgGenerator = [[AVAssetImageGenerator alloc] initWithAsset:asset];    //4、开始生成图片    //要截取哪一帧    //参数1：视频每秒的帧数    //参数2：当前视频每秒的帧数    CMTime time = CMTimeMake(30, 1);    NSValue *value = [NSValue valueWithCMTime:time];    [imgGenerator generateCGImagesAsynchronouslyForTimes:@[value] completionHandler:^(CMTime requestedTime, CGImageRef _Nullable image, CMTime actualTime, AVAssetImageGeneratorResult result, NSError * _Nullable error) { //线程同步        dispatch_sync(dispatch_get_main_queue(), ^{            self.image = [UIImage imageWithCGImage:image]; });    }];}

3、视频的录制

#import <MobileCoreServices/MobileCoreServices.h>#import <MediaPlayer/MediaPlayer.h>#import <AssetsLibrary/AssetsLibrary.h>//录制视频- (void)didClickMovie {    //1、判断相机是否可用    if ([UIImagePickerController isSourceTypeAvailable:UIImagePickerControllerSourceTypeCamera]) { return; }    //2、创建图片选择器    UIImagePickerController *picker = [UIImagePickerController new];    //3、设置类型    picker.sourceType = UIImagePickerControllerSourceTypeCamera;    //4、设置媒体类型    picker.mediaTypes = @[(NSString *)kUTTypeMovie];    //5、设置相机的检测模式    picker.cameraCaptureMode = UIImagePickerControllerCameraCaptureModeVideo;    //6、设置视频的质量    picker.videoQuality = UIImagePickerControllerQualityTypeHigh;    //7、设置代理    picker.delegate = self;    //8、模态弹出    [self presentViewController:picker animated:YES completion:nil];}#pragma mark - UIImagePickerControllerDelegate//选中视频时，进行播放- (void)imagePickerController:(UIImagePickerController *)picker didFinishPickingMediaWithInfo:(NSDictionary<NSString *,id> *)info{    //1、判断是否是视频媒体    NSString *mediaType = info[UIImagePickerControllerMediaType];    id url = info[UIImagePickerControllerMediaURL];    //2、播放视频    if ([mediaType isEqualToString:(NSString *)kUTTypeMovie]) {        if (self.playerVc == nil) {            self.playerVc = [MPMoviePlayerController new];            self.playerVc.view.frame = CGRectMake(0, 0, 300, 400);            [self.view addSubview:self.playerVc.view];        }        self.playerVc.contentURL = url; [self.playerVc play];    }    //3、保存视频    if (picker.sourceType == UIImagePickerControllerSourceTypeCamera) {        ALAssetsLibrary *assetsLibrary = [ALAssetsLibrary new];        //参数一：要保存视频的url        [assetsLibrary writeVideoAtPathToSavedPhotosAlbum:url completionBlock:^(NSURL *assetURL, NSError *error) { }];    }    [self dismissViewControllerAnimated:YES completion:nil];}

4、视频压缩

#import "ViewController.h"#import <AVFoundation/AVFoundation.h>#import <MobileCoreServices/MobileCoreServices.h>@interface ViewController () <UINavigationControllerDelegate, UIImagePickerControllerDelegate> @end@implementation ViewController- (void)viewDidLoad {    [super viewDidLoad];}//录制视频- (void)didClickMovie {    //1、相册是否可用    if ([UIImagePickerController isSourceTypeAvailable:UIImagePickerControllerSourceTypePhotoLibrary]) {        return;    }        //2. 创建图像选择器    UIImagePickerController *picker = [UIImagePickerController new];        //3. 设置类型    picker.sourceType = UIImagePickerControllerSourceTypeSavedPhotosAlbum;        //4. 设置媒体类型    picker.mediaTypes = @[(NSString *)kUTTypeMovie];        //5. 设置代理    picker.delegate = self;        //6. 模态弹出    [self presentViewController:picker animated:YES completion:nil];    }#pragma mark - UIImagePickerControllerDelegate//选中视频的时候进行压缩- (void)imagePickerController:(UIImagePickerController *)picker didFinishPickingMediaWithInfo:(NSDictionary<NSString *,id> *)info{        //1、判断是否是视频媒体    NSString *mediaType = info[UIImagePickerControllerMediaType];        id url = info[UIImagePickerControllerMediaURL];        //2、开始导出  -->  压缩    [self exportWithURL:url];        [self dismissViewControllerAnimated:YES completion:nil];}- (void)exportWithURL:(NSURL *)url {        //1、获取资源    AVAsset *asset = [AVAsset assetWithURL:url];        //2、创建资源会话对象    AVAssetExportSession *session = [[AVAssetExportSession alloc] initWithAsset:asset presetName:AVAssetExportPresetLowQuality];        //3、设置导出路径    session.outputURL = [NSURL fileURLWithPath:[NSTemporaryDirectory() stringByAppendingPathComponent:@"123.mov"]];        //4、设置导出类型    session.outputFileType = AVFileTypeQuickTimeMovie;        //5、开始导出    [session exportAsynchronouslyWithCompletionHandler:^{        NSLog(@"导出成功！");    }];  }