苹果于北京时间2017年6月6日凌晨召开WWDC 2017大会,在此次发布会上按照惯例推出了iOS 11系统,同时也带来了许多新鲜特性,如录屏功能、相册查看gif图片、Siri支持翻译等。作为音视频开发者,我们更着重关注的是此次苹果为iPhone为推出了两种全新的媒体格式"HEVC和HEIF":视频方面使用HEVC来代替H.264,而图片则是用HEIF来代替JPG。这两种格式号称可以在保证画质的情况下,大大减少视频、照片的大小,经常因为容量不足而头疼的朋友将成为最大受益者。
由此可见,如果在直播过程中使用H.265的视频编码格式,可使用较少的带宽,得到更优的画质。在iOS系统推出H.265的硬编硬解功能之前,我们在iphone手机上使用的H.265编解码功能,均为软件编解码,其缺点是cpu占用高,手机发热量大,无法支撑高分辨、高帧率的实时场景。相信此次iOS11的发布,会推动H.265在直播市场的发展。
HEVC和h.264性能对比参考一下:
https://wap.ithome.com/html/321563.htm
在前端时间做项目的时候遇到一个坑,就是要拍摄视频,通过OSS进行上传。遇到一个奇怪的问题,就是iphone8拍摄的时候,直接进行OSS上传,在iPhone6上不能播放(播放只有声音,没有图像),在其他设备录制均正常。
这是由于低版本的设备不支持HEVC。
HEVC仅支持iPhone 7及以上设备
Iphone6、6s亲测都不支持H.265,软解H265视频只有声音没有画面
进过查资料发现
/*!
@property availableVideoCodecTypes
@abstract
Indicates the supported video codec formats that can be specified in setOutputSettingsForConnection:.
@discussion
The value of this property is an NSArray of AVVideoCodecTypes that can be used as values for the AVVideoCodecKey in the receiver's setOutputSettingsForConnection: dictionary. The array of available video codecs may change depending on the current session preset. The first codec in the array is used by default when recording a file.
*/
@property(nonatomic, readonly) NSArray *availableVideoCodecTypes NS_AVAILABLE_IOS(10_0);
上面是Xcode里面AVCaptureMovieFileOutput(视频文件输出)的一个属性
,上面的注释进行翻译:
此属性的值是avvideocodectypes可用于接收机的setoutputsettingsforconnection的avvideocodeckey值一个NSArray:词典。可用的视频编解码器阵列可能会随着当前会话预置而改变。在录制文件时,默认使用数组中的第一个编解码器。
而继续点击进行发现,
typedef NSString * AVVideoCodecType NS_STRING_ENUM;
AVF_EXPORT AVVideoCodecType const AVVideoCodecTypeHEVC /* @"hvc1" */ API_AVAILABLE(macos(10.13), ios(11.0), tvos(11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT AVVideoCodecType const AVVideoCodecTypeH264 /* @"avc1" */ API_AVAILABLE(macos(10.13), ios(11.0), tvos(11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT AVVideoCodecType const AVVideoCodecTypeJPEG /* @"jpeg" */ API_AVAILABLE(macos(10.13), ios(11.0), tvos(11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT AVVideoCodecType const AVVideoCodecTypeAppleProRes4444 /* @"ap4h" */ API_AVAILABLE(macos(10.13), ios(11.0), tvos(11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT AVVideoCodecType const AVVideoCodecTypeAppleProRes422 /* @"apcn" */ API_AVAILABLE(macos(10.13), ios(11.0), tvos(11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT NSString *const AVVideoCodecHEVC /* @"hvc1" */ API_DEPRECATED_WITH_REPLACEMENT("AVVideoCodecTypeHEVC", macos(10.13, 10.13), ios(11.0, 11.0), tvos(11.0, 11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT NSString *const AVVideoCodecH264 /* @"avc1" */ API_DEPRECATED_WITH_REPLACEMENT("AVVideoCodecTypeH264", macos(10.7, 10.13), ios(4.0, 11.0), tvos(9.0, 11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT NSString *const AVVideoCodecJPEG /* @"jpeg" */ API_DEPRECATED_WITH_REPLACEMENT("AVVideoCodecTypeJPEG", macos(10.7, 10.13), ios(4.0, 11.0), tvos(9.0, 11.0)) __WATCHOS_PROHIBITED;
AVF_EXPORT NSString *const AVVideoCodecAppleProRes4444 /* @"ap4h" */ API_DEPRECATED_WITH_REPLACEMENT("AVVideoCodecTypeAppleProRes4444", macos(10.7, 10.13)) API_UNAVAILABLE(ios, tvos, watchos);
AVF_EXPORT NSString *const AVVideoCodecAppleProRes422 /* @"apcn" */ API_DEPRECATED_WITH_REPLACEMENT("AVVideoCodecTypeAppleProRes422", macos(10.7, 10.13)) API_UNAVAILABLE(ios, tvos, watchos);
也就是说iphone拍摄视频的时候默认用第一个编码,而iPhone8支持HEVC,所以使用了HEVC,但是在低版本的设备不支持,这就是不能播放的原因。
解决方案:设置一下拍摄视频的编码就行
///----------------巨坑的问题,iphone8上面录制的视频,在iphone6上不能播放-------------------------------------
if (@available(iOS 11.0, *)) {
NSMutableDictionary* dic = [NSMutableDictionary dictionary];
dic[(id)AVVideoCodecKey] = AVVideoCodecH264;
[_movieFileOutput setOutputSettings:dic forConnection:self.captureConnection];
NSDictionary* dics = [self.movieFileOutput outputSettingsForConnection:self.captureConnection];
DDLog(@"dic = %@",dics);
}
******但是发现了又一个问题,当用手机自带的相机进行拍摄视频,然后传到OSS上面,在iPhone6上可以正常播放,这个是iphone,对于编码做了处理,不太清楚是怎么处理的。
参考:
https://www.cnblogs.com/v2m_/p/7904737.html
https://www.cnblogs.com/edisongz/p/7062098.html
https://www.cnblogs.com/isItOk/p/5964647.html
http://iphone.poppur.com/JiaoCheng/iOS11-HEIF-HEVC.html
http://www.jianshu.com/p/cb93e618e041