• 背景:一款将iPhone/iPad屏幕和声音等内容发送到华为智慧屏上共享,支持30fps视频,无损PCM音频;
• 技术方案:使用MVC设计模式、Replaykit数据共享、H264视频编码、WebRTC音频去噪音、Instruments内存优化、App崩溃分析处理、视频YUV传输效率优化、GCDSocket+内存共享传输CMSampleBuffer视频数据;音视频数据组包拆包处理;YUV420转RGB数据转换;
• 效果:1.可以音视频数据同步共享;2.视频帧率由5帧提升到30帧;3. CPU性能由90%降低到45%左右;