简介：CSDN博客专家，专注Android/Linux系统，分享多mic语音方案、音视频、编解码等技术，与大家一起成长！

一、简述本文主要介绍FFmpeg编程中用到的基础知识，包含常见音视频概念，常用API函数，常用结构体，解封装流程，解复用器流程以及注册等。二、常见音视频概念容器/文件（Conainer/File）：特定格式的多媒体文件，比如mp4、flv、mkv等媒体流（Stream）：表示时间轴上的一段连续数据，比如一段声音、一段视频或一段字幕；数据可以是压缩的，也可以是非压缩的，其中压缩的数据需要关联特定的编

libavcodec.so是一个包含音频/视频编解码器解码器和编码器的库。libavfilter.so是一个包含媒体过滤器

媒体流（Stream）：表示时间轴上的一段连续数据，如一段声音数据、一段视频数据或一段字幕数据，可以是压缩的，也可以是非压缩的，压缩的数据需要关联特定的编解码器（有些码流音频他是纯PCM）。

FFmpeg库简介avcodec:编解码,包含avformate:封装格式处理avfilter:滤镜特效处理avdevice:输入输出设备avutil:工具库swresample:音频采样处理swscale

它提供了录制、转换以及流化音视频的完整解决方案，包含了非常先进的音频/视频编解码库libavcodec，为了保证高可移植性和编解码质量，libavcodec里很多code都是从头开发的。

主板微型小巧，采用了高性价比RK3308核心处理器，整合高性能CODEC音频编解码器，支持国内外多种人工智能及物联网操作系统，可配置六个麦克风阵列以及POE扩展板。

该芯片采用ARM架构，采用先进的8nm制程工艺，集成了四核Cortex-A76和四核Cortex-A55（共8核），以及单独的NEON协处理器，支持8K视频编解码，提供了许多功能强大的嵌入式硬

  做图像处理的朋友们经常会有视频编解码的需求，常用的方法是要么增加一个专有芯片要么买专用的FPGA实现的IP，这都增加了设计复杂度以及成本，ZynqMPSoC的EV系列含有VCU视频编解码单元，就非常好的解决了这个问题

ZynqMPVCU是XilinxZynqUltraScale+MPSoC系列中的一个视频编解码单元，它提供了硬件加速的视频编解码功能，可以帮助开发人员更高效地实现视频应用。

ZynqUltraScale+MPSoC目标一、ZynqUltraScale+mpsoc:体系结构二、ZynqUltraScale+mpsoc:EV器件三、ZynqUltraScale+MPSoC:视频编解码单元四

媒体描述包含演示文稿及其所有流的描述，包括可用的编解码器、动态RTP有效负载类型、协议堆栈以及内容信息（如语言或版权限制

音视频技术解析封装技术+视频压缩编解码+音频压缩编解码这是技术层流媒体传输协议这是网络层视频播放器解析解协议从视频播放器的角度做解析，拿到传输而来的视频数据后，首先要解协议（传输协议）自然的本地视频经过硬盘传输数据自然没有解协议的过程解协议的作用

它采用高度集成的设计，将音频编解码器、Flash存

21关经过这两个可知，有加密，使用了base64加密解密后base64编解码地址：https://tool.oschina.net/encrypt?

同样上层的APP产生的数据也应该是这个值、Android中测试若不是规定值编解码有问题。

mp4转成flv格式文件步骤如下：1.打开输入文件，创建输入文件和输出文件的上下文环境2.遍历输入文件的每一路流，每个输入流对应创建一个输出流，将输入流中的编解码参数直接拷贝到输出流中。

→→→Manythanksto杨成立陈诚——AV1编解码优化的更新比2018年AV1版本，提升了18%压缩效率，提升1.5倍速度，减少50%内存消耗。比VP9提升了35%。

那时VP8是这家公司的编解码器，谷歌收购On2后做的第一件事就是将它原封不动地开源出去，使它成为一款免专

开启解码4.开启渲染5.反馈给ui本文福利，免费领取C++音视频学习资料包+学习路线大纲、技术视频/代码，内容包括（音视频开发，面试题，FFmpeg，webRTC，rtmp，hls，rtsp，ffplay，编解码

开发过程解决的问题1、理解FFMPEG的播放原理2、FFMPEG版本问题3、关于基本编程方面4、关于中间问题解决的一些经验最近在linux上开发一个播放器，主要是为熟悉视频编解码的过程。

QByteArray的基本用法1、初始化和赋值2、访问和修改元素3、常用方法4、数据转换二、QByteArray与文件操作三、QByteArray与网络编程四、QByteArray数据编码1、Base64编解码

回顾信道编解码知识，我们知道信道编码要求编码具有检纠错能力，作为FEC（forwarderrorcorrection）前向纠错编码的一类，线性分组码表示校验位与信息位的关系能够线性表示。

WebRTCM84ReleaseNoteshttps://groups.google.com/g/discuss-webrtc/c/MRAV4jgHYV0/m/5019yB-HAwAJwebrtcM79支持H264编解码

-c:指定编解码器;copy是一个特殊编解码器，它直接复制输入流到输出流中，不会改变其内容，不进行重新编码；指定copy可保持质量，进行无损复制；(3).-map:指定输入文件的映射

OSI体系结构是法律上的国家标准，从上往下讲分别是：应用层–作用是–为计算机用户提供服务表示层–作用是–数据处理(编解码、加密解密、压缩解压缩)会话层–作用是–管理(建立、维护、重连)应用程序之间的会话传输层

第1章概述1.1背景系统与充值平台的接口是文件的方式，充值平台将文件内容以ASN.1方式进行编码，系统需要根据ASN.1协议进行解码。关于ASN.1开发的资料，网上资料非常少，特别是涉及到具体的语言，如java，资料、案例及第三方库更是少之又少。从无到有是很困难的，为了防止后期其他系统还需要做类似接口，将其记录为文章以便后查，文章会以充值接口作为案例进行介绍。1.2ASN.1概念在和领域，ASN.

ASN.1C运行库提供一套底层的编解码基本的ASN.1类型(布尔，整数等)和丰富的实用功能以操纵应用程序消息的函数集

第1章概述1.1背景系统与充值平台的接口是文件的方式，充值平台将文件内容以ASN.1方式进行编码，系统需要根据ASN.1协议进行解码。关于ASN.1开发的资料，网上资料非常少，特别是涉及到具体的语言，如java，资料、案例及第三方库更是少之又少。从无到有是很困难的，为了防止后期其他系统还需要做类似接口，将其记录为文章以便后查，文章会以充值接口作为案例进行介绍。1.2ASN.1概念在和领域，ASN.

目录1、CameraLink视频协议简介免责声明2、目前我已有的CameraLink收发工程3、FPGA实现CameraLink视频解码4、vivado工程介绍5、福利：工程源码获取1、CameraLink

示例--加载pb文件,这个是从pbtxt转换得到的--转换命令:protoc.exe-operson.pb--cpp_out=cppperson.pbtxt--protoc.exe下载地址:https://github.com/protocolbuffers/protobuf/releasesprotobuf.load(io.readFile("/luadb/person.pb"))localtb

经过测试，编译后的测试应用可以正常进行编解码及其他功能，就是没有打印输出平台是Rk3588香橙派plus，安装的ubuntu好像是他默认现在打到/var/log/syslog里面了修改的文件路径如下/home

需求背景开发rk3588音视频硬件编解码，然后看见他的输入文件格式。。只能是裸的文件。不能是压缩过的。

FFmpeg是一个强大的多媒体处理工具，支持音频和视频的编解码、转换等操作。Linux安装FFmpeg在L

它包含了非常先进的音频/视频编解码库libavcodec，为了保证高可移植性和编解码质量，libavcodec里很多code都是从头开发的。

当需要使用某个编解码器、容器格式、网络协议时，只需要在编译文件中打开、配置，就可以在FFmpeg中使用。

1.PCMPCM脉冲编码调制是PulseCodeModulation的缩写。脉冲编码调制是数字通信的编码方式之一。主要过程是将话音、图像等模拟信号每隔一定时间进行取样，使其离散化，同时将抽样值按分层单位四舍五入取整量化，同时将抽样值按一组二进制码来表示抽样脉冲的幅值。1.1语音编码原理有一定电子基础的都知道传感器采集音频信号是模拟量，而我们实际传输过程中使用的是数字量。而这就涉及到模拟转数字的过程

文章目录前言一、接口设计二、完整代码三、使用示例1.双声道2.单声道总结前言mp4的音频流通常是aac编码，我们做音视频采集的时候就需要将，采集的音频PCM编码成aac，然后再打包进mp4，而aac编解码库中

转载于：https://blog.csdn.net/weixin_37779156/article/details/102813455PCM整理简介PCM：又称脉冲编码调制。人耳听到的是模拟信号，ＰＣＭ是把声音从模拟信号转化为数字信号的技术。原理是用一个固定的频率对模拟信号进行采样，采样后的信号在波形上看就像一串连续的幅值不一的脉冲（脉搏短暂起伏的电冲击），把这些脉冲的幅值按一定的精度进行量化，这

在上一篇初识MediaCodec中，我们认识了MediaCodec，知道了MediaCodec的基本工作流程和开发注意事项，这一篇我将讲述如何利用MediaCodec编解码AAC。

音频的编解码使用MediaCodec的方法是很相似的，由于之前做的项目是要实现全双工通信，所以在手机录音编码之后发送给IPC端的同时，还要解码来自IPC端的音频数据并播放，因此学习了AAC编解码。

转载请标明出处http://blog.csdn.net/tinsanmr/article/details/51049179，本文出自：【Tinsan的博客】从今天开始每周不定期更新博客，把这一周在工作与学习中遇到的问题做个总结。俗话说：好记性不如写博客，善于总结的人才能走的更远。写博客这种利人利己的好处我就不一一列举了，总之，谁做谁知道，哈哈。在文章中如果有什么问题或者错误，欢迎各位的讨论和指正。

前言测试环境：ffmpeg的4.3.2自行编译版本windows环境qt5.12AAC编码是MP3格式的后继产品，通常在相同的比特率下可以获得比MP3更高的声音质量，是iPhone、iPod、iPad、iTunes的标准音频格式。AAC相较于MP3的改进包含：更多的采样率选择：8kHz~96kHz，MP3为16kHz~48kHz更高的声道数上限：48个，MP3在MPEG-1模式下为最多双声道，MP

前言在了解Netty编解码之前，先了解Java的编解码：编码（Encode）称为序列化，它将对象序列化为字节数组，用于网络传输、数据持久化或者其它用途。

文件格式：首选视频格式是.mp4和.mov，首选编解码器是h.264和ProRes。我们建议帧速率为60fps，以实现高跟踪精度并减少运动模糊。我们还

urllib的使用response服务器返回的数据：一个类型，六个方法urllib.request.urlretrieve(url,filename)请求下载网页请求下载图片请求下载视频2、请求对象的定制3.编解码

在FFmpeg6.0“VonNeumann“版本发布八个多月后，FFmpeg6.1被命名为“Heaviside”，引入了多线程Vulkan硬件加速解码，支持H264、HEVC和AV1编解码器，以及VAAPI

二、定义完后进行编解码插件开发，在线插件部署成功即可。

一、MP3语音芯片的优势特征MP3语音芯片具有多种显著的优势特征，其中包括：（1）高品质音质：MP3语音芯片采用先进的音频编解码技术，能够实现高品质的音频输出，让用户享受更加清晰、醇厚的音质体验。

该核心板集成了ARMCortex-A73和ARMCortex-A53处理器，提供高达2.0GHz的处理能力，并配备功能强大的多标准视频编解码器。