05.视频编解码器
05.视频编解码器
1.视频编解码介绍
在视频的空间冗余，时间冗余，图像构造冗余，知识冗余，视觉冗余等因素中尽可能降低单次传输信息的数据量
视频的关键帧I、P帧（帧间预测编码帧）、B帧（双向预测编码帧）
2. 了解 GPU
3. 关于H.264编码
影视飙风 码率 GG，往事哈哈
image-20241020204225937
人眼对亮暗更加敏感
DCT变换，套用基本图样组成所有图像（频域，图像域？本质是FT）
转为存储DCT系数
进一步操作
4. FPGA & H.264 相关内容
5. Zynq7000+Ov5640基础上的图像处理（未完）
内容在 正点原子《领航者ZYNQ之嵌入式Vitis开发指南v1.2》中的实验
5.1 图像的二值化
使用 ZYNQ 开发板及 OV5640 摄像头采集 RGB565 数据，将数据转化成 Ycbcr 格式，然后进行灰度二值化，并通过 LCD 屏显示
图像二值化的作用：
优点：（ 1）消除噪点：二值化可以去除图像中的噪点， 容易确定轮廓，方便图像分析。（ 2）对比强烈：二值化后的图像中只有两种颜色， 对比强烈，重点突出， 易于区分。（ 3） 加速图像处理： 可以加快计算速度，减少计算量；
缺点：（ 1） 信息丢失： 有损地抑制了像素之间的变化，同时大幅度抑制了图像的细节信息，例如无法处理像素值异常值。（ 2） 彩色图像不能二值化： 彩色图像需要先经过灰度化之后才能进行二值化处理。
5.2 中值滤波实验
图像可以看成是一个定义在二维平面上的信号，该信号的幅值对应像素的灰度（彩色图像对应 RGB 三个分量）。
图像的频率指的是空间频率，它和我们认知的物理频率是不同的。图像的频率是表征图像中灰度变化剧烈程度的指标，是灰度在平面空间上的梯度。不同频率信息在图像结构中有不同的作用。
图像的主要成分是低频信息，它形成了图像的基本灰度等级，对图像结构的决定作用较小；
中频信息决定了图像的基本结构，形成了图像的主要边缘结构；
高频信息形成了图像的边缘和细节，是在中频信息上对图像内容的进一步强化。
关于中值滤波如何快速求得中值，有多种方法实现，例如冒泡排序法、选择排序法等方法。
中值滤波是一种典型的非线性滤波技术，在一定条件下可以克服线性滤波器（如均值滤波）带来的图像细节模糊。
优点：消除杂散噪声点而不会或较小程度地造成边缘模糊。
缺点：对于图像中含有较多点、线、尖角细节的，不适宜采用中值滤波。
5.3 边缘检测实验
边缘检测是图像处理和计算机视觉中的基本问题，边缘检测的目的是标识数字图像中亮度变化明显的点。
图像边缘检测大幅度地减少了数据量，并且剔除了可以认为不相关的信息，保留了图像重要的结构属性。
Sobel 算法