音视频之视频相关概念介绍

作者&投稿:征彭 2024-06-30
从事音视频开发中,视频涉及的东西比较多,尤其是编码这块,本篇介绍下视频的相关概念。

我们看到的视频其实是图像在高速变化,由于视觉的暂留效应,所以看起来就是连续的了。

我们知道有RGB 3原色,用这三种颜色可以组合成各种其他颜色。还有一种表示方法,叫YUV,也就是把颜色分成亮度和色度,这样的好处是人对于亮度信号是比较敏感的,只要有亮度信号,色度信号缺少点也看不出差异,这样就可以大大优化编码的信号。
而YUV和RGB又可以相互转换,在传输的时候使用YUV,在显示的时候使用RGB。
而对于YUV,又有几种不同的比例。

图像信息在传输的时候,如果没有编码,那么视频数据占用的带宽会非常大。举一个例子,采用4:2:0格式,亮度信号是13.5MHZ,色度是6.75MHZ,这个频率算是很低的了,这样码率就是:

如果是1080p场景,那码率就更大了。因此就需要编码。

在编码的时候,有帧内编码和帧间编码区分。帧内编码就是对一帧图像进行编码,去除冗余信息。而帧间编码就是利用运动补偿去除冗余信息,在视频场景中,连续图像帧的重复度还是很大的,这样可以把图像进行分块,然后预估块的运行信息,这样只需要把位移信息编码传输就可以了。

在视频编码中,会把图像分成不同类型的帧,主要有I,P,B帧。
I帧:这是帧内编码帧,I帧不需要参考其他帧,解码后就是一幅完整的图像。
P帧:前向预测编码帧,需要参考前面已经编码的帧来去除冗余信息完整自己的编码,也就是可以简单理解成,在解码的时候,自己是无法独立解码成一张图片的,需要参考前面已经解码的帧才可以。
B帧:双向预测内插编码帧,需要参考前面和后面的帧来完成自己的编码。也就是在解码的时候,不仅需要参考前面已经解码的帧,还需要参考后面解码的帧才可以解码成一张完整的图像。

IDR(Instantaneous Decoding Refresh)也是一种I帧,不过收到IDR帧,就表示之后的帧不会再参考IDR以前的帧了。而普通的I帧之后则有可能参考I帧之前的图像帧。

GOP(Group of Pictures)图像组,表示图像帧只会参考本组内的图像帧,而不会参考其他组的图像帧。

DTS(decodeing time stamp),用于视频的编码。PTS(presentation time stamp),用于视频解码阶段的输出。按照常理来看,这两个时间戳应该是一致的,可是由于有B帧,这样编码和显示就会出现不一致性的场景。


你是否需要了解?

音视频之视频相关概念介绍
答:在视频编码中,会把图像分成不同类型的帧,主要有I,P,B帧。I帧:这是帧内编码帧,I帧不需要参考其他帧,解码后就是一幅完整的图像。P帧:前向预测编码帧,需要参考前面已经编码的帧来去除冗余信息完整自己的编码,也就是可以简单理解成,在解码的时候,自己是无法独立解码成一张图片的,需要参考前...

音视频是什么意思
答:音视频是指音频和视频的结合体,即同时包含声音和图像的多媒体内容。音视频技术广泛应用于各种媒体形式中,如电影、电视剧、综艺节目、广告、网络直播等。它为人们提供了丰富多样的娱乐和学习方式,使得信息传播更加生动、直观和便捷。音视频中的音频部分主要包括声音信号,如人声、音乐、音效等。这些声音信号...

一、音视频基础知识
答:音频帧的概念没有那么清晰,跟音频编码格式相关,它是各个编码标准自己实现的。PCM(未经编码的音频数据)来说,它根本就不需要帧的概念,根据采样率和采样精度就可以播放,比如采样率为44.1kHz,采样进度为16位的音频,你可以算出比特率是4410016kb/s,每秒的音频数据是固定的4410016/8字节。AMR 帧比较简...

什么是音视频?
答:音视频是分开解释的:音频是正常人耳能听到的,相应于正弦声波的任何频率。正常人耳的音频范围一般约为16Hz~16kHz。视频泛指将一系列静态影像以电信号方式加以捕捉,纪录,处理,储存,传送,与重现的各种技术。连续的图像变化每秒超过24帧(frame)画面以上时,根据视觉暂留原理,人眼无法辨别单幅的静态画...

【音视频基础】码流、码率、采样率、比特率、帧速率、分辨率、高清视频...
答:深入探索音视频世界,高清视频的精髓在于一系列关键参数的交织,包括码流、码率、采样率、比特率、帧速率和分辨率。让我们逐一揭开这些概念的面纱:码流与码率码流,亦称码率,是衡量视频文件数据流量的指标,与画质息息相关。常见的高清视频格式如480P、720P(适用于快速运动)和1080P(适合慢速运动),它们...

音视频快速入门
答:视频文件是指将一系列连续静态图片数据及音频数据的一个集合。视频文件包含了视频数据、音频数据、字幕数据,而且视频文件存放视频、音频编码信息等,如我们常见H264、MPEG、yuv、acc、FLV、MP4等。概念 分辨率 1.分辨率:x像素个数 * y像素个数 2.常见的宽高比16:9和4:3。现在基本都是16:9,...

音视频是什么意思
答:音视频是指两个或两个以上不同地方的个人或群体,通过传输线路及多媒体设备,将声音、影像及文件资料互传,实现即时且互动的沟通,以实现会议目的的系统设备。多媒体技术就是通过计算机对语言文字、数据、音频、视频等各种信息进行存储和管理,使用户能够通过多种感官跟计算机进行实时信息交流的技术。多媒体...

音视频 (一) —— H.264 中的 NAL 技术
答:音视频 (一) —— H.264 中的 NAL 技术 音视频 (二) —— H.264中相关参数理解 音视频 (三) —— 视频相关参数的理解 NAL 全称 Network Abstract Layer,即网络抽象层。在 H.264/AVC 视频编码标准中,整个系统框架被分为 了两个层面:视频编码层面(VCL)和网络抽象层面(NAL)。其中,前者...

视频原理一视频、图像的基本概念
答:那么压缩之后的视频一般如何描述它的大小呢?一般对于一个视频文件,我们直接看视频的大小就可以了。但是在实时通信或者直播的时候,视频是视频流的形式,我们怎么衡量呢?这就涉及到我接下来要介绍的概念——码率。码率是指视频在单位时间内的数据量的大小,一般是 1 秒钟内的数据量,其单位一般是 Kb/s...

菜鸟也能懂的 - 音视频基础知识。
答:音频与视频基础入门:走进神秘的世界 在音视频的世界里,每一种格式和标准都隐藏着深邃的科学原理。让我们从MP4与MKV的区别开始,探索它们封装/解码的不同之处。首先,MP4和MKV犹如两道美味的料理,一个轻便易携带,另一个则承载更多的内容。它们的封装/解码格式不同,H.264和MPEG代表的是压缩技术的...