音视频基础

# 音频

# 采样

某一时刻的声音可以由物理信息转化为数字信息表示，即为一个量化值。

采样指从时间-量化值组成的连续信号中取某一个时间点的量化值。

# 采样大小

采样大小表示一个量化值的存储范围。

# 采样率

采样率表示每秒采样的个数，单位：Hz（赫兹）。

# 声道数

单声道，双声道（左声道 + 右声道）。

# 编码格式

音频原始数据尺寸非常大，不利于传输和存储，因此需要编码压缩成音频码流。

常见无损格式：

• WAV 主流
• APE
• FLAC

常见有损格式：

• MP3 主流
• AAC 主流
• WMA
• Opus

# 视频

# 分辨率

图片是由像素组成，分辨率表示像素的数量，一般由 “ 宽像素数 * 高像素数 ” 表示。

常见分辨率比例是 16:9。名称中 P 代表行数，即高像素数。K 代表纵数，即宽像素数。

实际手机宽分辨率示例：

# 帧率

视频是由连续播放的图片组成，一张图片又称一帧。

帧率表示每秒播放的帧数，单位：fps（frame per second）。

当帧率为 24 fps 以上时，大脑会认为这是流畅播放的视频。一般电影的帧率约为每秒 24 帧，游戏则需要更高。

# 码率

码率又称比特率，表示每秒的比特数，单位：bps（bit per second），1 kbps = 1024 bps。

# 编码格式

视频原始数据尺寸非常大，不利于传输和存储，因此需要编码压缩成视频码流。

常见格式：

• H.264 主流
• H.265
• MPEG-2
• MPEG-4 主流
• VP8
• VP9
• VC-1
• AV1
• AVS

# 封装格式

把视频码流、音频码流打包到一起，然后再添加一些基本信息，例如分辨率、时长、标题等，构成一个文件，这个文件称为封装格式。

常见格式：

# 视频播放流程