1. 序列层(Sequence layer)
序列层主要用于为随机播放提供全局参数支持，这些参数包括图像宽高、像素高宽比、帧率、码率、VBV大小、帧内量化矩阵、帧间量化矩阵。
2. 图像组层(Group of pictures layer)
图像组层也是主要用于为随机播放、视频编辑、分数帧率提供支持，像直播类应用用户随时可能加入视频会话就要求尽可能短的时间内就可以将收到的码流用于解码渲染显示，这时就会有两个选择，要么选择比较短的序列（包括的图像组层要少，极端情况一下一个序列只 包括一个图像组），该方式会稍稍增大码流；要么图像组的closed_gop参数设为1从而向解码器表明某图像组的紧贴I帧后面的B帧不会参考该图像组前面的图像组中的I或P帧，这样能稍稍节省一些码率，同时也是该层存在的原因之一。
3. 图像层(Picture layer)
图像是主要的帧编码单元，以图像组为单位提供每帧的显示顺序编号，帧类型（I、P、B、D（属于帧内编码的一个类型，不过只编码直流系数，主要用于视频快速预览，只能包括于单独的图像序列，也就是说在包括D的图像序列中不能再包括其它帧类型））等信息。
4. 条带层(Slice layer)
条带是再重同步单元，主要用于误码时不至于全坏掉，主要参数是条带的第一个宏块在图像中的位置，第一个条件的位置值为0，位置值最大为175,对于存储类的可靠媒介，可以全部宏块共用一个条带，但对于直播类应用为了应对误码恢复，还是要跟据情况多分一些宏块为好，像MPEG2就会强制要求一个宏块行一个条带，虽然损失了少许灵活性，但是也可以看出标准制定者对直播或广播类应用从规范标准上给予的重视。
5. 宏块层(Macroblock layer)
宏块是运动估计与运动补偿的基本单位，主要提供宏块地扯号、运动信息等。
6. 子块层(Block layer)
子块是DCT、量化、编码的基本单元，编码采用变长游程编码量化后的残差信息，对于一个宏块来说，由于MPEG1只支持YUV 4:2:0色彩空间，所以有4个亮度子块，两个色度子块。