VCL

H.264的算法在概念上可以分為兩層：視頻編碼層（VCL：Video Coding Layer）負責高效的視頻內容表示，網絡提取層（NAL：Network Abstraction Layer）負責以網絡所要求的恰當的方式對數據進行打包和傳送。在VCL和NAL之間定義了一個基於分組方式的接口，打包和相應的信令屬於NAL的一部分。這樣，高編碼效率和網絡友好性的任務分別由VCL和NAL來完成。

VCL層包括基於塊的運動補償混合編碼和一些新特性。與前面的視頻編碼標準一樣，H.264沒有把前處理和後處理等功能包括在草案中，這樣可以增加標準的靈活性。