視頻會議系統由視頻會議終端、視頻會議服務器（MCU，Multipoint Control Unit）、網絡管理系統和傳輸網絡四部分組成。

1、視頻會議終端

位于每個會議地點的終端，其主要工作是將本地的視頻、音頻、數據和控制信息進行編碼打包并發送；對收到的數據包解碼還原為視頻、音頻、數據和控制信息。

終端設備包括視頻采集前端（廣播級攝像機或云臺一體機）、顯示器、解碼器、編譯碼器、圖像處理設備，控制切換設備等。

2、視頻會議服務器（MCU）

作為視頻會議服務器，MCU為兩點或多點會議的各個終端提供數據交換、視頻音頻處理、會議控制和管理等服務，是視頻會議開通必不可少的設備。三個或多個會議電視終端就必須使用一個或多個MCU。MCU的規模決定了視頻會議的規模。

3、網絡管理系統

網絡管理系統是會議管理員與MCU之間交互的管理平臺。在網絡管理系統上可以對視頻會議服務器MCU進行管理和配置、召開會議、控制會議等操作。

4、傳輸網絡

會議數據包通過網絡在各終端與服務器之間傳送，安全、可靠、穩定、高帶寬的網絡是保證視頻會議順利進行的必要條件。

傳輸設備主要是使用電纜、光纜、衛星、數字微波等長途數字信道，根據會議的需要臨時組成。不開放電視會議時，這些信道就是長途電信的信道。