电话会议系统主要由以下几部分组成：电话通信系统（程控交换机PBX）、电话会议服务器（ctsIVR）、会议管理模块、会议操作员管理模块、数据库等组成。
电话会议系统采用模块化设计，企业可以根据自己的实际情况，在系统配置上进行从小规模到大规模的灵活选择，规模可大可小，并可平滑升级。
电话会议系统结构图如下：
电话会议系统需要与企业的PBX连接，如果没有企业内部程控交换机则可以将中继线直接接在会议系统主机上，中继线可以是普通模拟中继，也可以是E1接口（如中国一号信令、30B+D等）。在与会议系统主机的同一网段上可以配置多个会议客户端系统，通过客户端系统用户可以随时观察和监视会议系统的使用情况，并且可以建立常用用户的用户资料，也可以对常用用户进行分组，这样要呼叫某些用户开会时只需呼叫组用户即可。