KR19980701471A

KR19980701471A - Multipoint video conference apparatus

Info

Publication number: KR19980701471A
Application number: KR1019970704861A
Authority: KR
Inventors: Yasushi) 노구찌 야수시(NOGUCHI; Kazuo) 모또끼 가주오(MOTOKI
Original assignee: 이데이 노부유키; 소니(주)(Sony corporation)
Priority date: 1995-11-15
Filing date: 1996-11-15
Publication date: 1998-05-15
Also published as: WO1997018663A1; RU2171015C2

Abstract

각 단말에 있어서 화질이 높은 표시화면을 얻을 수 있는 간단하고 편리한 구성의 다지점 비디오 회의장치. 다지점 비디오 회의 시스템의 각 단말을, 다른 모든 단말과 각각 다른 회선을 통해 1대 1 접속함과 동시에, 각 단말에, 다른 모든 단말에 대응하는 회선을 통해 공급되는 각 제1의 통신 데이터를 수신하여, 또한 자체단말에서 발생한 제2의 통신 데이터. 각각 대응하는 회선을 통해 다른 모든 단말에 송신하는 송신수단과, 공급되는 각 제1의 통신 데이터 및 자체단말에서 발생한 제2의 통신 데이터를 처리하는 데이터 처리수단을 설치하도록 함으로써, 각 단말이, 각각 다른 각 단말과 MCU 등의 외부기기를 사용하지 않고 1개의 회선을 통하여 그 회선이 허용량의 범위내에서 다량의 통신 데이터를 송수신할 수 있어, 이렇게하여 화질이 높은 간단하고 편리한 구성의 다지점 비디오를 실현할 수 있다.A multi-point video conferencing device with a simple and convenient configuration that can obtain a display screen with high image quality in each terminal. Each terminal of the multi-point video conferencing system is connected one-to-one with every other terminal through a different line, and at the same time, each terminal receives respective first communication data supplied through a line corresponding to all other terminals. And second communication data generated in the own terminal. Each terminal is provided by providing transmission means for transmitting to all other terminals via corresponding lines, and data processing means for processing each of the supplied first communication data and second communication data generated in its own terminal. It is possible to transmit and receive a large amount of communication data within the allowable range through one line without using each other terminal and external device such as MCU. It can be realized.

Description

Multipoint video conferencing device

종래의 다지점 비디오 회의 시스템에서는 CCITT(international Telegraph and Telephone Consultative Committee) H.320에 있어서 제안되어 있는 다지점 비디오 회의 시스템이 공지되어 있고, 이 다지점 비디오 회의 시스템은 텔레비젼 회의·전화단말(이하, 단지 「단말」이라 한다)에외, 다지점 텔레비젼 회의를 실현하기 위해서 MCU(Multipoint Control Unit)라고 하는 장치를 사용하고 있다. 그리고 이 다지점 비디오 회의 시스템에서는 다지점 텔레비젼 회의에 참가하는 모든 단말과 MCU를 전화 통신망을 통해 접속하고, MCU가 각 지점간의 통신을 제어함으로써 다지점 텔레비젼 회의를 행할 수 있도록 이루어져 있다.In the conventional multipoint video conferencing system, a multipoint video conferencing system proposed in the International Telegraph and Telephone Consultative Committee (CCITT) H.320 is known, and this multipoint video conferencing system is a television conference / telephone terminal (hereinafter, In addition to the "terminal", a device called a multipoint control unit (MCU) is used to realize a multipoint television conference. In this multipoint video conferencing system, all terminals and MCUs participating in the multipoint television conference are connected through a telephone network, and the MCU controls multipoint television conferences by controlling communication between the respective points.

그렇지만 이 종류의 다지점 비디오 회의 시스템에서는 예를 들면 3지점과 같은 소수점에서의 텔레비젼 회의를 행할시에 있어서도 가격이 높은 상술의 MCU를 필요로 하기 때문에, 전체로서의 설비 투자액이 막대해지는 문제가 있고, 또한 MCU의 설치장소에 따라서는 텔레비젼 회의에 소비되는 통신요금이 고액이되는 문제점도 있었다.However, this kind of multi-point video conferencing system requires the above-mentioned MCU having a high price even when conducting a television conference at a decimal point such as 3 points, so that the total amount of equipment investment as a whole increases. In addition, depending on the installation location of the MCU, there is a problem in that the communication fee consumed for a television conference is expensive.

이러한 과제를 해결하기 위해서, 최근, 예를 들면 1993-22321(5,365,265)호 공보라든지 특개평 1993-22322(5,402,418)호 공보에도 개시되어 있는 바와 같이, MCU를 사용하지 않고 도 1과 같이 각 단말(2 내지 5)을 링형상으로 접속함으로써 다 지점 비디오 회의 시스템을 구축하는 방법이 제안되어 있다.In order to solve this problem, as disclosed in, for example, the 1993-22321 (5,365,265) publication or the Japanese Laid-Open Patent Publication No. 1993-22322 (5,402,418), each terminal (Fig. A method for constructing a multi-point video conferencing system by connecting 2 to 5 in a ring shape has been proposed.

상기의 다지점 비디오 회의 시스템(1)에서는 각 단말(2 내지 5)이 전단의 단말(5, 2, 3, 4)로부터 디지탈 통신로(6)를 통해 이송되어 온 통신프레임(예를 들면, CCITT 권고 H.221에 규정되는 프레임)내에, 자체단말(2 내지 5)에 있어서 발생시킨 텔레비젼 전화·회의용 데이터로 이루어진 통신 데이터를 순차 격납하면서, 이 통신 프레임을 다음단계의 단말(3, 4, 5, 2)에 디지탈 통신로(6)를 통해 순차전송함으로써, 다지점 텔레비젼 회의를 실현할 수 있도록 이루어져 있다.In the multi-point video conferencing system 1, a communication frame (for example, each terminal 2 to 5) has been transferred from the terminals 5, 2, 3, and 4 through the digital communication path 6 in advance. In the frame specified in CCITT Recommendation H.221), the communication frames are sequentially stored in the next-generation terminal (3, 4, while storing communication data composed of television telephone and conference data generated in the own terminals 2 to 5). 5 and 2 are sequentially transmitted through the digital communication path 6, so that multi-point television conferences can be realized.

그런데 이러한 다지점 비디오 회의 시스템(1)에서는 회의에 참가하고 있는 모든 단말(2 내지 5)이 발생한 통신 데이터를 규정의 통신 프레임내에 격잡하여 1개의 전송라인(7A 내지 7D)을 통해 순차 전송하기 때문에, 1개의 단말(2 내지 5)로부터 출력할 수 있는 통신 데이터량이, 상술의 MCU를 사용한 다지점 비디오 회의 시스템과 비교하여 적게된다.However, in such a multi-point video conferencing system 1, all the terminals 2 to 5 participating in the conference congest communication data generated in a prescribed communication frame and sequentially transmit them through one transmission line 7A to 7D. The amount of communication data that can be output from one terminal 2 to 5 is smaller than that of the multipoint video conferencing system using the aforementioned MCU.

이 결과 상기 종류의 다지점 비디오 회의 시스템(1)에서는 각 단말(2 내지 5)이 다른 단말(3 내지 5, 2)로부터 각각 1초간에 복수 프레임분 정도의 화상 데이터 외엔 얻을 수 없고, 이 때문에 화질이 양호한 표시화상을 재현하기 어렵다고 하는 문제가 있었다.As a result, in the multi-point video conferencing system 1 of the above kind, each terminal 2 to 5 cannot obtain image data of about a plurality of frames for one second from each of the other terminals 3 to 5 and 2. There is a problem that it is difficult to reproduce a display image having good image quality.

본 발명은 다지점 비디오 회의장치에 관한 것으로, 예를들면 3개소 이상의 다지점에서의 텔레비젼 회의에 사용되는 다지점 비디오 회의장치에 적용하기에 적합한 것이다.The present invention relates to a multipoint video conferencing device, and is suitable for application to, for example, a multipoint video conferencing device used for three or more multipoint television conferences.

도 1은 종래 제안되어 있는 다지점 비디오 회의 시스템의 구성을 도시한 블럭도이다.1 is a block diagram showing the configuration of a conventional multipoint video conferencing system.

도 2는 실시예에 의한 다지점 비디오 회의 시스템의 전체구성을 도시한 블럭도이다.2 is a block diagram showing the overall configuration of a multipoint video conferencing system according to an embodiment.

도 3은 각 단말의 구성을 도시한 블럭도이다.3 is a block diagram showing the configuration of each terminal.

도 4는 각 단말의 모니터에 표시하는 표시화상의 설명에 제공하는 노선도이다.4 is a route diagram used to explain display images displayed on a monitor of each terminal.

도 5는 각 단말의 모니터에 표시되는 표시화상의 설명에 제공하는 노선도이다.Fig. 5 is a route diagram for explaining the display image displayed on the monitor of each terminal.

본 발명은 이상의 점을 고려하여 이루어진 것으로, 각 단말에 있어서 화질이 높은 표시화상을 얻을 수 있는 간단하고 편리한 구성의 다지점 비디오 회의장치를 제안하는 것을 목적으로 한다.The present invention has been made in consideration of the above points, and an object of the present invention is to propose a multi-point video conferencing device having a simple and convenient configuration for obtaining a display image with high image quality in each terminal.

이러한 과제를 해결하기 위해서 본 발명에 있어서는 다지점 비디오 회의 시스템의 각 단말을 각각 서로 통신망이 다른 회선을 통해 접속함과 동시에, 각 단말에, 각각 모든 다른 각 단말로부터 대응하는 회선을 통해 공급되는 각 제1의 통신 데이터를 각각 수신하여 처리하는 데이터 수신 처리수단과, 자체단말에서 발생한 제2의 통신 데이터를 각각 대응하는 회선을 통해 다른 모든 각 단말에 송신하는 송신수단을 설치하도록 하였다.In order to solve this problem, in the present invention, each terminal of the multi-point video conferencing system is connected to each other via a different line, and at the same time, each terminal is supplied to each terminal through a corresponding line from all the different terminals. Data receiving processing means for receiving and processing the first communication data, respectively, and transmitting means for transmitting the second communication data generated in the own terminal to all the other terminals through the corresponding lines, respectively.

이와 같이 함으로써, 각 단말이, 각각 다른 각 단말과 MCU 등의 외부기기를 사용하지 않고 1개의 회선을 통해 서로 교신할 수 있다. 따라서 각 단말이, 다른 단말간에 있어서, 회선의 허용량의 범위내에서 다량의 통신 데이터를 송수신할 수 있다.By doing in this way, each terminal can communicate with each other via one line, without using each other terminal and external devices, such as MCU. Therefore, each terminal can transmit and receive a large amount of communication data between other terminals within the allowable amount of the line.

이하 도면에 대하여, 본 발명의 일실시예를 상술한다. 도 2에 있어서, 10은 본 실시예에 따른 다지점 비디오 회의 시스템을 나타내고, 디지탈 통신망(15)의 상호 다른 회선(15A 내지 15F)을 통해 각 단말(11 내지 14)간을 서로 접속함으로써 구성되어 있다. 즉, 도시된 바와 같이, 단말(11)은 회선(15A)을 통해 단말(12)과 접속되어, 회선(15E)을 통해 단말(13)과 접속되고, 회선(15D)을 통해 단말(14)과 접속되어 있다. 이와같이, 각 단말은 자체단말 이외의 모든 각 단말과 각각 다른 회선을 통해 접속되어 있다.Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings. In Fig. 2, 10 represents a multi-point video conferencing system according to the present embodiment, and is configured by connecting the terminals 11 to 14 to each other through different lines 15A to 15F of the digital communication network 15. have. That is, as shown, the terminal 11 is connected to the terminal 12 via the line 15A, connected to the terminal 13 via the line 15E, and the terminal 14 via the line 15D. Is connected to. In this way, each terminal is connected to each terminal other than its own terminal via a different line.

상기의 경우 각 단말(11 내지 14)은 다른 모든 각 단말(12 내지 14, 11)로부터, 대응하는 각 회선(15A 내지 15F)을 통해 공급되는 통신 데이터를 수신하여 처리하는 수신 및 데이터 처리능력을 가지고 있다. 또한, 자체단말(11 내지 14)에서 발생한 통신 데이터를 다른 모든 각 단말(12 내지 14, 11)에 각각 송신할 수 있는 송신능력도 가지고 있다.In this case, each terminal 11 to 14 has a reception and data processing capability for receiving and processing communication data supplied through each corresponding line 15A to 15F from all other terminals 12 to 14 and 11. Have. Moreover, it also has the transmission capability which can transmit the communication data which generate | occur | produced in its own terminal 11-14 to each other terminal 12-14,11, respectively.

결국 이 다지점 비디오 회의 시스템(10)에서는 각 단말(11 내지 14)은 각각 서로 1개의 회선(15A 내지 15F)을 통해 교신가능하고, 또한 각 단말(11 내지 14)은 양호한화질의 화상을 얻을 수 있을 정도로 실용상 충분한 량의 통신 데이터를 송수신할 수 있다.As a result, in this multi-point video conferencing system 10, each terminal 11 to 14 can communicate with each other through one line 15A to 15F, and each terminal 11 to 14 can obtain a good quality image. It is possible to transmit and receive a sufficient amount of communication data practically enough.

또한 이 실시예의 경우, 디지탈 통신망(15)에서는 CCITT에 의한 I시리즈 권고에서의 ISDN(Intergrated Services Digital Network)을 상정하고, 각 회선(15A 내지 15F)에서, CCITT 권고 H. 221에 의한 기본 인터페이스 2B+D(64kb/s의 정보(B) 2채널과 16k b/s의 제어신호 및 패킷 데이터(D) 1채널의 합계 3채널을 이용가능) 중, B 채널을 사용하는 것으로 한다.In addition, in this embodiment, the digital communication network 15 assumes an ISDN (Intergrated Services Digital Network) in the I series recommendation by the CCITT, and in each line 15A to 15F, the basic interface 2B according to the CCITT recommendation H. 221. It is assumed that the B channel is used among + D (three channels of a total of two channels of information B of 64 kb / s, a control signal of 16 k b / s and one channel of packet data D are available).

도 3은 본 실시예에 따른 다지점 비디오 회의 시스템의 각 단말(11 내지 14)의 구성을 도시한 것이다.3 shows the configuration of each terminal 11 to 14 of the multi-point video conferencing system according to the present embodiment.

각 단말(11 내지 14)은 종래의 다지점 비디오 회의 시스템의 단말과 같이 구성되어 있고, 통상의 1:1의 통신동작을 CCI TT 권고 H.320, H.221, H.242, H.261의 규정에 따라서 행할 수 있다. 다만, 다른 단말로부터 3개의 회선을 통해 통신 데이터(텔레비젼 전화·회의용 데이터)가 공급되고, 그들을 동시에 처리하지 않으면 안되기 때문에, 비디오 입출력기(20) 및 오디오 입출력기(21)을 제외한 각 회로 및 장치가 통상의 3배의 처리능력을 가지고 있는 것이 종래와 다르다.Each terminal 11 to 14 is configured like a terminal of a conventional multi-point video conferencing system, and the normal 1: 1 communication operation is performed by CCI TT Recommendations H.320, H.221, H.242, and H.261. This can be done in accordance with the provisions of. However, circuits and devices except for the video input / output unit 20 and the audio input / output unit 21 are provided because communication data (television telephone / conference data) is supplied from three different lines through different lines and must be processed at the same time. Has a processing capacity of three times that of the ordinary.

우선 각 단말이 다른 단말로부터 통신 데이터를 수신하는 경우에 대하여 설명한다. 각 단말(11 내지 14)은 디지탈 통신망(15)의 대응하는 각 회선(15A 내지 15F)을 통해,다른 각 단말(12 내지 14, 11)로부터 각각 공급되는 CCITT 권고 H.221에 준한 통신 프레임(이하, 이것을 「H.221 프레임」이라고 한다)에 격납된 각통신 데이터를, 망인터페이스부(22)에 있어서 수신한다.First, the case where each terminal receives communication data from another terminal is demonstrated. Each terminal 11 to 14 communicates with each other through the corresponding circuits 15A to 15F of the digital communication network 15, according to CCITT Recommendation H.221 supplied from each of the other terminals 12 to 14 and 11, respectively. Hereinafter, each communication data stored in the "H.221 frame" is received by the network interface unit 22.

망인터페이스부(22)는 수신한 각 통신 데이터를 각각 단말(11 내지 14) 내부의 데이터 포맷으로 변환한 뒤, 이 들을 전송 데이터 신호 S1로서 MUX/DMUX(23)에 송출한다.The network interface unit 22 converts each received communication data into a data format inside the terminals 11 to 14, and sends them to the MUX / DMUX 23 as a transmission data signal S1.

MUX/DMUX(23)는 전송 데이터신호 S1에 의해 얻어지는 각 단말(12 내지 14, 11)로부터 통신 데이터를 각각 비디오 데이터(비디오 데이터의 송신 프레임으로서 CCITT 권고 H.261준거의 프레임(이하 이것을 「H.261 프레임」라고 한다)이 사용된다, 오디오 데이터, 표시데이터(비디오 데이터 및 오디오 데이터 이외의 문자 등의 데이터)와, 제어 데이터로 각각 분리된다. 그리고 비디오 데이터를 비디오 정보신호 S2로서 비디오 코덱(24)에 송출하여, 각 오디오 데이터를 오디오 정보신호 S3로서 지연회로(25)에 송출하고, 각 표시 데이터를 표시정보신호 S4로서 텔레마틱장치(26)에 송출하며, 또한 각 제어 데이터를 제어정보신호 S5로서 시스템 제어부(27)의 앤드·앤드 신호제어부(27A)에 송출한다.The MUX / DMUX 23 stores communication data from each of the terminals 12 to 14 and 11 obtained by the transmission data signal S1, respectively, as video data (frames conforming to CCITT Recommendation H.261 as a transmission frame of video data (hereinafter referred to as "H .261 frames "are used to separate audio data, display data (data such as characters other than video data and audio data) and control data, respectively, and the video codec (as a video information signal S2). 24, each audio data is sent to the delay circuit 25 as the audio information signal S3, and each display data is sent to the telematic apparatus 26 as the display information signal S4, and each control data is sent to the control information. The signal is sent to the end and signal control unit 27A of the system control unit 27 as the signal S5.

이 때 비디오 코덱(24)은 공급되는 비디오 정보신호 S2에 의해 얻어지는 다른 각 단말(12 내지 14, 11)로부터의 비디오 데이터에 대하여 각각 소정의복호처리를 행한 후, 이 들을 비디오 신호 S10로서 비디오 제어부(30)에 송출한다.At this time, the video codec 24 performs predetermined decoding processing on the video data from each of the other terminals 12 to 14, 11 obtained by the supplied video information signal S2, and then, these are the video control unit as a video signal S10. Send to (30).

비디오 제어부(30)는 시스템 제어부(27)로부터 공급되는 제어신호 S11에 따라, 비디오 데이터 신호 S10에서 얻어지는 다른 각 단말(12 내지 14, 11)로부터의 각 비디오 데이터와, 자체단말의 비디오 입출력기기(20)의 카메라로부터 공급되는 비디오 데이터로부터, 합성한 비디오 데이터를 작성하고, 이것을 비디오 입출력기(20)의 모니터(도시하지 않음)에 표시시킨다. 또는 제어신호 S11에 지정된, 자체단말 이외의 소정의 단말로부터의 비디오 데이터를 비디오 입출력기기(20)의 모니터에 표시시킨다.The video control unit 30 according to the control signal S11 supplied from the system control unit 27, each video data from the other terminals 12 to 14, 11 obtained from the video data signal S10 and the video input / output device of the own terminal ( The synthesized video data is created from the video data supplied from the camera of 20) and displayed on the monitor (not shown) of the video input / output unit 20. Alternatively, the video data from the predetermined terminal other than the own terminal specified in the control signal S11 is displayed on the monitor of the video input / output device 20.

제어신호 S11이 모든 단말로부터의 비디오 데이터를 모든 단말의 모니터상에 표시시키는 취지의 신호인 경우, 각 단말에 있어서의 모니터 표시의 모양은 도 4와 같이 된다. 또한, 제어신호 S11이 있는 소정의 단말로부터의 비디오 데이터만을 모든 단말에 표시시키는 취지의 신호인 경우는 각 단말에 있어서는 모니터표시의 모양은 도 5와 같이 된다.When the control signal S11 is a signal for displaying video data from all terminals on the monitors of all terminals, the shape of the monitor display in each terminal is as shown in FIG. In addition, in the case of a signal intended to display only video data from a predetermined terminal having a control signal S11 to all terminals, the shape of the monitor display in each terminal is as shown in FIG.

또한 지연회로(25)에 있어서는 공급되는 오디오 정보신호S3에 대하여 소정량의 지연을 발생시킴으로써 비디오 정보신호 S2 사이의 시간적인 지연을 보정하고, 이렇게하여 얻어진 지연 오디오 정보신호 S12를 오디오 코덱(31)에 송출한다.In the delay circuit 25, a predetermined amount of delay is generated for the supplied audio information signal S3 to correct the temporal delay between the video information signals S2, and the delayed audio information signal S12 thus obtained is converted into the audio codec 31. Send it out.

오디오 코덱(31)에 있어서는 공급되는 지연오디오 정보신호 S12에서 얻어지는 다른 각 단말(12 내지 14, 11)로부터의 각 오디오 데이터에 대하여 각각 소정의 복호처리를 행한 후, 이들을 오디오 신호 S13으로서 오디오 제어부(32)에 송출한다.In the audio codec 31, predetermined decoding processing is performed on the respective audio data from each of the other terminals 12 to 14 and 11 obtained from the delayed audio information signal S12 supplied, and these are then used as the audio signal S13 as an audio control unit ( 32).

오디오 제어부(32)는 시스템 제어부(27)로부터 공급되는 제어신호 S14에 따라서, 오디오 신호 S13에서 얻어지는 다른 각 단말(12 내지 14, 11)로부터의 각 오디오 데이터를 합성한 합성 오디오 데이터를 작성하여, 이것을 오디오 입출력기기(21)의 스피커(도시하지 않음)에 송출한다. 또는 제어신호 S14에 지정된 소정의 단말로부터의 오디오 데이터를 오디오 입출력기기(21)의 스피커에 송출한다.The audio control part 32 produces | generates the synthesized audio data which synthesize | combined each audio data from each other terminal 12-14,11 obtained by the audio signal S13 according to the control signal S14 supplied from the system control part 27, This is sent to a speaker (not shown) of the audio input / output device 21. Alternatively, audio data from the predetermined terminal specified in the control signal S14 is sent to the speaker of the audio input / output device 21.

제어신호 S14의 내용이, 자체단말 이외의 다른 단말로부터의 오디오 데이터를 합성하여 출력시키거나 혹은 어떤 특정한 단말로부터의 오디오 데이터만을 모든 단말에 출력시키는 가에 따라서, 도 5에 도시된 바와 같이 각 단말로부터의 오디오 출력이 달라진다.Each terminal as shown in FIG. 5 depends on whether the contents of the control signal S14 synthesize and output audio data from a terminal other than its own terminal, or output only audio data from a specific terminal to all terminals. Audio output from is different.

한편, 텔레마틱 장치(26)은 공급되는 표시정보신호 S4를 복호하여, 이렇게 하여 얻어진 표시 데이터를 모니터 등(도시하지 않음)의 표시수단에 표시시킨다.On the other hand, the telematic apparatus 26 decodes the supplied display information signal S4, and displays the display data thus obtained on display means of a monitor or the like (not shown).

또한 시스템 제어부(27)는 공급되는 제어정보신호 S5에서 얻어지는 모단말(단말 11 내지 14 중 미리 정해진 어느하나의 단말)로부터의 제어 데이터에 따라서 상술의 제어신호 S11, S14를 생성한다. 그리고 그들을 각각 비디오 제어부(30) 및 오디오 제어부(32)에 송출함으로써, 상술한 바와 같이 제어 데이터에 따른 표시화면을 모니터 표시시키고, 또한 제어 데이터에 따른 음성을 스피커로부터 방음시킨다.The system control unit 27 also generates the control signals S11 and S14 described above in accordance with the control data from the mother terminal (any terminal predetermined among the terminals 11 to 14) obtained from the supplied control information signal S5. By sending them to the video control unit 30 and the audio control unit 32, respectively, the display screen according to the control data is displayed on the monitor as described above, and the sound corresponding to the control data is soundproofed from the speaker.

다음에 각 단말이 다른 단말에 대하여 통신 데이터를 송신하는 경우에 대하여 설명한다. 각 단말(11 내지 14)은 비디오 입출력기(20)의 카메라로부터 출력되는 자체단말에서 발생한 화상 데이타를 비디오 제어부(30)를 통해 비디오 코덱(24)에 입력하고, 해당 화상 데이타를 비디오 코덱(24)에 있어서 부호화한 후, 이것을 화상정보신호 S20로서 MUX/DMUX(23)에 송출한다.Next, a case where each terminal transmits communication data to another terminal will be described. Each terminal 11 to 14 inputs image data generated from its own terminal output from the camera of the video input / output unit 20 to the video codec 24 through the video control unit 30, and inputs the image data to the video codec 24. ) Is sent to the MUX / DMUX 23 as the image information signal S20.

또한 이 때 오디오 입출력기기(21)의 마이크로폰은 집음 된 오디오 데이터를 오디오 제어부(32)를 통해 오디오 코덱(31)에 송출된다. 오디오 코덱(31)은 공급된 오디오 데이터를 부호화한 후, 이것을 오디오 정보신호 S21로서 지연회로(25)를 통해 MUX/DMUX(23)에 송출한다.In this case, the microphone of the audio input / output device 21 transmits the collected audio data to the audio codec 31 through the audio control unit 32. The audio codec 31 encodes the supplied audio data and then sends it to the MUX / DMUX 23 through the delay circuit 25 as the audio information signal S21.

또한 이 때 테레마틱 장치(26)는 사용자에 의해 입력된 문자 등의 표시데이터를 부호화하여, 이것을 표시정보신호 S22로서 MUX/DMUX(23)에 송출한다.At this time, the telematic device 26 encodes display data such as characters input by the user, and sends them to the MUX / DMUX 23 as the display information signal S22.

또한 이 때 시스템 제어부(27)는 여러가지의 제어 데이터를 제어정보신호 S23로서 앤드·앰드 신호 제어부(27A)를 통해 MUX/DMUX(23)에 송출한다.At this time, the system control unit 27 sends various control data as the control information signal S23 to the MUX / DMUX 23 via the end-amp signal control unit 27A.

MUX/DMUX(23)는 공급되는 비디오 정보신호 S20, 오디오 정보신호 S21, 표시정보신호 S22 및 제어정보신호 S23로부터 각각 얻어지는 비디오 데이터, 오디오 데이터, 표시 데이터 및 제어 데이터를, 각각 H.221 프레임 중의 소정 영역내에 순차격납함으로써 H.221 프레임을 형성한다. 그리고 이것을 망인터페이스부(22) 및 디지탈 통신망(15)의 대응하는 각 회선(15A 내지 15D)을 순차 통해 다른 각 단말(12 내지 14, 11)에 각각 송출한다.The MUX / DMUX 23 stores video data, audio data, display data and control data obtained from the supplied video information signal S20, the audio information signal S21, the display information signal S22 and the control information signal S23, respectively, in H.221 frames. The H.221 frame is formed by sequentially storing in a predetermined area. And this is sent out to each of the other terminals 12 to 14, 11 through the corresponding lines 15A to 15D of the network interface unit 22 and the digital communication network 15, respectively.

이상, 각 단말에 있어서의 수신시의 처리 및 송신시의 처리에 대하여 설명하였지만, 이와 같이 하여 각 단말(11 내지 14)은 각각 다른 각 단말(12 내지 14, 11)로부터 공급되는 통신 데이터를 병렬적으로 처리하고, 또한 자체단말(11 내지 14)에서 발생한 통신 데이터를 다른 각 단말(12 내지 14, 11)에 각각 출력한다. 그리고 각 단말(11 내지 14)은 다른 각 단말(12 내지 14, 11)과 각각 1개의 회선(15A 내지 15F)를 통하여 서로 교신할 수 있다.As mentioned above, although the process at the time of reception and the process at the time of transmission in each terminal were demonstrated, in this way, each terminal 11-14 has paralleled the communication data supplied from each other terminal 12-14,11, respectively. And the communication data generated in the own terminals 11 to 14 are output to the other terminals 12 to 14 and 11, respectively. Each terminal 11 to 14 may communicate with each other terminal 12 to 14 and 11 through one line 15A to 15F, respectively.

또한, 각 단말(11 내지 14)에서는 리모트 컨트롤러나 입력조작용 주변장치(동시에 도시하지 않음)로부터의 사용자 입력을 감수한다. 이 사용자입력이나 모단말(12 내지 14, 11)로부터의 제어 데이터가 다른 소정단말(12 내지 14, 11)에 대한 접속 확보 지령일 때에는 시스템 제어부(27)가 그에 따른 제어신호 S24를 앤드·망신호제어부(33)에 송출한다.In addition, each terminal 11 to 14 takes user input from a remote controller or an input operation peripheral device (not shown at the same time). When the user input or control data from the terminal terminals 12 to 14 and 11 is a command for ensuring connection to other predetermined terminals 12 to 14 and 11, the system control unit 27 end-believe the control signal S24 accordingly. The call is sent to the call control unit 33.

앤드·망신호제어부(33)는 공급되는 제어신호 S24에 따라서, 접속 확보를 지정된 단말(12 내지 14, 11)에 대하여, 접속을 확보하는 취지를 회선(15A 내지15F)을 통해 연락하여, 대응하는 회선(15A 내지 15F)의 접속을 확보한다.The end network signal control unit 33 communicates with the designated terminals 12 to 14 and 11 to secure the connection, via the lines 15A to 15F, in accordance with the supplied control signal S24. Secure the connection of the circuits 15A to 15F.

상기와 같이 각 단말(11 내지 14)은 필요시, 다른 단말(12 내지 14, 11)과의 접속이 확보된다.As described above, each terminal 11 to 14 secures a connection with other terminals 12 to 14 and 11, if necessary.

모단말에 선정된 단말(11 내지 14)의 시스템 제어부(27)은 예를 들면 사용자로부터 입력조작 주변장치를 통해 각 단말(11 내지 14)상의 모니터에 어떤 단말의 비디오 데이터를 표시시키는 가가 지정된 경우, 그것에 대응한 제어 모니터를 상술의 H.221 프레임내에 격납하고, 이것을 다른 각 단말(12 내지 14, 11)에 대하여 대응하는 각 회선(15A 내지 15F)를 통해 송출한다. 동시에 자체단말(11 내지 14) 중의 비디오 제어부(30)에 대하여, 상술의 사용자로부터의 지령에 따른 제어신호 S11를 송출한다.When the system control unit 27 of the terminals 11 to 14 selected in the terminal determines which video data of the terminal is displayed on the monitor on each terminal 11 to 14 through an input operation peripheral device, for example. The control monitor corresponding thereto is stored in the above-described H.221 frame, and the control monitor is sent to each of the other terminals 12 to 14 and 11 through the corresponding lines 15A to 15F. At the same time, the control unit S11 according to the instruction from the above-mentioned user is sent to the video control unit 30 in the own terminals 11 to 14.

이렇게하여 본 발명의 다지점 비디오 회의 시스템(10)에서는 모단말에 선정된 단말(11 내지 14)이 자신을 포함한 각 단말(11 내지 14)의 각 모니터에, 예를 들면 도 4에 도시된 바와 같이, 자제단말(12 내지 14, 11)로부터의 통신 데이터에 포함하는 각 화상 데이터의 합성화상이나, 도 5에 도시된 바와 같이, 소정단말(12 내지 14, 11)로부터의 통신 데이터에 포함하는 화상 데이터를 전환하여 표시시킬 수 있다.Thus, in the multi-point video conferencing system 10 of the present invention, the terminals 11 to 14 selected in the terminal are displayed on each monitor of each terminal 11 to 14 including itself, for example, as shown in FIG. Similarly, the composite image of each image data included in the communication data from the control terminals 12 to 14 and 11 or the communication data from the predetermined terminals 12 to 14 and 11 as shown in FIG. Image data can be switched and displayed.

또한 이 실시예인 경우, 모단말이 된 단말(이하, 이것을 제1의 단말이라 한다)(11 내지 14)은 사용자로부터 입력조작용 주변장치를 통해 다지점 텔레비젼 회의의 개시지령이 입력되면, 우선 소정의 1개의 단말(이하, 이것을 제2의 단말이라한다)(12 내지 14, 11)의 접속을 확보하고, 접속확보 후, 해당 제2의 단말에 대하여 다른 소정의 1개의 단말(이하, 이것을 제3의 단말이라 한다)(13, 14, 11, 12)의 접속을 확보하도록 제어 데이터를 송출한다.In addition, in this embodiment, the terminal (hereinafter, referred to as the first terminal) 11 to 14, which has become a parent terminal, first receives a start command of a multipoint television conference from a user through an input operation peripheral device. One terminal (hereinafter, referred to as a second terminal) 12 to 14, 11 secures a connection, and after securing a connection, another predetermined one terminal (hereinafter referred to as a third terminal) with respect to the second terminal. Control data is sent so as to secure the connection of the terminals (13, 14, 11, 12).

이어서 제1의 단말(11 내지 14)은 마찬가지로 하여 나머지의 단말(이하, 이것을 제4의 단말이라 한다)(14, 11, 12, 13)의 접속을 확보하고, 접속확보 후, 해당 제4의 단말(14, 11, 12 또는 18)에 대하여 제2의 단말(12 내지 14, 11)의 접속을 확보하도록 제어 데이터를 송출한다.Subsequently, the first terminals 11 to 14 likewise secure the connection of the remaining terminals (hereinafter referred to as fourth terminals) 14, 11, 12, and 13, and after securing the connection, Control data is sent to the terminals 14, 11, 12 or 18 so as to secure the connection of the second terminals 12 to 14 and 11.

또한 제1의 단말(11 내지 13, 14)은 이후와 마찬가지로, 제3의 단말(13, 14, 11, 12)의 접속을 확보하고, 접속확보 후, 해당 제3의 다날913, 14, 11, 12)에 대하여 제4의 단말(14, 11, 12, 13)의 접속을 확보하도록 제어 데이터를 송출하고, 이것에 의해 모든 상호접속을 확보한다.In addition, the first terminals 11 to 13 and 14 secure the connection of the third terminals 13, 14, 11 and 12 as in the following, and after the connection is secured, the third Danal 913, 14, 11 Control data is sent to secure the connection of the fourth terminals 14, 11, 12, 13 to the terminal 12, thereby securing all interconnections.

이상의 구성에 있어서, 이 다지점 비디오 회의 시스템(10)에서는 각 단말(11 내지 14)이 각각 다른 회선(15A 내지 15F)을 통하여 다른 각 단말(12 내지 14, 11)과 서로 교신한다. 따라서 이 다지점 비디오 회의 시스템(10)에서는 상술한 바와 같이 MCU를 사용할 필요가 없고 각 단말(11 내지 14)이 각각 교대로 교신을 행할 수 있어, 그 만큼 시스템을 염가로 구축할 수 있다. 또한 상술한 바와 같이 MCU의 설치장소에 따라 통신 요금이 고액이 될 우려가 없다.In the above configuration, in this multi-point video conferencing system 10, each terminal 11 to 14 communicates with each other terminal 12 to 14, 11 via different lines 15A to 15F, respectively. Therefore, in this multi-point video conferencing system 10, it is not necessary to use an MCU as described above, and each terminal 11 to 14 can communicate with each other alternately, so that the system can be constructed at low cost. As described above, there is no fear that the communication fee will be high depending on the location of the MCU.

또한 이 다지점 비디오 회의 시스템(10)에서는 각 단말(11 내지 14)이 다른 모든 단말과 각각 상호 다른 회선(15A 내지15F)을 통해 교신할 수 있도록 이루어져 있기 때문에, 각 단말(11 내지 14)사이에 있어서의 통신 데이터량도 1회선분을 최대한 확보할 수 있고, 따라서 각 단말(11 내지 14)에 있어서 양호한 화질의 화상을 얻을 수 있을 정도의 데이터량을 서로 송수신할 수 있다. 이와 관련하여 도 1과 같은 접속에 있어서는 1개의 통신 프레임중에 4개의 단말분의 통신 데이터를 격납해야만 하기 때문에 각 단말용으로 할당된 정보영역을 아무리 해도 작게 된다.In addition, in this multi-point video conferencing system 10, since each terminal 11-14 is able to communicate with every other terminal through mutually different lines 15A-15F, between each terminal 11-14. The amount of communication data in the system can be secured as much as one line, and therefore, each terminal 11 to 14 can transmit and receive data amounts such that an image of good quality can be obtained. In this connection, in the connection as shown in Fig. 1, since communication data for four terminals must be stored in one communication frame, the information area allocated for each terminal can be made small.

이상의 구성에 의하면, 각 단말(11 내지 14)간을 각각 디지탈 통신망(15)이 다른 회선(15A 내지 15F)를 각각통하여 서로 접속함과 동시에, 각 단말(11 내지 14)에, 각각 다른 각 단말(12 내지 14, 11)로부터 대응하는 회선(15A 내지 15F)을 통해 공급되는 통신 데이터를 처리하고, 또한 자체에서 발생한 통신 데이터를 다른 각 단말(11 내지 14)에 각각 송출할 수 있는 데이터 처리능력을 갖도록 함으로써, 각 단말(11 내지 14)이 다른 각 단말(12 내지 14, 11)과, 각각 1회선분의 통신 데이터를 최대한 이용하여 서로 교신할 수 있고, 이렇게 하여 화질이 높은 간단하고 편리한 구성의 다지점 비디오 회의 시스템을 실현할 수 있다.According to the above structure, the digital communication network 15 connects each terminal 11-14 between each other via the other circuit 15A-15F, respectively, and each terminal 11-14 differs, respectively, from each terminal 11-14. Data processing capacity capable of processing the communication data supplied from the corresponding lines 15A to 15F from 12 to 14 and 11, and also transmitting the communication data generated in itself to the other terminals 11 to 14, respectively. Each terminal 11 to 14 can communicate with each other terminal 12 to 14, 11 by utilizing the communication data for one line to the maximum, thereby providing a simple and convenient configuration with high image quality. Multipoint video conferencing system can be realized.

또한, 상술한 실시예에 있어서는 본 발명을 적용한 다지점 비디오 회의 시스템을 구축함으로써 단말수 4개로 하도록 한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 이것 이외의 단말수로 본 발명을 적용한 다지점 비디오 회의 시스템을 구축하도록 해도 된다.In the above-described embodiment, the case where the number of terminals is set to four by constructing a multi-point video conferencing system to which the present invention is applied is described. However, the present invention is not limited thereto, and the present invention is not limited to this. The applied multipoint video conferencing system may be constructed.

상기의 경우에 있어서도 각 단말간을 각각 서로 상호 다른 회선을 통하여 접속함과 동시에, 각 단말에 다른 모든 각 단말로부터 공급되는 통신 데이터를 처리할 수 있도록 한 데이터 처리능력을 갖도록 하면 된다.Also in the above case, each terminal may be connected to each other via a different line, and at the same time, the terminal may have a data processing capability that allows each terminal to process communication data supplied from all other terminals.

또한 상술한 실시예에 있어서는 각 단말(11 내지 14)이 각각 모단말로부터의 제어 데이터에 근거하여 비디오 입출력기기(20)의 모니터에 표시하는 표시화면을 도4와 도 5와 같이 전환하도록 한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 예를 들면 각 단말(11 내지 14)의 시스템 제어부(27)가 다른 단말(12 내지 14, 11)로부터의 각 오디오 데이터중에서 상대적으로 레벨이 높은 오디오 데이터를 검출하여, 해당 오디오 데이터에 대응하는 단말(12 내지 14, 11)로부터의 화상 데이터에 근거하여 화상을 표시하도록(즉 각 단말(11 내지 14)의 시스템 제어부(27)가 각각 이야기중의 단말(11 내지 14)을 검출하여, 그 단말(11 내지 14)로부터의 화상 데이타에 근거한 화상을 비디오 입출력기기(20)의 모니터에 표시시킨다)하여도 무방하고, 각 단말(11 내지 14)의 비디오 입출력기기(20)의 모니터에 어떤 화상을 어떻게 표시시킬까에 관해서는 이밖에 여러가지의 방법을 적용할 수 있다.In addition, in the above-described embodiment, when each terminal 11 to 14 switches the display screen displayed on the monitor of the video input / output device 20 based on the control data from the mother terminal as shown in FIGS. 4 and 5, respectively. Although the present invention is not limited to this, for example, the system control unit 27 of each terminal 11 to 14 has a relatively high level among audio data from the other terminals 12 to 14 and 11. The system control unit 27 of each terminal 11 to 14 talks to detect the high audio data and display the image based on the image data from the terminals 12 to 14 and 11 corresponding to the audio data. The terminals 11 to 14 in the middle may be detected and an image based on the image data from the terminals 11 to 14 may be displayed on the monitor of the video input / output device 20. ) As for how to display sikilkka any image on the monitor of the video input-output device 20 may be applied to a variety of methods outside.

또한 상술한 실시예에 있어서는 디지탈 통신망(15)으로서, CCITT에 의한 1시리즈 권고에서의 ISDN을 상정하고, 각 회선(15A 내지 15F)으로서, CCITT 권고 H.221에 의한 B채널을 사용하도록 한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 이박에 여려가지의 통신망 및 회선을 적용할 수 있다.In the above-described embodiment, the ISDN in the 1-series recommendation by the CCITT is assumed as the digital communication network 15, and the B-channel according to the CCITT recommendation H.221 is used as each of the lines 15A to 15F. Although the present invention has been described, the present invention is not limited to this, and various communication networks and lines can be applied to the foil.

실제로, 각 단말(11 내지 14)사이를 복수의 B 채널로 접속하도록 해도 무방하고, 이와 같이 함으로써 각 단말(11 내지 14)간에 있어서 대량의 정보교환을 행할 수 있도록 할 수 있고, 또한 각 단말(11 내지 14)에 있어서의 표시화상의 화질을 향상시킬 수 있다.In practice, the terminals 11 to 14 may be connected by a plurality of B channels. In this manner, a large amount of information can be exchanged between the terminals 11 to 14, and each terminal ( 11 to 14 can improve the image quality of the display image.

또한 상술한 실시예에 있어서는 모단말(11 내지 13 또는 14)에 다지점 텔레비젼 회의의 개시지령이 입력되었을 때, 해당 모단말(11 내지 14)이 다른 각 단말(12 내지 14, 11)과의 회선접속을 확보함과 동시에, 이들 다른 각 단말(12 내지 14, 11)에 대하여 각각 소정의 단말(13, 14, 11, 12)과의 회선접속을 확보하도록 지령한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 예를 들면 모단말(11 내지 13, 14)이 소정의 단말(12 내지 14, 11)에만, 또는 소정의 단말(12 내지 14, 11)을 제외하고 각 단말(11 내지 14)간의 접속을 확보시키도록 한 제어데이터를 대응하는 단말에 대하여 송출하도록 한 모드를 설치하여도 좋고, 이와 같이 함으로써 비화적인 회의를 행할 수 있다.In addition, in the above-described embodiment, when the start instruction of the multipoint television conference is input to the terminals 11 to 13 or 14, the corresponding terminals 11 to 14 are compared with the other terminals 12 to 14 and 11, respectively. While the circuit connection is secured, the case where the command to secure the circuit connection with the predetermined terminals 13, 14, 11 and 12 to each of these other terminals 12 to 14, 11 has been described. The invention is not limited to this, and for example, the terminal terminals 11 to 13 and 14 are provided only to the predetermined terminals 12 to 14 and 11 or each terminal except for the predetermined terminals 12 to 14 and 11. A mode may be provided in which control data for ensuring a connection between 11 and 14 is transmitted to a corresponding terminal. In this way, a nonconversational meeting can be performed.

또한 상술한 실시예에 있어서는 각 단말(11 내지 14)이 모단말(12 내지 14, 11)로부터의 제어 데이터에 근거하여, 비디오 입출력기기(20)의 모니터에 화상을 표시하도록 한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 예를 들면 각 단말(11 내지 14)에 있어서 가능하게 비디오 입출력기기(20)의 모니터에 표시하는 표시화면이나 오디오 입출력기기(21)의 스피커로부터 방음하는 음향 등을 선택할 수 있도록 해도 된다.In addition, in the above-mentioned embodiment, the case where each terminal 11-14 is made to display an image on the monitor of the video input / output device 20 based on the control data from the parent terminals 12-14 and 11 is described. However, the present invention is not limited to this and, for example, soundproofing is performed on the display screen displayed on the monitor of the video input / output device 20 or the speaker of the audio input / output device 21 as much as possible in each terminal 11 to 14. The sound may be selected.

또한 상술한 실시예에 있어서는 모든 다른 각 단말(11 내지 13 또는 14)로부터 디지탈 통신망(15)의 대응하는 회선(15A 내지 15F)을 통해 공급되는 각 통신 데이터를 각각 수신하여 처리하는 데이터 수신처리 수단을 도 3과 같이 구성함(도 3에 도시한 단말구성의 각 회로 및 장치)과 동시에, 자체단발(12 내지 14, 11)에서 발생된 통신 데이터를 각각 대응하는 회선(15A 내지 15F)을 통해 다른 모든 각 단말(11 내지 14)에 송신하는 송신수단을 도 3과 같이 구성한(도 3에 도시한 단말구성의 각 회로 및 장치) 바와 같이 한 경우에 대하여 서술하였지만, 본 발명은 이것에 한정되지 않고, 데이터 수신처리 수단 및 송신수단의 구성으로서는 이밖에 여러가지의 구성을 적용할 수 있다.Further, in the above-described embodiment, data receiving processing means for receiving and processing each communication data supplied through the corresponding lines 15A to 15F of the digital communication network 15 from all the other terminals 11 to 13 or 14, respectively. 3 is configured as shown in FIG. 3 (each circuit and device of the terminal configuration shown in FIG. 3) and at the same time, the communication data generated in the own single-run 12 to 14 and 11 are respectively connected through the corresponding lines 15A to 15F. Although a case has been described in which the transmission means for transmitting to all other terminals 11 to 14 is configured as shown in Fig. 3 (each circuit and device of the terminal configuration shown in Fig. 3), the present invention is not limited to this. In addition, various configurations can be applied as the configuration of the data receiving processing means and the transmitting means.

상술한 바와 같이 본 발명에 의하면, 다지점 비디오 회의 시스템의 각 단말을 각각 서로 상호 통신망이 다른 회선을 통해 접속함과 동시에, 각 단말에 각각 모두 다른 각 단말로부터 대응하는 회선을 통해 공급되는 각 제1의 통신 데이터를 각각 수신하여 처리하는 데이터 수신처리 수단과, 자체단말에서 발생한 제2의 통신데이터를 각각 대응하는 회선을 통해 다른 모든 각 단말에 송신하는 송신수단을 설치하도록 함으로써, 각 단말이 각각 다른 각 단말과 MCU 등의 외부기기를 사용하지 않고 1개의 회선을 통하여 해당 회선의 허용량의 범위내에서 다량의 통신 데이터를 송수신할 수 있고, 이렇게하여 화질이 높은 간단하고 편리한 구성이 다지점 비디오 회의장치를 실현할 수 있다.As described above, according to the present invention, each terminal of the multi-point video conferencing system is connected to each other via a different line, and at the same time, each terminal is supplied to each terminal through a corresponding line from each different terminal. Each terminal is provided by providing data receiving processing means for receiving and processing the communication data of 1 and transmitting means for transmitting the second communication data generated in the own terminal to all the other terminals, respectively, over the corresponding line. It is possible to transmit / receive a large amount of communication data within the allowable amount of the corresponding line through one line without using each other terminal and external device such as MCU, and in this way, a simple and convenient configuration with high image quality enables multi-point video conferencing. The device can be realized.

Claims

A plurality of terminals,

And a communication network for connecting each terminal of the plurality of terminals one-to-one with all other terminals via different lines, respectively.

Each terminal of the plurality of terminals is:

Receive each first communication data supplied through the corresponding line of the communication network from all other terminals, and receive the second communication data generated in its own terminal through all the corresponding lines of the communication network. Transmitting and receiving means for transmitting to

And data processing means for processing each of said first communication data supplied and said second communication data generated in its own terminal.

The method of claim 1,

The first communication data and the second communication data include at least video data which is image information, audio data, data such as characters other than video data and audio data, and control data, and are described in CCITT Recommendation H.221. A multi-point video conferencing device, which is stored in a prescribed communication frame (hereinafter referred to as H.221 frame).

The method of claim 2,

The data processing means generates and displays a composite image as each first video data included in each of the supplied first communication data and second video data generated in its own terminal. Conference unit.

The method of claim 2,

The data processing means is a multi-point video conferencing apparatus, characterized in that the video data included in each of the first communication data supplied is converted and displayed in accordance with the control data or other instructions included in each of the first communication data. .

A plurality of terminals,

A communication network that connects each terminal of the plurality of terminals one-to-one with all other terminals via different lines, respectively;

Each terminal of the plurality of terminals is:

It can be supplied from all other terminals via the corresponding line of the communication network and receives each of the first communication data, respectively, and the second communication data generated in its own terminal can be received through all the corresponding lines of the communication network. Transmitting and receiving means for transmitting to the terminal,

Having data processing means for processing each of the first communication data supplied and the second communication data generated in its own terminal;

The first communication data and the second communication data include at least video data which is image information, audio data, data such as characters other than video data and audio data, and control data, and CCITT Recommendation H.221 Stored in a communication frame (hereinafter referred to as an H.221 frame) specified in

The data processing means generates and displays a synthesized image as each of the first video data included in each of the supplied first communication data and the second video data generated in its own terminal, or the supplied each And the video data included in the first communication data is converted to and displayed in the control data or other instructions included in the first communication data.