KR100953509B1 - Method for multipoint video communication - Google Patents

Method for multipoint video communication Download PDF

Info

Publication number
KR100953509B1
KR100953509B1 KR1020090046890A KR20090046890A KR100953509B1 KR 100953509 B1 KR100953509 B1 KR 100953509B1 KR 1020090046890 A KR1020090046890 A KR 1020090046890A KR 20090046890 A KR20090046890 A KR 20090046890A KR 100953509 B1 KR100953509 B1 KR 100953509B1
Authority
KR
South Korea
Prior art keywords
terminal
video
speaker
image data
server
Prior art date
Application number
KR1020090046890A
Other languages
Korean (ko)
Inventor
남궁환식
Original Assignee
(주)해든브릿지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)해든브릿지 filed Critical (주)해든브릿지
Priority to KR1020090046890A priority Critical patent/KR100953509B1/en
Application granted granted Critical
Publication of KR100953509B1 publication Critical patent/KR100953509B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/157—Conference systems defining a virtual conference space and using avatars or agents
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H04W4/08—User group management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PURPOSE: A multilateral video communications method is provided to perform video communications in fixed network bandwidth regardless of the number of speakers and to maintain the continuity of speaking contents by receiving and playing image data of a previous speaker, a current speaker, and a next speaker. CONSTITUTION: A reception terminal receives image data of a current speaker(S601). The reception terminal additionally receives image data of a previous speaker(S603). The reception terminal plays the image data of the current speaker on the main area of a display device(S605). The reception terminal plays the image data of the precious speaker to the sub area of the display device. The reception terminal presently additionally receives image data of a next speaker after the current speaker(S607).

Description

다자간 영상 통신 방법.{METHOD FOR MULTIPOINT VIDEO COMMUNICATION}Multi-way video communication method. {METHOD FOR MULTIPOINT VIDEO COMMUNICATION}

본 발명은 다자간 영상 통신 방법에 관한 것으로, 보다 상세하게는 서버를 이용한 다자간 영상 통신 방법에 관한 것이다.The present invention relates to a multi-party video communication method, and more particularly to a multi-party video communication method using a server.

다자간 영상 통신 시스템이란 서로 멀리 떨어진 사람들이 서로의 영상을 보면서 음성 또는 텍스트 등을 송수신하며 통신하는 시스템이다. 다자간 영상 통신 시스템을 이용하여, 원격 영상 회의, 원격 교육, 원격 진단, 원격 세미나 등이 수행될 수 있다. WAN(Wide Area Network)과 같은 IP 네트워크 또는 무선 통신망 등과 같은 통신망을 이용해 다자간 영상 통신을 수행하는 시스템은 크게 MCU를 이용하는 시스템, 서버를 이용하는 시스템 및 P2P 방식을 이용하는 시스템으로 분류될 수 있다. The multi-party video communication system is a system in which people far from each other communicate while transmitting and receiving voice or text while viewing each other's images. Using a multi-party video communication system, remote video conferencing, distance education, remote diagnosis, remote seminars, and the like can be performed. Systems for performing multilateral video communication using a communication network such as an IP network such as a wide area network (WAN) or a wireless communication network may be classified into a system using an MCU, a system using a server, and a system using a P2P scheme.

도 1은 MCU(107)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다.1 is a diagram illustrating a multi-party video communication system using the MCU 107.

도 1에서, 네트워크를 통해 다자간 영상 통신에 참여하며, 카메라를 포함하 는 하드웨어(101, 103, 105)는 하드웨어(101, 103, 105) 사용자의 영상 및 음성 데이터를 MCU(107, Multipoint Control Unit)로 전송한다. 도 1에서 점선의 화살표는 데이터의 흐름을 나타낸다. MCU(107)는 전송된 영상 및 음성 데이터를 수신하여 믹싱(mixing) 처리를 수행하고, 믹싱된 영상 및 음성 데이터를 하드웨어(101, 103, 105) 각각으로 전송한다. 따라서 모든 하드웨어(101, 103, 105) 사용자의 영상 및 음성 데이터가 하드웨어(101, 103, 105) 각각에서 재생될 수 있다. In FIG. 1, hardware 101, 103, and 105 that participate in multi-party video communication through a network, including a camera, transmit video and audio data of a user of hardware 101, 103, and 105 to a MCU 107. To send). The dotted arrows in FIG. 1 indicate the flow of data. The MCU 107 receives the transmitted video and audio data, performs a mixing process, and transmits the mixed video and audio data to each of the hardware 101, 103, and 105. Therefore, video and audio data of all users of the hardware 101, 103, 105 can be reproduced in each of the hardware 101, 103, 105.

MCU(107)를 이용하는 다자간 영상 통신 시스템의 경우, 영상 및 음성 데이터의 처리가 MCU(107)에 의해 수행됨으로써, 하드웨어(101, 103, 105)가 데이터를 처리하는 부담이 적은 장점이 있지만, MCU(107)의 구현이 어렵고 복잡하여, 다자간 영상 통신 시스템의 구축 비용이 증가하는 문제가 있다. In the multi-party video communication system using the MCU 107, since the processing of the video and audio data is performed by the MCU 107, there is an advantage that the hardware (101, 103, 105) is less burden to process the data, MCU Since the implementation of 107 is difficult and complicated, there is a problem that the construction cost of the multilateral video communication system increases.

도 2는 P2P(Peer To Peer) 방식을 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다. 2 is a diagram illustrating a multi-party video communication system using a peer to peer (P2P) scheme.

도 2에서, 네트워크를 통해 다자간 영상 통신에 참여하는 단말(201, 203, 205), 예를 들어 노트북 컴퓨터, 듀얼 모니터 검퓨터 및 싱글 모니터 컴퓨터는 MCU나 서버 등을 이용하지 않고 P2P 방식으로 음성 및 영상 데이터를 교환한다. 도 2에서 실선의 화살표는 데이터의 흐름을 나타낸다. MCU를 이용하는 다자간 영상 통신 시스템과 같이, 모든 단말(201, 203, 205) 사용자의 영상 및 음성 데이터가 단말(201, 203, 205) 각각에서 재생된다.In FIG. 2, terminals 201, 203, and 205 participating in multilateral video communication through a network, for example, a notebook computer, a dual monitor computer, and a single monitor computer, do not use an MCU or a server and use voice and video in a P2P manner. Exchange data. In FIG. 2, the solid arrows indicate the flow of data. Like a multi-party video communication system using an MCU, video and audio data of all users of the terminals 201, 203, and 205 are reproduced in each of the terminals 201, 203, and 205.

P2P 방식을 이용하는 다자간 영상 통신 시스템의 경우, 서버나 MCU를 이용하 지 않음에 따라 비용 측면에서 경제적인 장점이 있다. 그러나 단말(201, 203, 205) 간에 데이터가 직접 교환되므로 데이터 처리에 따른 단말(201, 203, 205)의 부담이 커지며, 단말(201, 203, 205)의 성능 및 단말(201, 203, 205)이 속한 지역의 방화벽 등에 따라 영상 통신 품질이 저하되는 문제가 있다.In the case of a multi-party video communication system using a P2P method, there is an economic advantage in terms of cost since no server or MCU is used. However, since data is directly exchanged between the terminals 201, 203, and 205, the burden on the terminals 201, 203, and 205 due to data processing increases, and the performance of the terminals 201, 203, and 205 and the terminals 201, 203, and 205 are increased. ), There is a problem that the video communication quality is degraded due to the firewall of the area.

도 3은 서버(307)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다.3 is a diagram illustrating a multi-party video communication system using the server 307.

도 3에서, 네트워크를 통해 다자간 영상 통신에 참여하는 단말(301, 303, 305), 예를 들어 노트북 컴퓨터, 듀얼 모니터 검퓨터 및 싱글 모니터 컴퓨터는 단말(301, 303, 305) 사용자(다자간 영상 통신 시스템 참석자)의 영상 및 음성 데이터 등을 서버(307)로 전송한다. 도 3에서 점선의 화살표는 데이터의 흐름을 나타낸다. 그리고 서버(307)는 전송된 영상 및 음성 데이터를 단말(301, 303, 305)로 전송한다. 보다 자세히, 단말(301)은 서버(307)로 영상 및 음성 데이터를 전송하고, 서버(307)는 전송된 영상 및 음성 데이터를 단말(301)을 제외한 단말(303, 305)로 전송한다. In FIG. 3, terminals 301, 303, and 305 participating in multi-party video communication through a network, for example, a notebook computer, a dual monitor computer, and a single monitor computer are users of the terminals 301, 303, and 305 (multi-party video communication system). Video and audio data of the participant) are transmitted to the server 307. The dotted arrows in FIG. 3 indicate the flow of data. The server 307 transmits the transmitted video and audio data to the terminals 301, 303, and 305. In more detail, the terminal 301 transmits video and audio data to the server 307, and the server 307 transmits the transmitted video and audio data to the terminals 303 and 305 except for the terminal 301.

하지만 MUC가 이용되는 경우와 달리 서버(307)는 믹싱 처리를 수행하지 않기기 때문에 서버(307)는 단말(301)로부터 전송된 영상 및 음성 데이터를 단말(301)로 재전송하지 않는다. MCU를 이용하는 다자간 영상 통신 시스템과 같이, 모든 단말(301, 303, 305) 사용자의 영상 및 음성 데이터가 단말(301, 303, 305) 각각에서 재생된다.However, unlike the case where the MUC is used, since the server 307 does not perform the mixing process, the server 307 does not retransmit the video and audio data transmitted from the terminal 301 to the terminal 301. Like a multi-party video communication system using an MCU, video and audio data of all users of the terminals 301, 303, and 305 are reproduced in each of the terminals 301, 303, and 305.

서버(307)를 이용하는 다자간 영상 통신 시스템은 도 1 및 도 2에서 설명한 다자간 영상 통신 시스템의 장점이 적절히 혼합된 시스템으로서, 현재 다자간 영상 통신 시스템으로 가장 많이 이용되는 시스템이다. 즉, 서버(307)가 믹싱과 같이 별도의 데이터를 처리하지 않으므로 구현이 용이하며, P2P 방식과 비교하여, 단말(301, 303, 305)의 부담이 상대적으로 작다.The multi-party video communication system using the server 307 is a system in which the advantages of the multi-party video communication system described with reference to FIGS. 1 and 2 are properly mixed, and is currently the most widely used multi-party video communication system. That is, since the server 307 does not process separate data such as mixing, it is easy to implement, and the burden on the terminals 301, 303, and 305 is relatively small compared to the P2P scheme.

다만, 서버(307)가 필요로 하는 네트워크 대역폭은 영상 통신 시스템에 참여하는 참여자, 즉 단말의 수에 비례하여 증가하기 때문에, 영상 통신 시스템에 참여하는 참여자의 수가 증가함에 따라 서버(307)의 대역폭 부담이 증가하는 문제가 있다.However, since the network bandwidth required by the server 307 increases in proportion to the number of participants participating in the video communication system, that is, the terminals, the bandwidth of the server 307 increases as the number of participants participating in the video communication system increases. There is a problem that the burden increases.

본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로서, 다자간 영상 통신에 참여하는 참여자의 수와 무관하게 일정한 네트워크 대역폭으로 영상 통신을 수행할 수 있는 다자간 영상 통신 방법을 제공하는데 그 목적이 있다.The present invention has been proposed to solve the above problems, and an object of the present invention is to provide a multi-party video communication method capable of performing video communication with a constant network bandwidth regardless of the number of participants participating in multi-party video communication.

본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects and advantages of the present invention, which are not mentioned above, can be understood by the following description, and more clearly by the embodiments of the present invention. Also, it will be readily appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.

상기 목적을 달성하기 위한 본 발명은 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 서버로부터 수신하는 단계; 상기 현재 발언자 이전에 상기 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 상기 서버로부터 수신하는 단계; 및 상기 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역에 재생하며, 상기 이전 발언자에 대한 영상 데이터를 상기 디스플레이 장치의, 상기 주영역보다 작은 부영역에 재생하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.The present invention for achieving the above object comprises the steps of receiving from the server the image data for the current speaker that has obtained the right to speak video; Receiving image data of a previous speaker who has obtained the video speaking right before the current speaker from the server; And reproducing image data of the current speaker in a main area of a display device, and reproducing image data of the previous speaker in a sub area smaller than the main area of the display device. to provide.

또한 상기 목적을 달성하기 위한 본 발명은 제어 단말로부터 영상 발언권을 획득하는 단계; 상기 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 상기 현재 발언자에 대한 상기 영상 발언권이 유지될 때 서버로 전송하는 단계; 및 상기 제어 단말의 제어에 따라, 상기 현재 발언자의 영상 발언권이 종료되고, 상기 현재 발언자 이후에 상기 영상 발언권을 획득한 다음 발언자의 영상 발언권이 유지될 때 상기 현재 발언자에 대한 영상 데이터를 상기 서버로 전송하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.In addition, the present invention for achieving the above object comprises the steps of acquiring the image speaking rights from the control terminal; Transmitting image data of the current speaker who has obtained the video speaking right to a server when the video speaking right of the current speaker is maintained; And according to the control of the control terminal, when the video speaking right of the current speaker is terminated, the video speaking right is obtained after the current speaker, and then the video data of the current speaker is maintained to the server. It provides a multi-party video communication method comprising the step of transmitting.

또한 상기 목적을 달성하기 위한 본 발명은 영상 통신에 참여한 복수의 단말 중 제1단말을 영상 발언권 획득 단말로 선택하는 단계; 상기 복수의 단말 중 제2단말을 상기 영상 발언권 획득 단말로 변경하는 단계; 상기 제1단말이 상기 제1단말의 사용자에 대한 영상 데이터를 상기 제1단말 또는 제2단말의 영상 발언권이 유지될 때 전송하도록 제어하는 단계; 및 상기 제2단말이 상기 제2단말의 사용자에 대한 영상 데이터를 상기 제2단말의 영상 발언권이 유지될 때 전송하도록 제어하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.In addition, the present invention for achieving the above object comprises the steps of selecting a first terminal of the plurality of terminals participating in the video communication as the image speaking rights acquisition terminal; Changing a second terminal of the plurality of terminals to the image speaking right obtaining terminal; Controlling the first terminal to transmit image data of a user of the first terminal when the video speaking right of the first terminal or the second terminal is maintained; And controlling the second terminal to transmit image data for the user of the second terminal when the video speaking right of the second terminal is maintained.

또한 상기 목적을 달성하기 위한 본 발명은 영상 통신에 참여한 복수의 단말 중에서 영상 발언권을 획득한 제1단말로부터, 상기 제1단말의 사용자에 대한 영상 데이터를 수신하는 단계; 상기 복수의 단말 중에서 상기 제1단말 이후에 상기 영상 발언권을 획득한 제2단말의 영상 발언권이 유지될 때, 상기 제1단말 및 상기 제2단말 각각으로부터 상기 제1단말 및 상기 제2단말 각각의 사용자에 대한 영상 데이터를 수신하는 단계; 상기 제1단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제1단말을 제외한 단말로 전송하는 단계; 및 상기 제2단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제2단말을 제외한 단말로 전송하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.In addition, the present invention for achieving the above object comprises the steps of receiving the video data for the user of the first terminal from the first terminal obtained the video speaking rights of the plurality of terminals participating in the video communication; When the video speaking right of the second terminal which has obtained the video speaking right after the first terminal is maintained among the plurality of terminals, the first terminal and the second terminal of each of the first terminal and the second terminal are maintained. Receiving image data for the user; Transmitting image data received from the first terminal to a terminal other than the first terminal among the plurality of terminals; And transmitting the image data received from the second terminal to a terminal other than the second terminal among the plurality of terminals.

본 발명에 따르면, 다자간 영상 통신에 참여하는 모든 참여자가 아닌, 영상 발언권을 부여받은 현재 발언자 및 상기 현재 발언자 이전에 상기 영상 발언권을 부여받은 이전 발언자의 영상을 수신하여 재생함으로써, 다자간 영상 통신에 참여한 참여자가 발언 내용의 연속성을 느낄 수 있음과 동시에 다자간 영상 통신에 참여하는 참여자가 증가하더라도 일정한 대역폭으로 영상 통신이 수행될 수 있는 효과가 있다.According to the present invention, by receiving and playing the video of the current speaker who is granted video speaking rights and the previous speaker who is granted the video speaking right before the current speaker, not all participants who participate in the multilateral video communication. Participants can feel the continuity of the content and at the same time there is an effect that the video communication can be performed with a certain bandwidth even if the number of participants participating in the multi-party video communication increases.

이하 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있도록 상세히 설명하기 위하여, 본 발명의 가장 바람직한 실시예를 첨부 도면을 참조하여 설명하기로 한다. 상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다.DETAILED DESCRIPTION Hereinafter, the most preferred embodiments of the present invention will be described with reference to the accompanying drawings so that those skilled in the art may easily implement the technical idea of the present invention. The above objects, features, and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, and in describing the present invention, a detailed description of well-known technology related to the present invention may unnecessarily obscure the subject matter of the present invention. If it is determined that the detailed description thereof will be omitted.

도 4는 본 발명의 일실시예에 따른 다자간 영상 통신 시스템을 나타내는 도면이다.4 is a diagram illustrating a multi-party video communication system according to an embodiment of the present invention.

도 4에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 시스템은 제1전송 단말(401), 제2전송 단말(402), 제1수신 단말(403), 제2수신 단말(404), 제어 단말(405) 및 서버(406)를 포함한다. 도 4에서는 설명의 편의를 위해 단말(401 내지 405)을 전송 단말, 수신 단말 및 제어 단말로 구분하였으나, 단말(401 내지 405) 각각은 전송 단말, 수신 단말 및 제어 단말의 기능을 모두 포함할 수 있다. 또한 도 4에서는 5개의 단말(401 내지 405)이 다자간 영상 통신 시스템에 참여하는 경우가 일실시예로서 설명된다.As shown in FIG. 4, the multi-party video communication system according to the present invention includes a first transmitting terminal 401, a second transmitting terminal 402, a first receiving terminal 403, a second receiving terminal 404, and a control. Terminal 405 and server 406. In FIG. 4, for convenience of description, the terminals 401 to 405 are divided into a transmitting terminal, a receiving terminal, and a control terminal. However, each of the terminals 401 to 405 may include all the functions of the transmitting terminal, the receiving terminal, and the control terminal. have. In addition, in FIG. 4, a case in which five terminals 401 to 405 participate in a multilateral video communication system is described as an embodiment.

먼저 본 발명에 따른 다자간 영상 통신 시스템의 개념을 설명하면 다음과 같다.First, the concept of a multilateral video communication system according to the present invention will be described.

제1전송 단말(401), 제2전송 단말(402), 제1수신 단말(403), 제2수신 단말(404) 및 제어 단말(405)은 다자간 영상 통신에 참여한 단말이다. 단말(401 내지 405)이 서버(406)에 영상 통신 참여를 요청하면, 서버(406)와 단말(401 내지 405) 각각의 사이에는 세션이 설정될 수 있다. 각 단말(401 내지 405)의 사용자가 발언한 경우에, 각 단말(401 내지 405)의 음성 데이터는 서버(411)로 전송되며, 서버(411)는 전송된 음성 데이터를 단말(401 내지 405)로 전송한다. The first transmitting terminal 401, the second transmitting terminal 402, the first receiving terminal 403, the second receiving terminal 404, and the control terminal 405 are terminals participating in multilateral video communication. When the terminals 401 to 405 request the server 406 to participate in video communication, a session may be established between the server 406 and each of the terminals 401 to 405. When the user of each terminal 401-405 speaks, the voice data of each terminal 401-405 is transmitted to the server 411, and the server 411 transmits the transmitted voice data to the terminal 401-405. To send.

상기된 바와 같이, 예를 들어 제1전송 단말(401)의 사용자가 발언한 경우에 제1전송 단말(401)은 음성 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 음성 데이터를 제2전송 단말(402), 제1 및 제2수신 단말(403, 404), 제어 단말(405) 로 전송한다. 또한 제1수신 단말(403)의 사용자가 발언한 경우에, 제1수신 단말(403)은 음성 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 음성 데이터를 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405)로 전송한다.As described above, for example, when the user of the first transmitting terminal 401 speaks, the first transmitting terminal 401 transmits the voice data to the server 406, and the server 406 transmits the transmitted voice data. Is transmitted to the second transmission terminal 402, the first and second reception terminals 403 and 404, and the control terminal 405. In addition, when the user of the first receiving terminal 403 speaks, the first receiving terminal 403 transmits the voice data to the server 406, and the server 406 transmits the transmitted voice data to the first and the second. The transmission terminal 401, 402, the second receiving terminal 404, the control terminal 405 is transmitted.

다만 본 발명에 따르면, 영상 발언권을 획득한 단말이, 단말의 사용자에 대한 영상 데이터를 서버(406)로 전송하며, 서버(406)는 영상 데이터를 전송한 단말을 제외한 단말로 전송된 영상 데이터를 전송한다. 여기서, 영상 발언권은 영상 데이터가 단말의 디스플레이 장치에 재생될 수 있는 권한으로서, 영상 발언권을 획득한 단말은 단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다. 본 발명에 따르면 종래와 달리 다자간 영상 통신에 참여한 참석자(단말)의 수에 무관하게 영상 발언권을 획득한 일정한 인원의 참석자에 대한 영상 데이터만이 서버(406)를 통해 송수신되므로, 일정한 네트워크 대역폭이 유지되면서 영상 통신이 수행될 수 있다.According to the present invention, however, the terminal acquiring the image speaking right transmits the image data of the user of the terminal to the server 406, and the server 406 transmits the image data transmitted to the terminal except for the terminal which transmitted the image data. send. Here, the image speaking right is a right to reproduce the image data on the display device of the terminal, and the terminal obtaining the image speaking right transmits the image data for the user of the terminal to the server 406. According to the present invention, since only the video data for a certain number of attendees who have acquired a video speaking right regardless of the number of participants (terminals) participating in the multi-party video communication is transmitted and received through the server 406, a constant network bandwidth is maintained. The video communication can be performed.

본 발명에서 제1전송 단말(401)은 현재 영상 발언권을 획득한 단말이며, 제2전송 단말(402)은 제1전송 단말(401)이 영상 발언권을 획득하기 이전에 영상 발언권을 획득했던 단말이다. 도 4에서는 영상 발언권이 하나의 단말에만 부여되는 경우가 일실시예로서 설명되나, 영상 발언권은 동시에 일정한 복수개의 단말에 부여될 수도 있다. In the present invention, the first transmitting terminal 401 is a terminal that has acquired the current video speaking right, and the second transmitting terminal 402 is a terminal that has obtained the video speaking right before the first transmitting terminal 401 obtains the video speaking right. . In FIG. 4, the case in which the video speaking right is granted to only one terminal is described as an embodiment, but the video speaking right may be granted to a plurality of terminals at the same time.

한편, 본 발명에서는 다자간 영상 통신 시스템에 참여한 단말(401 내지 405)의 사용자가 발언 내용의 연속성을 느낄 수 있도록 하기 위하여, 현재 영상 발 언권을 획득하기 직전에 영상 발언권을 획득했던 제2전송 단말(402) 역시 영상 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 영상 데이터를 단말로 전송한다. Meanwhile, in the present invention, in order for a user of the terminals 401 to 405 participating in the multi-party video communication system to feel the continuity of the content of the utterance, the second transmission terminal that has acquired the video uttering right just before obtaining the current video uttering right ( 402 also transmits the image data to the server 406, the server 406 transmits the transmitted image data to the terminal.

보다 자세히, 제1 및 제2전송 단말(401, 402) 중 하나 이상의 사용자에 대한 영상 데이터를 수신한 단말(401 내지 405)은 수신한 영상 데이터를 디스플레이 장치에 재생할 수 있다. 따라서 제1 및 제2전송 단말(401, 402)의 사용자 영상이 단말(401 내지 405)의 디스플레이 장치에 표시될 수 있다. 즉, 단말(401 내지 405)의 디스플레이 장치에는 제1전송 단말(401)의 사용자인 현재 발언자와 제2전송 단말(402)의 사용자인 이전 발언자가 표시됨으로써 다자간 영상 통신 시스템에 참여한 참여자, 즉 단말(401 내지 405)의 사용자가 발언 내용의 연속성을 느낄 수 있다.In more detail, the terminals 401 to 405 that have received image data for one or more users of the first and second transmission terminals 401 and 402 may play the received image data on the display device. Accordingly, user images of the first and second transmission terminals 401 and 402 may be displayed on the display devices of the terminals 401 to 405. That is, the display apparatus of the terminals 401 to 405 displays a current speaker who is a user of the first transmission terminal 401 and a previous speaker who is a user of the second transmission terminal 402, thereby participating in the multi-party video communication system. The users 401 to 405 can feel the continuity of the contents of the remarks.

예를 들어, 본 발명에 따른 다자간 영상 통신 시스템이 원격 화상 회의에 사용되며, 이전 발언자가 질문을 하고 현재 발언자가 답변을 하는 경우 이전 발언자와 현재 발언자가 모두 디스플레이 장치에 표시됨으로써 다자간 영상 통신 시스템에 참여한 참여자들은 발언 내용의 연속성을 느낄 수 있다.For example, the multi-party video communication system according to the present invention is used for teleconference, and when the previous speaker asks a question and the current speaker answers, both the previous speaker and the current speaker are displayed on the display device. Participants can feel the continuity of what they say.

한편, 본 발명에 따르면, 현재 발언자와 이전 발언자의 영상 데이터가 디스플레이 장치에 재생될 때, 현재 발언자에 대한 영상은 디스플레이 장치의 주영역에 표시되고, 이전 발언자의 영상은 디스플레이 장치의 부영역에 표시된다. 부영역은 주영역보다 작은 영역이다. 즉, 본 발명에 따르면 현재 및 이전 발언자의 영상을 함께 디스플레이 장치에 재생하여 발언 내용의 연속성을 유지하되, 이전 발언자보 다는 현재 발언자의 발언이 현재 진행되는 것이므로 현재 발언자에 대한 영상을 주영역에 표시한다.Meanwhile, according to the present invention, when the image data of the current speaker and the previous speaker are reproduced on the display device, the image of the current speaker is displayed in the main area of the display device, and the image of the previous speaker is displayed in the sub area of the display device. do. The subregion is an area smaller than the main region. That is, according to the present invention, the image of the current speaker and the previous speaker are reproduced together on the display device to maintain the continuity of the contents of the statement, but since the current speaker's speech is currently in progress rather than the previous speaker, the image of the current speaker is displayed in the main area. do.

또한, 이전 발언자의 영상이 주영역보다 작은 부영역에서 재생됨에 따라, 이전 발언자에 대한 영상 데이터의 크기는 현재 발언자의 영상 데이터의 크기보다 작아도 무방하다. 따라서 이전 발언자에 대한 영상 데이터의 크기가 작은만큼 영상 데이터의 송수신에 필요한 대역폭 및 서버(406)의 리소스 부담 등을 줄일 수 있다. In addition, as the image of the previous speaker is reproduced in the sub-region smaller than the main region, the size of the image data for the previous speaker may be smaller than that of the current speaker. Therefore, as the size of the image data for the previous speaker is small, the bandwidth required for the transmission and reception of the image data and the resource burden of the server 406 can be reduced.

이하, 본 발명에 따른 다자간 영상 통신 시스템에 대해 보다 자세히 설명하기로 한다.Hereinafter, a multi-party video communication system according to the present invention will be described in detail.

제어 단말(405)은 다자간 영상 통신 시스템에 참여한 단말을 제어하며, 제1 및 제2전송 단말(401, 402)에 영상 발언권을 부여한다. 그리고 제1및 제2전송 단말(401, 402)의 사용자에 대한 영상 데이터의 전송을 제1 및 제2전송 단말(401, 402)로 요청한다. 다자간 영상 통신 시스템을 이용하여 영상 회의가 진행되는 경우, 제어 단말(405)은 회의 진행자의 역할을 한다고 볼 수 있다.The control terminal 405 controls the terminal participating in the multi-party video communication system, and grants a video speaking right to the first and second transmission terminals (401, 402). The first and second transmission terminals 401 and 402 request the transmission of the image data to the user of the first and second transmission terminals 401 and 402. When a video conference is conducted using the multi-party video communication system, the control terminal 405 may be regarded as a conference coordinator.

제1 및 제2전송 단말(401, 402)은 제어 단말(405)의 요청에 응답해 현재 발언자 및 이전 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 현재 발언자 다음에 영상 발언권을 획득하는 제3전송 단말의 사용자인 다음 발언자가 존재하는 경우에 본 발명에 따르면, 현재 발언자에 대한 영상 데이터는 다음 발언자에 대한 영상 발언권이 유지되는 동안 추가로 서버(406)로 전송됨을 알 수 있다.The first and second transmitting terminals 401 and 402 transmit image data of the current speaker and the previous speaker to the server 406 in response to a request from the control terminal 405. Here, according to the present invention, when there is a next speaker who is a user of a third transmission terminal obtaining a video speaking right after the current speaker, the video data for the current speaker is additionally maintained while the video speaking right for the next speaker is maintained. It can be seen that 406 is sent.

제1 및 제2수신 단말(403, 404)은 서버(406)로부터 현재 발언자 및 이전 발 언자에 대한 영상 데이터를 수신한다. 그리고 현재 발언자 및 이전 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역과 부영역에 각각 재생한다. 디스플레이 장치는 제1 및 제2수신 단말(403, 404)에 포함되거나 또는 제1 및 제2수신 단말(403, 404)과 케이블 등으로 연결된 모니터일 수 있다. The first and second receiving terminals 403 and 404 receive image data of the current speaker and the previous speaker from the server 406. The video data of the current speaker and the previous speaker are reproduced in the main region and the sub region of the display apparatus, respectively. The display device may be a monitor included in the first and second receiving terminals 403 and 404 or connected to the first and second receiving terminals 403 and 404 by a cable or the like.

그리고 서버(406)는 상기된 바와 같이, 단말로부터 영상 또는 음성 데이터를 수신하여 단말로 전송하는 역할을 수행한다.As described above, the server 406 receives and transmits video or audio data from the terminal to the terminal.

본 발명에 따른 다자간 영상 통신 시스템에 대해 다시 정리하면, 종래와 달리 본 발명은 영상 통신 시스템에 참여한 단말 중 일정 단말의 사용자 영상만이 디스플레이되도록 제어한다. 이 때 본 발명은 발언 내용의 연속성을 위해 현재 발언자 및 이전 발언자에 대한 사용자 영상이 디스플레이 되도록 제어할 수 있다. 따라서 본 발명에 따르면, 발언 내용의 연속성이 유지되되, 영상 데이터의 송수신에 따른 서버(406)의 대역폭 부담이 감소할 수 있다. 또한 영상 발언권 획득 및 요청 등이 서버가 아닌 제어 단말(405)을 통해 이루어지므로 서버(406)의 리소스 부담이 감소될 수 있으며, 단말의 업그레이드 등이 용이한 장점이 있다.The multilateral video communication system according to the present invention is rearranged, unlike the related art, the present invention controls only the user image of a certain terminal among the terminals participating in the video communication system. In this case, the present invention may control to display the user image of the current speaker and the previous speaker for continuity of the contents of the statement. Therefore, according to the present invention, while the continuity of the contents of speech is maintained, the bandwidth burden of the server 406 due to the transmission and reception of the image data can be reduced. In addition, since the acquisition and request of the image speaking right are made through the control terminal 405 rather than the server, the resource burden of the server 406 may be reduced, and the terminal may be easily upgraded.

한편, 제어 단말(405)의 기능은 서버(406)의 성능 또는 시스템 설계 등에 따라 서버(406)가 수행할 수도 있다. 또한 상기된 바와 같이, 도 4에 도시된 단말(401 내지 405)은 모두 전송 단말(401, 402), 수신 단말(403, 404) 및 제어 단말(405)의 기능을 포함할 수 있으며, 제어 단말(405)에 설정된 세션이 종료되는 경우 제1 및 제2전송 단말(401, 402), 제1 및 제2수신 단말(403, 404) 중 하나가 제어 단말(405)의 기능을 수행할 수 있다.Meanwhile, the function of the control terminal 405 may be performed by the server 406 according to the performance of the server 406 or the system design. In addition, as described above, the terminals 401 to 405 illustrated in FIG. 4 may all include the functions of the transmitting terminals 401 and 402, the receiving terminals 403 and 404, and the control terminal 405. When the session set in step 405 ends, one of the first and second transmitting terminals 401 and 402 and the first and second receiving terminals 403 and 404 may perform a function of the control terminal 405. .

도 5는 도 4의 제1수신 단말(403)이 영상 데이터를 디스플레이 장치(501)에 재생하는 화면을 나타내는 도면이다.FIG. 5 is a diagram illustrating a screen on which the first receiving terminal 403 of FIG. 4 reproduces image data on the display apparatus 501.

도 5에 도시된 바와 같이, 디스플레이 장치(501)의 주영역(503)에 현재 발언자의 영상이 표시되며, 부영역(505)에 이전 발언자의 영상이 표시된다. 그리고 추가적으로 로컬 영역(507)에 제1수신 단말(403)의 사용자에 대한 영상이 표시될 수 있다. 제1수신 단말(403)의 사용자에 대한 영상 데이터는 카메라를 통해 제1수신 단말(403)이 수신할 수 있으며, 제1수신 단말(403)은 로컬 영역(507)에 제1수신 단말(403)의 사용자에 대한 영상을 표시할 수 있다. As shown in FIG. 5, an image of the current speaker is displayed in the main region 503 of the display apparatus 501, and an image of the previous speaker is displayed in the subregion 505. In addition, an image of a user of the first receiving terminal 403 may be displayed in the local area 507. Image data of a user of the first receiving terminal 403 may be received by the first receiving terminal 403 through a camera, and the first receiving terminal 403 may receive the first receiving terminal 403 in the local area 507. Image of the user may be displayed.

제1수신 단말(403)이 자신의 사용자에 대한 영상을 미리 수신받음으로써, 이후 제1수신 단말(403)이 영상 발언권을 획득할 경우 제1수신 단말(403)은 신속하게 영상 데이터를 서버(406)로 전송할 수 있다. 즉, 로컬 영역(507)에는 발언 대기자가 표시된다고 할 수 있다.Since the first receiving terminal 403 receives the image of the user in advance, when the first receiving terminal 403 acquires the right to speak the video, the first receiving terminal 403 quickly transmits the image data to the server ( 406. In other words, it can be said that the waiting area for speaking is displayed in the local area 507.

도 5를 이용하여, 도 4의 다자간 영상 통신 시스템을 설명하면 다음과 같다.The multilateral video communication system of FIG. 4 will now be described with reference to FIG. 5.

로컬 영역(507)에 표시된 제1수신 단말(403)의 사용자가 영상 발언권을 획득할 경우에, 제1수신 단말(403)의 사용자는 현재 발언자로서, 제1수신 단말(403)의 사용자에 대한 영상이 주영역(503)에 표시된다. 그리고 주영역(503)에 표시되던 현재 발언자에 대한 영상은 이전 발언자에 대한 영상이 되어 부영역(505)에 표시된다. 그리고 부영역(505)에 표시되던 이전 발언자에 대한 영상은 사라진다. 이후 다른 단말의 사용자가 영상 발언권을 획득한 경우, 제1수신 단말(403)의 사용자에 대 한 영상은 이전 발언자에 대한 영상이 되어 부영역(505)에 표시된다.When the user of the first receiving terminal 403 displayed in the local area 507 acquires the right to speak the video, the user of the first receiving terminal 403 is the current speaker and the user of the first receiving terminal 403. The image is displayed in the main area 503. The image of the current speaker displayed in the main area 503 becomes an image of the previous speaker and is displayed in the sub area 505. The image of the previous speaker displayed on the subregion 505 disappears. When the user of the other terminal has obtained the image speaking right, the image of the user of the first receiving terminal 403 becomes the image of the previous speaker and is displayed in the subregion 505.

한편, 디스플레이 장치(501)에 재생되는 발언자 즉, 단말의 사용자에 대한 영상에 대한 데이터는 일실시예로서 아바타 데이터일 수 있으며, 아바타 데이터는 미리 단말에 저장되어 있을 수 있다. 또한 도 5에 도시된 화면은 또한 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405)의 디스플레이 장치에도 재생되는 화면이며, 이 때 로컬 영역(507)에는 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405) 각각의 사용자 영상이 표시된다.Meanwhile, data of an image of a speaker, that is, a user of the terminal, reproduced on the display apparatus 501 may be avatar data as an example, and the avatar data may be stored in the terminal in advance. In addition, the screen shown in FIG. 5 is also a screen reproduced on the display device of the first and second transmitting terminals 401 and 402, the second receiving terminal 404, and the control terminal 405, at which time the local area 507 ) Displays user images of each of the first and second transmitting terminals 401 and 402, the second receiving terminal 404, and the control terminal 405.

이하 도 4의 단말의 동작을 도 6 내지 도 9를 참조하여 자세히 설명하기로 한다.Hereinafter, the operation of the terminal of FIG. 4 will be described in detail with reference to FIGS. 6 to 9.

도 6은 본 발명의 제1실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 수신 단말(403, 404)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다. 이하에서 발언자는 상기된 바와 같이, 다자간 영상 통신 시스템에 참여한 단말의 사용자이다.6 is a flowchart illustrating a multi-party video communication method according to a first embodiment of the present invention, and illustrates a multi-party video communication method performed by the reception terminals 403 and 404. In the following, the speaker is a user of a terminal participating in a multi-party video communication system as described above.

도 6에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S601로부터 시작된다. 단계 S601에서 수신 단말(403, 404)은 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 수신한다.As shown in Fig. 6, the multi-party video communication method according to the present invention starts from step S601. In step S601, the receiving terminals 403 and 404 receive image data of the current speaker who has obtained the image speaking right.

다음 단계 S603에서 수신 단말(403, 404)은 서버(406)로부터 현재 발언자 이전에 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 추가로 수신한다. 여기서, 이전 발언자는 현재 발언자가 영상 발언권을 획득하기 직전 차례에 영상 발언권을 획득한 발언자일 수 있다.In the next step S603, the receiving terminals 403 and 404 further receive image data for the previous speaker who has obtained the video speaking right before the current speaker from the server 406. Here, the previous speaker may be a speaker in which the current speaker acquires the video speaking right in the order immediately before obtaining the video speaking right.

다음 단계 S605에서 수신 단말(403, 404)은 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역(503)에 재생하며, 이전 발언자에 대한 영상 데이터를 디스플레이 장치의, 주영역보다 작은 부영역(505)에 재생한다. 이전 발언자에 대한 영상 데이터는 부영역(505)에 재생되므로 이전 발언자에 대한 영상 데이터의 크기는 현재 발언자에 대한 영상 데이터의 크기보다 작은 것이 바람직하다. 이전 발언자에 대한 영상 데이터의 크기가 작은 만큼 영상 데이터가 송수신되는데 필요한 대역폭은 감소될 수 있다.In the next step S605, the receiving terminals 403 and 404 reproduce the image data for the current speaker in the main area 503 of the display device, and the sub-region 505 smaller than the main area of the display device for the previous speaker. Play on). Since the image data for the previous speaker is reproduced in the subregion 505, the size of the image data for the previous speaker is preferably smaller than the size of the image data for the current speaker. As the size of the image data for the previous speaker is small, the bandwidth required for transmitting and receiving the image data may be reduced.

한편, 본 발명에 따른 다자간 영상 통신 방법은 단계 S607, 단계 S609 및 단계 S611을 더 포함할 수 있다.Meanwhile, the multi-party video communication method according to the present invention may further include step S607, step S609, and step S611.

단계 S607에서 수신 단말(403, 404)은 식별자를 포함하며, 현재 발언자 이후에 영상 발언권을 획득한 다음 발언자에 대한 영상 데이터를 추가로 수신한다. 여기서, 다음 발언자는 현재 발언자의 영상 발언권이 종료된 직후의 차례에 영상 발언권을 획득한 발언자일 수 있다.In step S607, the receiving terminals 403 and 404 include an identifier, and after receiving a video speaking right after the current speaker, additionally receives video data for the speaker. Here, the next speaker may be a speaker that acquires a video speaking right in turn immediately after the current speaker's video speaking right ends.

다음 단계 S609에서 수신 단말(403, 404)은 식별자를 인식한다.In the next step S609, the receiving terminals 403 and 404 recognize the identifier.

다음 단계 S611에서 수신 단말(403, 404)은 식별자를 인식한 경우, 다음 발언자에 대한 영상 데이터를 주영역(503)에 재생하며, 현재 발언자에 대한 영상 데이터를 부영역(505)에 재생한다. 본 발명에 따르면, 수신 단말(403, 404)이 식별자를 인식한 경우에 디스플레이 장치의 영역의 영상을 교체함으로써 영상이 자연스럽게 교체될 수 있다. 예를 들어, 주영역(503)에 표시되고 있는 현재 발언자의 영상 이 부영역(505)으로 이동되고, 다음 발언자의 영상이 주영역(503)에 표시되어야 할 경우 수신 단말(403, 404)은 식별자를 인식하여 다음 발언자의 영상 데이터가 수신 단말(403, 404)로 전송되고 있음을 인식할 수 있다. 따라서 수신 단말(403, 404)은 다음 발언자의 영상 데이터의 수신을 인식하고 디스플레이 장치의 영역의 영상을 교체함으로써 영상의 끊김 현상없이 영상을 교체할 수 있다.In the next step S611, when the receiving terminals 403 and 404 recognize the identifier, the receiving terminal 403 and 404 reproduce the image data for the next speaker in the main region 503, and reproduce the image data for the current speaker in the sub region 505. According to the present invention, when the receiving terminals 403 and 404 recognize the identifier, the image may be naturally replaced by replacing the image of the area of the display apparatus. For example, when the image of the current speaker displayed in the main area 503 is moved to the sub area 505, and the image of the next speaker should be displayed in the main area 503, the receiving terminals 403 and 404 By recognizing the identifier, it is possible to recognize that image data of the next speaker is being transmitted to the receiving terminals 403 and 404. Accordingly, the reception terminals 403 and 404 may recognize the reception of the image data of the next speaker and replace the image of the region of the display device to replace the image without interruption of the image.

단계 S605에서도 현재 발언자에 대한 영상 데이터에 식별자가 포함될 수 있다.In operation S605, the identifier may be included in the image data of the current speaker.

한편, 단계 S605에서 이전 발언자에 대한 영상 데이터는 현재 발언자에 대한 영상 데이터의 크기보다 작은 것이 바람직하다고 전술되었다. 따라서 단계 S611에서 현재 발언자의 영상이 주영역(503)에서 부영역(505)으로 이동되는 경우 현재 발언자에 대한 영상 데이터의 크기도 작아짐이 바람직하다.On the other hand, it is described above that the video data for the previous speaker is smaller than the size of the video data for the current speaker in step S605. Therefore, when the current speaker's image is moved from the main area 503 to the sub area 505 in step S611, the size of the image data for the current speaker is also reduced.

그리고 도면에 도시되지는 않았지만 수신 단말(403, 404)은 서버(406)로부터 이전 발언자, 현재 발언자 및 다음 발언자에 대한 음성 데이터를 수신하여 재생할 수 있다. 또한 영상 발언권을 획득한 이전 발언자, 현재 발언자 및 다음 발언자 뿐만 아니라 일반 참여자에 대한 음성 데이터 역시 수신하여 재생할 수 있다.Although not shown in the drawing, the reception terminals 403 and 404 may receive and reproduce voice data for the previous speaker, the current speaker, and the next speaker from the server 406. In addition, audio data for the previous speaker, the current speaker, and the next speaker who have acquired the video speaking right as well as the general participant may be received and reproduced.

도 7은 본 발명의 제2실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 제1전송 단말(401)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.7 is a flowchart illustrating a multi-party video communication method according to a second embodiment of the present invention, and illustrates a multi-party video communication method performed by the first transmission terminal 401.

도 7에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S701로부터 시작된다. 단계 S701에서 제1전송 단말(401)은 제어 단말(405)로부터 영상 발언권을 획득한다.As shown in Fig. 7, the multi-party video communication method according to the present invention starts from step S701. In operation S701, the first transmission terminal 401 obtains an image speaking right from the control terminal 405.

단계 S703에서 제1전송 단말(401)은 영상 발언권이 유지될 때, 현재 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 현재 발언자는 전술된 바와 같이, 제1전송 단말(401)의 사용자이다. 그리고 제1전송 단말(401)은 제어 단말(405)의 별도의 영상 데이터 전송 요청에 응답해 영상 데이터를 서버(406)로 전송하거나, 영상 발언권을 획득한 후에 영상 데이터를 서버(406)로 전송할 수 있다. 제1전송 단말(401)은 별도의 제어부를 포함할 수 있으며, 제어부가 전송 요청에 응답해 전송 단말(401)의 데이터 전송을 제어할 수 있다. 또한 제1전송 단말(401)은 수신 단말이 영상 데이터 전송을 인식할 수 있도록 식별자를 삽입하여 영상 데이터를 서버(406)로 전송할 수 있다.In step S703, when the video speaking right is maintained, the first transmitting terminal 401 transmits the video data for the current speaker to the server 406. Here, the present speaker is a user of the first transmission terminal 401, as described above. The first transmission terminal 401 transmits the image data to the server 406 in response to a separate image data transmission request of the control terminal 405 or transmits the image data to the server 406 after acquiring the image speaking right. Can be. The first transmission terminal 401 may include a separate control unit, and the control unit may control data transmission of the transmission terminal 401 in response to the transmission request. In addition, the first transmitting terminal 401 may insert the identifier to transmit the image data to the server 406 so that the receiving terminal can recognize the image data transmission.

단계 S705에서 제1전송 단말(401)은 제어 단말(405)의 제어에 따라, 기 설정된 기간에 현재 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 기 설정된 기간은 일실시예로서 현재 발언자의 영상 발언권이 종료되고 현재 발언자 이후에 영상 발언권을 획득한 다음 발언자의 영상 발언권이 유지될 때까지 일 수 있다. 즉, 제어 단말(405)은 다음 발언자의 영상 발언권이 유지되는 기간을 감지하고, 제1전송 단말(401)은 제어 단말(405)의 제어에 따라 영상 발언권 종료 후에도 현재 발언자에 대한 영상 데이터를 추가적으로 서버(406)로 전송한다. 그리고 추가적으로 전송된 영상 데이터는 부영역(507)에 재생되므로 단계 S707에서 전송되는 데이터의 크기는 단계 S705에서 전송되는 데이터의 크기보다 작은 것이 바람직하 다.In operation S705, under the control of the control terminal 405, the first transmission terminal 401 transmits image data about the current speaker to the server 406 in a preset period. Here, the preset period may be until the video speaker of the current speaker ends, acquires the video speaker right after the current speaker, and then maintains the video speaker of the speaker. That is, the control terminal 405 detects a period during which the next speaker's video speaking right is maintained, and the first transmitting terminal 401 additionally adds image data for the current speaker even after the video speaking right is terminated under the control of the control terminal 405. Send to server 406. In addition, since the additionally transmitted image data is reproduced in the subregion 507, the size of the data transmitted in step S707 is preferably smaller than the size of the data transmitted in step S705.

한편, 본 발명에 따른 다자간 영상 통신 방법은 제1전송 단말(401)이, 현재 발언자의 영상 발언권이 유지되기 전부터 카메라로부터 현재 발언자에 대한 영상 데이터를 수신하는 단계를 더 포함할 수 있다. 따라서, 단계 S701에서 영상 발언권이 획득된 이후, 제1전송 단말(401)은 신속하게 영상 데이터를 서버(406)로 전송할 수 있다.Meanwhile, the multi-party video communication method according to the present invention may further include the step of receiving, by the first transmission terminal 401, image data of the current speaker from the camera before the current speaker's video speaking right is maintained. Therefore, after the image speaking right is obtained in step S701, the first transmitting terminal 401 may quickly transmit the image data to the server 406.

또한 상기된 바와 같이, 제1전송 단말(401)이 전송하는 영상 데이터는 현재 발언자에 대한 아바타일 수 있다.As described above, the image data transmitted by the first transmitting terminal 401 may be an avatar for the current speaker.

도 8은 본 발명의 제3실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 제어 단말(405)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.8 is a flowchart illustrating a multi-party video communication method according to a third embodiment of the present invention, and illustrates a multi-party video communication method performed by the control terminal 405.

도 8에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S801로부터 시작된다. 단계 S801에서 제어 단말(405)은 영상 통신에 참여한 복수의 단말 중 제1단말을 영상 발언권 획득 단말로 선택한다. 여기서, 제1단말은 도 4의 제1전송 단말(401)에 대응되며, 복수의 단말은 도 4에 도시된 단말(401 내지 405) 및 제3전송 단말을 포함하는 것에 대응된다. 단계 S801에서 제1단말에 영상 발언권이 부여되는 방법은 자세히 후술하기로 한다.As shown in Fig. 8, the multi-party video communication method according to the present invention starts from step S801. In step S801, the control terminal 405 selects the first terminal among the plurality of terminals participating in the video communication as the video speaking right obtaining terminal. Here, the first terminal corresponds to the first transmission terminal 401 of FIG. 4, and the plurality of terminals corresponds to the terminal 401 to 405 and the third transmission terminal shown in FIG. 4. The method in which the video speaking right is granted to the first terminal in step S801 will be described in detail later.

단계 S809에서 제어 단말(405)은 복수의 단말 중 제2단말을 영상 발언권 획득 단말로 변경한다. 여기서, 제2단말은 도 4에서 언급된 제3전송 단말에 대응될 수 있다. 보다 자세히, 단계 S809에서는 제1단말의 영상 발언권이 종료된 이후에 제2단말에 영상 발언권이 부여될 수 있다.In step S809, the control terminal 405 changes the second terminal among the plurality of terminals to the image speaking right obtaining terminal. Here, the second terminal may correspond to the third transmission terminal mentioned in FIG. In more detail, in step S809, the video speaking right may be granted to the second terminal after the video speaking right of the first terminal ends.

단계 S811에서 제어 단말(405)은 제1단말이 제1단말의 사용자에 대한 영상 데이터를 제1단말 또는 제2단말의 영상 발언권이 유지될 때 전송하도록 제어한다. 즉, 단계 S811에서 제1단말은 제1단말 또는 제2단말의 영상 발언권이 유지될 때 제1단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다. In step S811, the control terminal 405 controls the first terminal to transmit the image data for the user of the first terminal when the video speaking right of the first terminal or the second terminal is maintained. That is, in step S811, when the video speaking right of the first terminal or the second terminal is maintained, the first terminal transmits image data about the user of the first terminal to the server 406.

제어 단말(405)은 제1단말에 영상 발언권을 부여하고 별도의 영상 데이터 전송을 요청할 수 있다. 또는 영상 발언권에 영상 데이터 전송 요청이 포함될 수 있다. 제어 단말(405)의 요청에 응답해 제1단말은 영상 데이터를 서버(406)로 전송한다. 그리고 제1단말은 제어 단말(405)의 제어에 따라 제2단말의 영상 발언권이 유지될 때 역시 영상 데이터를 서버(406)로 전송한다.The control terminal 405 may grant a video speaking right to the first terminal and request separate video data transmission. Alternatively, a video data transmission request may be included in the video speaking right. In response to a request from the control terminal 405, the first terminal transmits the image data to the server 406. The first terminal also transmits the video data to the server 406 when the video speaking right of the second terminal is maintained under the control of the control terminal 405.

단계 S813에서 제어 단말(405)은 제2단말이 제2단말의 사용자에 대한 영상 데이터를 제2단말의 영상 발언권이 유지될 때 전송하도록 제어한다. 즉, 단계 S813에서 제2단말은 제2단말의 영상 발언권이 유지될 때 제2단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다.In step S813, the control terminal 405 controls the second terminal to transmit the video data for the user of the second terminal when the video speaking right of the second terminal is maintained. That is, in step S813, the second terminal transmits the video data for the user of the second terminal to the server 406 when the video speaking right of the second terminal is maintained.

본 발명에 따르면, 제1단말의 영상 발언권이 유지될 때 전송된 제1단말의 사용자에 대한 영상 데이터는 주영역(503)에 재생된다. 그리고 제2단말의 영상 발언권이 유지될 때 전송된 제1단말의 사용자에 대한 영상 데이터는 부영역(505)에 재생되며, 제2단말의 사용자에 대한 영상 데이터는 주영역(503)에 재생된다.According to the present invention, when the video speaking right of the first terminal is maintained, the video data for the user of the first terminal transmitted is reproduced in the main area 503. When the video speaking right of the second terminal is maintained, the image data for the user of the first terminal is reproduced in the subregion 505, and the image data for the user of the second terminal is reproduced in the main region 503. .

한편, 본 발명에 따르면, 단계 801은 단계 S803, 단계 S805 및 단계 S807을 포함할 수 있다.Meanwhile, according to the present invention, step 801 may include step S803, step S805, and step S807.

단계 S803에서 제어 단말(405)은 복수의 단말로부터 음성 데이터를 수신한다. In step S803, the control terminal 405 receives voice data from a plurality of terminals.

단계 S805에서 제어 단말(405)은 단계 S803에서 수신된 음성 데이터의 음성 크기를 기 설정된 시간동안 판단한다. 복수의 단말과 서버간의 거리, 네트워크 상황 등에 따라 복수의 단말이 전송하는 음성 데이터가 제어 단말(405)로 전송되는 시간 등에 차이가 발생할 수 있기 때문에 제어 단말(405)은 기 설정된 시간동안 음성 크기를 판단한다.In step S805, the control terminal 405 determines the voice size of the voice data received in step S803 for a predetermined time. Since a difference may occur in the time when the voice data transmitted from the plurality of terminals is transmitted to the control terminal 405 according to the distance between the plurality of terminals and the server, network conditions, and the like, the control terminal 405 may adjust the volume of the voice for a preset time. To judge.

단계 S807에서 제어 단말(405)은 단계 S805에서의 판단 결과 음성 크기가 가장 큰 음성 데이터에 대응되는 제1단말에 영상 발언권을 부여한다. 즉, 제어 단말(405)은 다자간 영상 통신 시스템에 참여한 복수의 단말의 사용자에 대한 음성 데이터를 분석하여, 음성 크기가 가장 큰 단말 사용자에게 영상 발언권을 부여할 수 있다.In step S807, the control terminal 405 grants a video speaking right to the first terminal corresponding to the voice data having the largest voice size as a result of the determination in step S805. That is, the control terminal 405 may analyze the voice data of the users of the plurality of terminals participating in the multi-party video communication system, and grant the right to speak the video to the terminal user having the largest voice size.

그리고 단계 S809에서도 제어 단말(405)은 단계 S801과 같은 방법으로 제2단말에 영상 발언권을 부여할 수 있다.In addition, in step S809, the control terminal 405 may grant a video speaking right to the second terminal in the same manner as in step S801.

한편, 제어 단말(405)은, 단계 S811에서의 요청에 따라 제1단말이 전송하는 영상 데이터의 수신 준비에 대한 요청을, 복수의 단말(401 내지 405) 중 제1단말을 제외한 단말로 할 수 있다. 그리고 제어 단말(405)의 기능은 서버(406)에 의해 수행될 수도 있다.On the other hand, the control terminal 405, in response to the request in step S811 can make a request for the preparation of the reception of the video data transmitted by the first terminal to the terminal except the first terminal of the plurality of terminals (401 to 405). have. And the function of the control terminal 405 may be performed by the server 406.

도 9는 본 발명의 제4실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 서버(406)가 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.9 is a flowchart illustrating a multi-party video communication method according to a fourth embodiment of the present invention, and illustrates a multi-party video communication method performed by the server 406.

도 9에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S901로부터 시작된다. 단계 S901에서 서버(406)는 영상 통신에 참여한 복수의 단말(401 내지 405) 중에서 영상 발언권을 획득한 제1단말로부터, 제1단말의 사용자에 대한 영상 데이터를 수신한다. 여기서, 제1단말은 도 4의 제1전송 단말(401)에 대응되며, 복수의 단말은 도 4에 도시된 단말(401 내지 405) 및 제3전송 단말을 포함하는 것에 대응된다.As shown in Fig. 9, the multi-party video communication method according to the present invention starts from step S901. In operation S901, the server 406 receives image data of a user of the first terminal from a first terminal that acquires a video speaking right among the plurality of terminals 401 to 405 participating in the video communication. Here, the first terminal corresponds to the first transmission terminal 401 of FIG. 4, and the plurality of terminals corresponds to the terminal 401 to 405 and the third transmission terminal shown in FIG. 4.

단계 S903에서 서버(406)는 복수의 단말 중에서 제1단말 이후에 영상 발언권을 획득한 제2단말의 영상 발언권이 유지될 때, 제1단말 및 제2단말 각각으로부터 제1단말 및 제2단말 각각의 사용자에 대한 영상 데이터를 수신한다. 여기서, 제2단말은 도 4에서 언급된 제3전송 단말일 수 있다. 그리고 제2단말의 영상 발언권이 유지될 때 전송되는 제1단말의 사용자에 대한 영상 데이터의 크기는 제1단말의 영상 발언권이 유지될 때 전송되는 상기 제1단말의 사용자에 대한 영상 데이터의 크기 보다 작은 것이 바람직하다.In step S903, when the server 406 maintains the video speaking right of the second terminal that has obtained the video speaking right after the first terminal among the plurality of terminals, the first terminal and the second terminal respectively from the first terminal and the second terminal, respectively. Receive image data for the user. Here, the second terminal may be the third transmission terminal mentioned in FIG. The size of the image data for the user of the first terminal transmitted when the video speaking right of the second terminal is maintained is greater than the size of the image data for the user of the first terminal transmitted when the video speaking right of the first terminal is maintained. Small ones are preferable.

단계 S905에서 서버(406)는 단계 S903에서 제1단말로부터 수신된 영상 데이터를 복수의 단말 중에서 제1단말을 제외한 단말로 전송한다. 예를 들어 제1전송 단말(401)이 영상 발언권을 획득하여 서버(406)로 영상 데이터를 전송하는 경우, 서버(406)는 수신한 영상 데이터를 제2전송 단말(402), 제1 및 제2수신 단말(403, 404), 제어 단말(405), 제3전송 단말로 전송한다. In step S905, the server 406 transmits the image data received from the first terminal in step S903 to a terminal other than the first terminal among the plurality of terminals. For example, when the first transmission terminal 401 acquires the image speaking right and transmits the image data to the server 406, the server 406 transmits the received image data to the second transmission terminal 402, the first and the first. 2 is transmitted to the receiving terminals 403 and 404, the control terminal 405, and the third transmitting terminal.

단계 S907에서 서버(406)는 단계 S903에서 제2단말로부터 수신된 영상 데이터를 복수의 단말 중에서 제2단말을 제외한 단말로 전송한다. 예를 들어 제3전송 단말이 영상 발언권을 획득하여 서버(406)로 영상 데이터를 전송하는 경우, 서버(406)는 수신한 영상 데이터를 제1 및 제2전송 단말(401, 402), 제1 및 제2수신 단말(403, 404), 제어 단말(405)로 전송한다.In step S907, the server 406 transmits the video data received from the second terminal in step S903 to a terminal other than the second terminal among the plurality of terminals. For example, when the third transmission terminal acquires the image speaking right and transmits the image data to the server 406, the server 406 transmits the received image data to the first and second transmission terminals 401 and 402 and the first. And second receiving terminals 403 and 404 and control terminal 405.

한편, 전술한 바와 같은 본 발명에 따른 다자간 영상 통신 방법은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다.　또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체(정보저장매체)에 저장되고, 컴퓨터에 의하여 판독되고 실행됨으로써 본 발명의 방법을 구현한다. 그리고 상기 기록매체는 컴퓨터가 판독할 수 있는 모든 형태의 기록매체(CD, DVD와 같은 유형적 매체뿐만 아니라 반송파와 같은 무형적 매체)를 포함한다.On the other hand, the multi-party video communication method according to the present invention as described above can be created by a computer program. And the code and code segments constituting the program can be easily inferred by a computer programmer in the art. In addition, the written program is stored in a computer-readable recording medium (information storage medium), and read and executed by a computer to implement the method of the present invention. And the recording medium includes all types of recording media (intangible medium such as a carrier wave as well as tangible media such as CD and DVD) readable by a computer.

본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.Although the present invention has been described by means of limited embodiments and drawings, the present invention is not limited thereto and is intended to be equivalent to the technical idea and claims of the present invention by those skilled in the art to which the present invention pertains. Of course, various modifications and variations are possible.

도 1은 MCU(107)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면,1 is a diagram illustrating a multiparty video communication system using MCU 107;

도 2는 P2P(Peer To Peer) 방식을 이용하는 다자간 영상 통신 시스템을 나타내는 도면,2 is a diagram illustrating a multi-party video communication system using a peer to peer (P2P) scheme;

도 3은 서버(307)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면,3 is a diagram illustrating a multiparty video communication system using a server 307;

도 4는 본 발명의 일실시예에 따른 다자간 영상 통신 시스템을 나타내는 도면,4 is a diagram illustrating a multi-party video communication system according to an embodiment of the present invention;

도 5는 도 4의 제1 및 제2수신 단말(403, 404)가 영상 데이터를 디스플레이 장치(501)에 재생하는 화면을 나타내는 도면,FIG. 5 is a diagram illustrating a screen on which the first and second receiving terminals 403 and 404 of FIG. 4 reproduce the image data on the display apparatus 501.

도 6은 본 발명의 제1실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,6 is a flowchart illustrating a multi-party video communication method according to a first embodiment of the present invention;

도 7은 본 발명의 제2실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,7 is a flowchart illustrating a multi-party video communication method according to a second embodiment of the present invention;

도 8은 본 발명의 제3실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,8 is a flowchart illustrating a multi-party video communication method according to a third embodiment of the present invention;

도 9는 본 발명의 제4실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도이다.9 is a flowchart illustrating a multi-party video communication method according to a fourth embodiment of the present invention.

Claims (13)

영상 통신에 참여한 복수의 참여자 중에서, 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 서버로부터 수신하는 단계;Receiving, from a server, video data of a current speaker who has acquired a video speaking right, from among a plurality of participants participating in the video communication; 상기 복수의 참여자 중에서, 상기 현재 발언자 이전에 상기 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 상기 서버로부터 수신하는 단계; 및Receiving, from the server, image data of a previous speaker who has obtained the video speaking right before the current speaker; And 상기 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역에 재생하며, 상기 이전 발언자에 대한 영상 데이터를 상기 디스플레이 장치의, 상기 주영역보다 작은 부영역에 재생하는 단계Reproducing image data of the current speaker in a main area of a display device, and reproducing image data of the previous speaker in a sub area smaller than the main area of the display device; 를 포함하며,Including; 상기 서버는 상기 복수의 참여자 중에서 상기 현재 발언자 및 상기 이전 발언자로부터 영상 데이터를 수신하는 The server may receive image data from the current speaker and the previous speaker among the plurality of participants. 서버를 이용한 다자간 영상 통신 방법.Multi-way video communication method using a server. 제 1항에 있어서,The method of claim 1, 상기 이전 발언자에 대한 영상 데이터의 크기는 The size of the image data for the previous speaker is 상기 현재 발언자에 대한 영상 데이터의 크기보다 작은Smaller than the size of the image data for the current speaker 서버를 이용한 다자간 영상 통신 방법.Multi-way video communication method using a server. 제 1항 또는 제 2항에 있어서,The method according to claim 1 or 2, 식별자를 포함하며, 상기 현재 발언자 이후에 상기 영상 발언권을 획득한 다음 발언자에 대한 영상 데이터를 수신하는 단계;Receiving image data for the next speaker after acquiring the video speaking right after the current speaker; 상기 식별자를 인식하는 단계; 및Recognizing the identifier; And 상기 식별자를 인식한 경우, 상기 다음 발언자에 대한 영상 데이터를 상기 주영역에 재생하며, 상기 현재 발언자에 대한 영상 데이터를 상기 부영역에 재생하는 단계When recognizing the identifier, reproducing image data of the next speaker in the main area, and reproducing image data of the current speaker in the sub area. 를 더 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server further comprising. 제 1항 또는 제 2항에 있어서,The method according to claim 1 or 2, 상기 서버로부터 상기 이전 발언자, 상기 현재 발언자 및 상기 현재 발언자 이후에 상기 영상 발언권을 획득한 다음 발언자에 대한 음성 데이터를 수신하는 단계; 및Receiving audio data for the next speaker after acquiring the video speaking right after the previous speaker, the current speaker, and the current speaker from the server; And 상기 음성 데이터를 재생하는 단계Playing the voice data 를 더 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server further comprising. 제어 단말로부터 영상 발언권을 획득하는 단계;Obtaining an image speaking right from the control terminal; 상기 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 상기 현재 발언자에 대한 영상 발언권이 유지될 때 서버로 전송하는 단계; 및Transmitting image data of the current speaker who has obtained the video speaking right to a server when the video speaking right of the current speaker is maintained; And 상기 제어 단말의 제어에 따라, 상기 현재 발언자의 영상 발언권이 종료되고, 상기 현재 발언자 이후에 상기 영상 발언권을 획득한 다음 발언자의 영상 발언권이 유지될 때 상기 현재 발언자에 대한 영상 데이터를 상기 서버로 전송하는 단계According to the control of the control terminal, when the video speaking right of the current speaker is terminated, the video speaking right is obtained after the current speaker, and then the video data of the current speaker is transmitted to the server when the video speaking right of the speaker is maintained. Steps to 를 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server comprising a. 제 5항에 있어서,The method of claim 5, 상기 현재 발언자의 영상 발언권이 유지되기 전부터 카메라로부터 상기 현재 발언자에 대한 영상 데이터를 수신하는 단계Receiving image data of the current speaker from a camera before the current speaker's video speaking right is maintained 를 더 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server further comprising. 제 5항에 있어서,The method of claim 5, 상기 현재 발언자에 대한 영상 데이터는The video data for the current speaker is 상기 현재 발언자에 대한 아바타인Is the avatar for the current speaker 서버를 이용한 다자간 영상 통신 방법.Multi-way video communication method using a server. 제 5항 또는 제 6항에 있어서,The method according to claim 5 or 6, 상기 현재 발언자의 영상 발언권이 유지될 때 전송하는 영상 데이터에 식별자를 삽입하는 단계Inserting an identifier into image data transmitted when the current speaker's video speaking right is maintained; 를 더 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server further comprising. 제 5항 또는 제 6항에 있어서,The method according to claim 5 or 6, 상기 다음 발언자의 영상 발언권이 유지될 때 전송하는 영상 데이터의 크기는 The size of the image data transmitted when the next speaker's video speaking right is maintained 상기 현재 발언자의 영상 발언권이 유지될 때 전송하는 영상 데이터의 크기보다 작은Smaller than the size of video data to be transmitted when the current speaker's video speaking rights are maintained 서버를 이용한 다자간 영상 통신 방법.Multi-way video communication method using a server. 삭제delete 삭제delete 영상 통신에 참여한 복수의 단말 중에서 영상 발언권을 획득한 제1단말로부터, 상기 제1단말의 사용자에 대한 영상 데이터를 수신하는 단계; Receiving image data of a user of the first terminal from a first terminal obtaining a video speaking right among a plurality of terminals participating in the video communication; 상기 복수의 단말 중에서 상기 제1단말 이후에 상기 영상 발언권을 획득한 제2단말의 영상 발언권이 유지될 때, 상기 제1단말 및 상기 제2단말 각각으로부터 상기 제1단말 및 상기 제2단말 각각의 사용자에 대한 영상 데이터를 수신하는 단계; When the video speaking right of the second terminal which has obtained the video speaking right after the first terminal is maintained among the plurality of terminals, the first terminal and the second terminal of each of the first terminal and the second terminal are maintained. Receiving image data for the user; 상기 제1단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제1단말을 제외한 단말로 전송하는 단계; 및Transmitting image data received from the first terminal to a terminal other than the first terminal among the plurality of terminals; And 상기 제2단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제2단말을 제외한 단말로 전송하는 단계Transmitting image data received from the second terminal to a terminal other than the second terminal among the plurality of terminals; 를 포함하는 서버를 이용한 다자간 영상 통신 방법.Multi-party video communication method using a server comprising a. 제 12항에 있어서,The method of claim 12, 상기 제2단말의 영상 발언권이 유지될 때 전송되는 상기 제1단말의 사용자에 대한 영상 데이터의 크기는The size of the image data for the user of the first terminal transmitted when the video speaking right of the second terminal is maintained is 상기 제1단말의 영상 발언권이 유지될 때 전송되는 상기 제1단말의 사용자에 대한 영상 데이터의 크기 보다 작은Smaller than the size of the video data for the user of the first terminal transmitted when the video speaking right of the first terminal is maintained 서버를 이용한 다자간 영상 통신 방법.Multi-way video communication method using a server.
KR1020090046890A 2009-05-28 2009-05-28 Method for multipoint video communication KR100953509B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090046890A KR100953509B1 (en) 2009-05-28 2009-05-28 Method for multipoint video communication

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090046890A KR100953509B1 (en) 2009-05-28 2009-05-28 Method for multipoint video communication

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020100006220A Division KR20100129131A (en) 2010-01-22 2010-01-22 Method for multipoint video communication

Publications (1)

Publication Number Publication Date
KR100953509B1 true KR100953509B1 (en) 2010-04-20

Family

ID=42220075

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090046890A KR100953509B1 (en) 2009-05-28 2009-05-28 Method for multipoint video communication

Country Status (1)

Country Link
KR (1) KR100953509B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107980221A (en) * 2015-04-01 2018-05-01 猫头鹰实验室股份有限公司 Synthesize and scale the sub-scene of angular separation
US11729342B2 (en) 2020-08-04 2023-08-15 Owl Labs Inc. Designated view within a multi-view composited webcam signal
US11736801B2 (en) 2020-08-24 2023-08-22 Owl Labs Inc. Merging webcam signals from multiple cameras

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05103324A (en) * 1991-10-09 1993-04-23 Mitsubishi Electric Corp Multi-point video conference controlling device
JPH06296278A (en) * 1993-04-07 1994-10-21 Fujitsu Ltd Multi-spot controller, video conference terminal equipment, and multi-spot video conference system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05103324A (en) * 1991-10-09 1993-04-23 Mitsubishi Electric Corp Multi-point video conference controlling device
JPH06296278A (en) * 1993-04-07 1994-10-21 Fujitsu Ltd Multi-spot controller, video conference terminal equipment, and multi-spot video conference system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107980221A (en) * 2015-04-01 2018-05-01 猫头鹰实验室股份有限公司 Synthesize and scale the sub-scene of angular separation
CN107980221B (en) * 2015-04-01 2021-10-29 猫头鹰实验室股份有限公司 Compositing and scaling angularly separated sub-scenes
US11729342B2 (en) 2020-08-04 2023-08-15 Owl Labs Inc. Designated view within a multi-view composited webcam signal
US11736801B2 (en) 2020-08-24 2023-08-22 Owl Labs Inc. Merging webcam signals from multiple cameras

Similar Documents

Publication Publication Date Title
KR101265294B1 (en) System and method for real time-conversational teleeducation service based on video conferencing service
RU2533304C2 (en) Conference call management method and related device and system
JP6108247B2 (en) Media negotiation method, device, and system for multi-stream conferencing
KR101685466B1 (en) Method for extending participants of video conference service
EP2348671A1 (en) Conference terminal, conference server, conference system and method for data processing
US20120017149A1 (en) Video whisper sessions during online collaborative computing sessions
US20140118471A1 (en) Video Conferencing Method and Device Thereof
CN111478905B (en) Communication data acquisition method and device, electronic equipment and storage medium
CN105763832A (en) Video interaction and control method and device
CN113411538B (en) Video session processing method and device and electronic equipment
CN101094382A (en) Video terminal, user interface, and method for playing back accessorial stream
CN112286610A (en) Interactive processing method and device, electronic equipment and storage medium
WO2016019775A1 (en) Conference migration method, device and system
WO2015003532A1 (en) Multimedia conferencing establishment method, device and system
US20190089754A1 (en) System and method for providing audio conference between heterogenious networks
CN111246150A (en) Control method, system, server and readable storage medium for video conference
KR100953509B1 (en) Method for multipoint video communication
US9013537B2 (en) Method, device, and network systems for controlling multiple auxiliary streams
US20080220753A1 (en) Mobile communication device, communication system and communication method
JP2003223407A (en) Contents sharing support system, user terminal, contents sharing support server, method and program for sharing contents among users, and recording medium for the program
JP2008236553A (en) Terminal device in video conference system, control method of terminal device, and control program for terminal device
CN116320514A (en) Live broadcast method, system, electronic equipment and medium for audio and video conference
CN112689115A (en) Multi-party conference system and control method
JP2007135108A (en) Network conference support program and network conference support server
CN105592286A (en) Instant messaging interface information processing method and apparatus

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
A107 Divisional application of patent
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130222

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140324

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160328

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170322

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180118

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20200129

Year of fee payment: 11