KR100861286B1

KR100861286B1 - Alternative screen transmission method of portable terminal and portable terminal

Info

Publication number: KR100861286B1
Application number: KR1020070069425A
Authority: KR
Inventors: 김정호
Original assignee: (주)케이티에프테크놀로지스
Priority date: 2007-07-11
Filing date: 2007-07-11
Publication date: 2008-10-01

Abstract

휴대용 단말기 및 휴대용 단말기의 대체 화면 전송방법을 개시한다. 휴대용 단말기는 상기 휴대용 단말기 사용자의 이미지 및 상기 사용자가 위치한 배경을 촬영하는 제1 카메라와, 대체배경 이미지를 촬영하는 제2카메라와, 대체화면모드가 선택된 상태에서 상기 휴대용 단말기의 움직임이 감지된 경우 상기 휴대용 단말기의 움직임에 상응하는 대체배경 이미지와 상기 휴대용 단말기 사용자의 이미지를 합성하여 상대방 단말기로 전송하는 제어부를 포함한다. 화상 통화시 통화 상대방으로 하여금 배경 화면이 대체화면임을 쉽게 인지하지 못하도록 할 수 있다.Disclosed are a portable terminal and an alternative screen transmission method of a portable terminal. The portable terminal detects a movement of the portable terminal in a state in which a first camera photographing an image of the portable terminal user and a background where the user is located, a second camera photographing a substitute background image, and a replacement screen mode are selected. And a controller configured to synthesize an alternative background image corresponding to the movement of the portable terminal and the image of the portable terminal user and transmit the synthesized image to the counterpart terminal. During the video call, the call counterpart may not easily recognize that the background screen is a substitute screen.

Description

PORTABLE DEVICE AND METHOD OF TRANSMITTING SUBSTITUTION IMAGE THEREOF}

본 발명은 휴대용 단말기에 관한 것으로, 더욱 상세하게는 화상 통화시 대체 화면을 전송하는 휴대용 단말기 및 대체 화면 전송 방법에 관한 것이다.The present invention relates to a portable terminal, and more particularly, to a portable terminal for transmitting a replacement screen during a video call and a method for transmitting the replacement screen.

화상 전화 시스템은 전화로 음성 서비스와 영상 서비스를 동시에 지원하여 상대를 보면서 통화를 가능케 하는 시스템이다.The video telephone system supports a voice service and a video service at the same time by telephone, and enables a call while viewing the other party.

이러한 화상 전화 시스템은 전화선, ADSL(Asymmetric Digital Subscriber Line), 케이블 통신네트워크 및 IP 네트워크와 같은 유선 네트워크뿐만 아니라, 이동통신망과 같은 무선 네트워크를 통해서도 구축되어 있다. Such video telephone systems are established not only through wired networks such as telephone lines, Asymmetric Digital Subscriber Line (ADSL), cable communication networks and IP networks, but also through wireless networks such as mobile communication networks.

종래의 화상 전화 시스템을 통한 화상 통화 시 중요한 문제로 대두되는 것은 사생활 보호이다. 화상 전화는 음성뿐만 아니라, 통화시의 배경 화면을 전송하기 때문에 화상 통화를 하는 사용자의 사생활이 침해될 우려가 있다.Privacy is an important issue that arises in a video call through a conventional video telephone system. Since a video call transmits not only voice but also a background screen during a call, the privacy of a user who makes a video call may be violated.

종래의 화상 통화 방식에서는 상기와 같은 사생활 침해를 방지하기 위하여 사용자가 원하는 배경을 대체 화면으로서 휴대용 단말기에 미리 저장해 두고, 화상 통화시 상기 대체 화면을 배경 대신 삽입하여 상대방에게 자신의 영상과 함께 전송 하는 방식을 사용한다. In the conventional video call method, in order to prevent the invasion of privacy as described above, the user desired background is stored in advance on the portable terminal as a substitute screen, and the substitute screen is inserted in place of the background during a video call and transmitted to the other party with his video. Use the method.

그러나, 배경화면은 고정된 영상이기 때문에 통화 상대방에 의해서 배경화면이 대체된 화면임이 쉽게 인지될 수 있다.However, since the background screen is a fixed image, it can be easily recognized that the background screen is replaced by the call counterpart.

따라서, 화상 통화 상대방이 가족, 애인, 친구, 거래처 직원등과 같이 상호간에 신뢰를 바탕으로 하는 경우 상호간의 신뢰관계에 치명적인 손상을 초래할 수 있는 등 종래 화상 통화시 대체 화면 전송을 통한 사용자의 사생활 침해를 방지하는데에는 한계가 있다. Therefore, if a video call counterpart is based on mutual trust such as family, lover, friend, and employee, it may cause a serious damage to the mutual trust relationship. There is a limit to preventing this.

따라서 본 발명의 제1 목적은 화상 통화 상대방으로 하여금 배경화면이 대체화면임을 쉽게 인지하지 못하도록 하기 위한 휴대용 단말기를 제공함에 있다. Accordingly, a first object of the present invention is to provide a portable terminal for preventing a video call counterpart from easily recognizing that a background screen is a substitute screen.

또한, 본 발명의 제2 목적은 화상 통화 상대방으로 하여금 배경화면이 대체화면임을 쉽게 인지하지 못하도록 하기 위한 휴대용 단말기의 대체 화면 전송 방법을 제공함에 있다.In addition, a second object of the present invention is to provide an alternative screen transmission method of a portable terminal for the video call counterpart to easily recognize that the background screen is a replacement screen.

상술한 본 발명의 목적을 달성하기 위한 본 발명의 일측면에 따른 휴대용 단말기는 상기 휴대용 단말기 사용자의 이미지 및 상기 사용자가 위치한 배경을 촬영하는 제1 카메라와, 대체배경 이미지를 촬영하는 제2카메라와, 대체화면모드가 선택된 상태에서 상기 휴대용 단말기의 움직임이 감지된 경우 상기 휴대용 단말기의 움직임에 상응하는 대체배경 이미지와 상기 휴대용 단말기 사용자의 이미지를 합성하여 상대방 단말기로 전송하는 제어부를 포함한다. 상기 제어부는 상기 제2 카메라릍 통해 촬영되는 대체배경 이미지들간의 픽셀 데이터의 변화를 이용하여 상기 휴대용 단말기의 움직임 여부를 판단할 수 있다. 상기 휴대용 단말기의 움직임은 상기 제2 카메라를 통해 촬영되는 대체배경 이미지들간의 픽셀 데이터의 변화량에 상응하도록 설정된 휴대용 단말기의 회전각도 또는 휴대용 단말기의 이동거리가 될 수 있다. 상기 휴대용 단말기는 상기 휴대용 단말기의 움직임에 상응하는 대체배경 이미지를 저장하는 저장부를 더 포함할 수 있다. 상기 제어부는 상기 대체화면 모드가 선택된 상태에서 소정 시간동안 상기 휴대용 단말기의 움직임이 없으면, 소정 주기마다 상기 저장부에서 서로 다른 대체배경 이미지를 읽어들여 상기 일정주기마다 상기 제1 카메라를 통해 촬영된 상기 휴대용 단말기 사용자의 이미지를 합성하여 상기 상대방 단말기로 전송할 수 있다. A portable terminal according to an aspect of the present invention for achieving the above object of the present invention includes a first camera for taking an image of the user of the portable terminal and the background the user is located, a second camera for taking a replacement background image; And a control unit for synthesizing the alternative background image corresponding to the movement of the portable terminal and the image of the portable terminal user when the movement of the portable terminal is detected while the alternate screen mode is selected, and transmitting the synthesized image to the counterpart terminal. The controller may determine whether the portable terminal moves by using a change in pixel data between alternate background images captured by the second camera. The movement of the portable terminal may be a rotation angle of the portable terminal or a movement distance of the portable terminal set to correspond to the amount of change of pixel data between the alternative background images photographed by the second camera. The portable terminal may further include a storage unit which stores a substitute background image corresponding to the movement of the portable terminal. The controller reads different alternative background images from the storage unit at predetermined intervals and captures images of the first camera at predetermined intervals when there is no movement of the portable terminal for a predetermined time while the alternative screen mode is selected. An image of the portable terminal user may be synthesized and transmitted to the counterpart terminal.

상술한 본 발명의 제2 목적을 달성하기 위한 본 발명의 일측면에 따른 제1 카메라 및 제2 카메라를 포함하는 휴대용 단말기의 화상 통화시 대체 화면 전송방법은 상기 화상통화 요청에 따라 상기 제1 카메라를 통해 상기 휴대용 단말기 사용자의 이미지 및 상기 사용자가 위치한 배경을 촬영하는 단계와, 대체화면 모드가 선택된 상태에서 상기 휴대용 단말기의 움직임 여부를 검사하는 단계와, 상기 휴대용 단말기의 움직임이 감지된 경우 상기 휴대용 단말기의 움직임에 상응하는 대체배경 이미지와 상기 휴대용 단말기 사용자의 이미지를 합성하여 상대방 단말기로 전송하는 단계를 포함한다. 상기 휴대용 단말기의 움직임에 상응하는 대체배경 이미지는 상기 제2 카메라에 의해 촬영되어 미리 소정의 저장부에 저장될 수 있다. 상기 대체화면 모드가 선택된 상태에서 상기 휴대용 단말기의 움직임 여부를 검사하는 단계는 상기 제2 카메라릍 통해 촬영된 대체배경 이미지들간의 픽셀 데이터의 변화를 이용하여 상기 휴대용 단말기의 움직임 여부를 판단하는 단계를 포함할 수 있다. 상기 대체화면모드가 선택된 상태에서 소정시간동안 상기 휴대용 단말기의 움직임이 없는 경우에는 소정 주기마다 상기 저장부에서 서로 다른 대체배경 이미지를 읽어들여 상기 소정 주기마다 상기 제1 카메라를 통해 촬영된 상기 휴대용 단말기 사용자의 이미지와 합성하여 상기 상대방 단말기로 전송하는 단계를 더 포함할 수 있다.Alternative screen transmission method for a video call of a portable terminal including a first camera and a second camera according to an aspect of the present invention for achieving the second object of the present invention is the first camera in response to the video call request Photographing an image of the user of the portable terminal and a background where the user is located, checking whether the portable terminal moves in a state where an alternative screen mode is selected, and if the movement of the portable terminal is detected And synthesizing the alternative background image corresponding to the movement of the terminal and the image of the portable terminal user to the counterpart terminal. The substitute background image corresponding to the movement of the portable terminal may be photographed by the second camera and stored in a predetermined storage unit in advance. The checking of the movement of the portable terminal while the replacement screen mode is selected may include determining whether the portable terminal moves by using a change of pixel data between alternative background images photographed through the second camera. It may include. When there is no movement of the portable terminal for a predetermined time while the alternative screen mode is selected, the portable terminal reads different alternative background images from the storage unit every predetermined period and is photographed by the first camera at each predetermined period. The method may further include synthesizing the image of the user and transmitting the same to the counterpart terminal.

상술한 바와 같이 본 발명의 실시예들에 따른 휴대용 단말기 및 휴대용 단말기의 대체 화면 전송 방법에 따르면, 사용자의 전경을 촬영하는 제2 카메라를 통해 휴대용 단말기의 움직임이 감지되거나, 움직임 감지가 없는 경우 설정된 주기마다 휴대용 단말기 사용자가 위치한 배경 대신에 다른 대체배경 이미지와 상기 휴대용 단말기 사용자 이미지를 합성하여 상대방 단말기로 전송함으로써, 화상 통화 상대방으로 하여금 배경화면이 대체화면임을 쉽게 인지하지 못하도록 할 수 있다.As described above, according to the portable terminal and the alternative screen transmission method of the portable terminal according to the embodiments of the present invention, when the movement of the portable terminal is detected through the second camera photographing the foreground of the user or there is no motion detection, Instead of the background where the portable terminal user is located at every cycle, another alternative background image and the portable terminal user image are synthesized and transmitted to the counterpart terminal, thereby preventing the video call counterpart from easily recognizing that the background screen is the alternate screen.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.As the present invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description.

그러나, 이는 본 발명의 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 물을 포함하는 것으로 이해되어야 한다.However, this is not intended to be limited to the specific embodiments of the present invention, it should be understood to include all modifications, equivalents, and water included in the spirit and scope of the present invention.

이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호 를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, with reference to the accompanying drawings, it will be described in detail a preferred embodiment of the present invention. Hereinafter, the same reference numerals are used for the same components in the drawings, and redundant description of the same components is omitted.

그리고, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다. Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. The terms are only used to distinguish one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component. The term and / or includes a combination of a plurality of related items or any item of a plurality of related items.

도 1은 본 발명의 일실시예에 따른 휴대용 단말기의 구성을 나타낸 도면이다.1 is a view showing the configuration of a portable terminal according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명에 따른 휴대용 단말기는 제1 카메라(10), 제2 카메라(15), 키 입력부(20), 제어부(21), 코덱(26) 및 RF부(27)를 포함한다.As shown in FIG. 1, the portable terminal according to the present invention includes a first camera 10, a second camera 15, a key input unit 20, a control unit 21, a codec 26, and an RF unit 27. It includes.

제1 카메라(10)는 화상 통화 모드 수행요청에 따라 휴대용 단말기 사용자 및 상기 사용자가 위치한 배경을 촬상하여 제어부(21)에 제공한다. 제1 카메라(10)는 제1 렌즈부(11), 제1 CMOS 센서(12), 제1 ADC(13) 및 제1 DSP(14)를 포함할 수 있다. The first camera 10 photographs the portable terminal user and the background where the user is located according to the video call mode execution request, and provides the first camera 10 to the controller 21. The first camera 10 may include a first lens unit 11, a first CMOS sensor 12, a first ADC 13, and a first DSP 14.

상기와 같은 구성을 갖는 제1카메라(10)의 동작을 구체적으로 살펴보기로 한다. 제1 CMOS 센서(12)는 제1 렌즈부(11)를 통해 촬상된 피사체(휴대용 단말기 사용자 및 상기 사용자가 위치한 배경)를 전기적 신호의 화상 통화 이미지로 변환하며, 노출, 감마, 이득조정, 화이트 밸런스, 컬러 보정(color correction)등을 수행 한다.An operation of the first camera 10 having the above configuration will be described in detail. The first CMOS sensor 12 converts a subject (a portable terminal user and a background in which the user is located) captured by the first lens unit 11 into a video call image of an electrical signal, and includes exposure, gamma, gain adjustment, and white light. Perform balance, color correction, etc.

제1 ADC(Analog to Digital Converter)(13)는 제1 CMOS 센서(12)에서 이득 조절된 1 필드 분의 화상 통화 이미지를 디지털 신호로 변환하여 제1 DSP(Digital Signal Processor)(14)에 제공한다. The first analog-to-digital converter (ADC) 13 converts a video call image of one field, which is gain-adjusted by the first CMOS sensor 12, into a digital signal and provides it to the first digital signal processor (DSP) 14. do.

제1 DSP(14)는 디지털 신호로 변환된 1 필드분의 화상 통화 이미지를 디스플레이하기에 적합하도록 신호 처리한다.The first DSP 14 performs signal processing so as to be suitable for displaying one field video call image converted into a digital signal.

한편, 제2 카메라(15)는 제1 카메라(10)의 피사체 촬영방향과 일정한 각도(예를 들어, 180도)에 위치하여 사용자의 전경을 촬영한다. 제2 카메라(15)는 제1 카메라(10)의 피사체 촬영방향과 일정한 각도(예를 들어, 180도)에 위치한 대체 배경을 촬상하여 제어부(21)에 제공한다. 제2 카메라(15)는 제2 렌즈부(16), 제2 CMOS 센서(17), 제2 ADC(18) 및 제2 DSP(19)를 포함한다.Meanwhile, the second camera 15 is located at a predetermined angle (for example, 180 degrees) with the subject photographing direction of the first camera 10 to photograph the foreground of the user. The second camera 15 captures an alternative background positioned at a predetermined angle (for example, 180 degrees) with the subject photographing direction of the first camera 10, and provides the captured image to the controller 21. The second camera 15 includes a second lens unit 16, a second CMOS sensor 17, a second ADC 18, and a second DSP 19.

이러한 구성을 갖는 제2카메라(15)의 동작을 구체적으로 살펴보기로 한다. 제2 CMOS 센서(17)는 제2 렌즈부(16)를 통해 촬상된 피사체-제1 카메라(10)의 피사체 촬영방향과 일정한 각에 위치한 배경-를 전기적 신호의 대체 배경 이미지로 변환하며, 노출, 감마, 이득조정, 화이트 밸런스, 컬러 매트릭스 등을 수행한다.The operation of the second camera 15 having such a configuration will be described in detail. The second CMOS sensor 17 converts a subject photographed through the second lens unit 16-a background positioned at a predetermined angle with the subject photographing direction of the first camera 10-into an alternative background image of an electrical signal. Performs Gamma, Gain, White Balance, Color Matrix, etc.

이때, 제2 카메라(15)의 촬영방향과 제1 카메라(10)의 촬영방향은 180도의 각을 가질 수 있다. In this case, the photographing direction of the second camera 15 and the photographing direction of the first camera 10 may have an angle of 180 degrees.

제2 ADC(18)는 제2 CMOS 센서(17)에서 이득 조절된 1 필드 분의 대체배경 이미지를 디지털 신호의 대체 배경 이미지로 변환하여 제2 DSP(19)에 제공한다. 제2 DSP(19)는 디지털 신호로 변환된 1 필드 분의 대체 배경 이미지를 디스플레이하기 에 적합하도록 신호 처리한다.The second ADC 18 converts the gain-adjusted substitute background image of the second CMOS sensor 17 into a substitute background image of the digital signal and provides it to the second DSP 19. The second DSP 19 signal-processes to be suitable for displaying a substitute background image of one field converted into a digital signal.

키 입력부(20)는 대체 화면 모드 키 등을 구비하며, 사용자의 선택에 의해 상기 대체 화면 모드 키가 활성화됨에 따라 대체화면 모드신호를 발생하여 제어부(21)에 제공한다.The key input unit 20 includes a substitute screen mode key, and generates a substitute screen mode signal as the alternative screen mode key is activated by a user's selection to provide it to the controller 21.

제어부(21)는 대체배경 영상테이블(22), 움직임 감지부(23), 통화영상 배경제거부(24) 및 영상 합성부(25)를 포함할 수 있다. The controller 21 may include a substitute background image table 22, a motion detector 23, a call image background remover 24, and an image synthesizer 25.

대체배경 영상테이블(22)은 상기 대체화면 모드신호에 따라 대체화면 모드 수행시 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경 이미지를 대체할 복수의 대체배경 이미지를 포함한다. The substitute background image table 22 includes a plurality of substitute background images to replace the background image where the portable terminal user is located in the video call image when performing the substitute screen mode signal according to the substitute screen mode signal.

이때, 대체화면 모드에서는 제1 카메라(10)를 통해 촬영된 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경 이미지를 제거한 후에 상기 사용자의 화상 통화 이미지에 미리 설정된 대체 배경 이미지를 합성하여 상대방 단말기로 전송하거나, 제1 카메라(10)를 통해 촬영된 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경 이미지를 제거한 후에 제2 카메라(15)를 통해 촬영된 대체배경 이미지를 합성하여 상대방 단말기로 전송한다. In this case, in the alternative screen mode, after removing the background image where the portable terminal user is located from the video call image photographed by the first camera 10, the preset alternative background image is synthesized and transmitted to the counterpart terminal. After removing the background image where the portable terminal user is located from the video call image photographed by the first camera 10, the alternative background image photographed by the second camera 15 is synthesized and transmitted to the counterpart terminal.

상기 대체배경 영상테이블(22)에 포함된 복수의 대체배경 이미지는 각각 휴대용 단말기의 움직임 정보-예를 들어 이동거리 또는 회전각도-에 대응되도록 설정되어 있다.The plurality of substitute background images included in the substitute background image table 22 are set to correspond to the motion information of the portable terminal, for example, the moving distance or the rotation angle.

이에 대해서 자세히 살펴보기로 한다.Let's take a closer look at this.

도 2에 도시된 바와 같이, 대체배경 영상테이블(22)은 휴대용 단말기의 움직 임 정보에 상응되게 복수의 대체배경 이미지(2a 내지 2h)를 포함할 수 있다.As shown in FIG. 2, the substitute background image table 22 may include a plurality of substitute background images 2a to 2h corresponding to the movement information of the portable terminal.

예를 들어, 도 2에는 대체배경 이미지가 8개이므로 휴대용 단말기의 회전각도 45도마다 대체배경 이미지를 대응되도록 하여 대체배경 영상테이블을 설정할 수 있다.For example, since there are eight replacement background images in FIG. 2, the replacement background image table may be set by corresponding the replacement background image every 45 degrees of rotation angle of the portable terminal.

이러한 다수의 대체배경 이미지는 대체화면 모드가 수행되기 전에 제2 카메라(15)를 통하여 촬영된 후, 각각 설정된 움직임 정보에 대응되도록 설정될 수 있다. The plurality of alternative background images may be set to correspond to the set motion information after being photographed through the second camera 15 before the alternative screen mode is performed.

움직임 감지부(23)는 대체화면 모드 수행시 제2 카메라(15)를 통해 촬영되는 대체배경 이미지의 변화에 따라 휴대용 단말기의 움직임 정보-예를 들어 이동거리 또는 회전각도-를 파악하고, 대체배경 영상테이블(22)에서 상기 파악된 움직임 정보에 해당되는 대체배경 이미지를 영상 합성부(25)에 제공한다.The motion detector 23 detects the motion information of the portable terminal, for example, the moving distance or the rotation angle, according to the change of the replacement background image captured by the second camera 15 when performing the replacement screen mode, and replaces the background. In the image table 22, a substitute background image corresponding to the detected motion information is provided to the image synthesizer 25.

이때, 제2 카메라(15)를 통해 촬영되는 대체배경 이미지들간의 픽셀 데이터의 변화를 이용하여 휴대용 단말기의 움직임 정보를 파악할 수 있다. In this case, the motion information of the portable terminal may be grasped by using the change of the pixel data between the alternative background images captured by the second camera 15.

이에 따라, 대체화면 모드 수행시 제2 카메라(15)를 통해 촬영되는 대체배경 이미지의 변화에 따른 휴대용 단말기의 움직임 정보가 설정된 움직임 정보에 해당될 때마다 상대방 단말기에 전송되는 배경이 변경되는 것이다.Accordingly, the background transmitted to the counterpart terminal is changed whenever the motion information of the portable terminal according to the change of the replacement background image captured by the second camera 15 corresponds to the set motion information when the replacement screen mode is performed.

반면, 움직임 감지부(23)는 대체화면 모드 수행시 일정시간 동안 제2 카메라(15)를 통해 촬영되는 대체배경 이미지의 변화가 없는 경우, 설정된 주기마다 대체배경 영상테이블(22)에서 다른 대체배경 이미지를 영상 합성부(25)에 제공한다.On the other hand, if there is no change in the replacement background image photographed by the second camera 15 for a predetermined time when the motion detection unit 23 performs the replacement screen mode, the alternative background image table 22 replaces another replacement background in the replacement background image table 22. The image is provided to the image synthesizing unit 25.

이에 따라, 대체화면모드 수행시 일정시간동안 제2 카메라(15)를 통해 촬영 되는 대체배경 이미지의 변화가 없는 경우, 설정된 주기마다 상대방 단말기에 전송되는 배경이 변경되는 것이다. Accordingly, when there is no change of the replacement background image photographed by the second camera 15 for a predetermined time when the replacement screen mode is performed, the background transmitted to the counterpart terminal is changed every set period.

통화영상 배경 제거부(24)는 대체화면 모드 수행시 화상통화 이미지에서 사용자가 위치한 배경을 제거하고, 상기 사용자가 위치한 배경이 제거된 화상통화 이미지를 영상 합성부(25)에 제공한다. The call video background remover 24 removes the background where the user is located from the video call image when performing the alternative screen mode, and provides the video synthesizer 25 with the video call image from which the background where the user is located is removed.

영상 합성부(25)는 대체화면 모드 수행시 움직임 감지부(23)에서 제공된 대체배경 이미지와 통화영상 배경 제거부(24)에서 제공된 화상통화 이미지를 합성하여 코덱부(26)에 제공한다.The image synthesizer 25 synthesizes the substitute background image provided by the motion detector 23 and the video call image provided by the call image background remover 24 to provide the codec unit 26 when the substitute screen mode is performed.

한편, 제어부(21)는 화상통화 모드인 경우, 제1 카메라(10)를 통해 촬영된 화상통화 이미지를 코덱부(26)에 제공한다.In the video call mode, the controller 21 provides the video call image captured by the first camera 10 to the codec unit 26.

이때, 화상통화 모드는 제1카메라(10)를 통해 촬영된 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경이 제거되지 않고 상대방 단말기에 전송하는 것이다.At this time, in the video call mode, the background where the portable terminal user is located is transmitted to the counterpart terminal from the video call image captured by the first camera 10 without being removed.

코덱부(26)는 제어부(21)에서 제공된 화상통화 이미지를 JPEG(Joint Photographic Experts) 또는 MPEG(Moving Picture Experts Group)등과 같은 소정 포맷으로 압축하여 RF부(27)를 통해 외부의 무선 네트워크로 전송한다. The codec unit 26 compresses the video call image provided by the control unit 21 into a predetermined format such as Joint Photographic Experts (JPEG) or Moving Picture Experts Group (MPEG) and transmits the compressed image to an external wireless network through the RF unit 27. do.

도 3은 본 발명의 일실시예에 따른 휴대용 단말기의 대체 화면 전송방법에 대한 순서도를 나타낸다.3 is a flowchart illustrating an alternative screen transmission method of a portable terminal according to an embodiment of the present invention.

도 3에 도시된 바와 같이, 휴대용 단말기는 화상통화 모드 수행 요청에 따라 상기 휴대용 단말기의 사용자 및 상기 사용자가 위치한 배경을 촬상하여 전기적 신 호의 화상통화 이미지로 변환한다(S31).As shown in FIG. 3, the portable terminal photographs the user of the portable terminal and the background where the user is located according to the video call mode execution request (S31).

이때, 화상통화 모드에서는 상기 사용자 및 상기 사용자가 위치한 배경을 촬영한 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경이 제거되지 않고 상대방 단말기에 전송된다. At this time, in the video call mode, the background where the portable terminal user is located is transmitted to the counterpart terminal from the video call image photographing the background where the user and the user are located.

이후, 휴대용 단말기는 화상통화모드를 수행하는 도중에 대체화면 모드 수행요청이 있는가를 검사하고(S31), 대체화면 모드 수행요청이 없으면 상기 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경을 제거하지 않고 상대방 단말기로 전송한다(S35).Thereafter, the portable terminal checks whether there is a request for performing the alternative screen mode while performing the video call mode (S31). It transmits (S35).

이때, 대체화면 모드에서는 상기 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경 이미지를 제거한 후에 미리 설정된 대체배경 이미지를 합성하여 상대방 단말기로 전송하거나, 상기 화상통화 이미지에서 휴대용 단말기 사용자가 위치한 배경이미지를 제거한 후에 상기 화상통화 이미지가 촬영된 카메라와 다른 카메라를 통해 촬영된 대체배경 이미지를 합성하여 상대방 단말기로 전송한다. At this time, in the alternative screen mode, after removing the background image where the portable terminal user is located from the video call image, a preset alternative background image is synthesized and transmitted to the counterpart terminal, or after removing the background image where the portable terminal user is located from the video call image. The alternative background image photographed through the camera and the camera where the video call image is photographed is synthesized and transmitted to the counterpart terminal.

휴대용 단말기는 대체화면 모드 수행요청이 있으면, 일정시간 내에 상기 화상통화 이미지가 촬영된 카메라와 다른 카메라를 통해 촬영된 대체배경 이미지의 변화를 이용하여 휴대용 단말기의 움직임이 있는지를 검사한다(S32).When the portable terminal requests to perform the alternate screen mode, the portable terminal checks whether there is a movement of the portable terminal by using a change of the alternate background image photographed by a camera different from the camera where the video call image is captured within a predetermined time (S32).

예를 들어, 휴대용 단말기는 상기 화상통화 이미지가 촬영된 카메라와 다른 카메라를 통해 촬영된 대체배경 이미지들간의 픽셀 데이터의 변화를 이용하여 휴대용 단말기의 움직임 정보-예를 들어 이동거리 또는 회전각도-를 파악한다.For example, the portable terminal may use the change of pixel data between the camera on which the video call image is taken and the alternative background images captured by another camera to obtain movement information of the portable terminal, for example, a moving distance or a rotation angle. Figure out.

휴대용 단말기는 단말기 자신의 움직임이 감지되면, 대체배경 영상테이블에 서 휴대용 단말기의 움직임 정보-예를 들어 이동거리 또는 회전각도-에 해당되는 대체배경 이미지와, 상기 화상통화 이미지 중에서 휴대용 단말기 사용자의 이미지(휴대용 단말기 사용자가 위치한 배경이 제거됨)를 합성하여 상대방 단말기로 전송한다(S34).When the portable terminal detects its own movement, the portable terminal substitutes an alternative background image corresponding to the movement information of the portable terminal (for example, a moving distance or rotation angle) in the alternative background image table, and an image of the user of the portable terminal from the video call image. (Background where the portable terminal user is located is removed) is synthesized and transmitted to the counterpart terminal (S34).

본 발명의 다른 실시예에서는, 휴대용 단말기의 움직임 정보 중 이동거리 또는 회전각도가 매우 큰 값을 가지는 경우에는 전송되는 화면에서 사용자의 이미지를 제거하고 대체 영상만 전송할 수도 있다. 휴대용 단말기가 심하게 움직여서 사용자까지 움직임이 심해지는 경우는 상대방은 영상이 심하게 흔들려보이기 때문에 사용자가 보이던 안보이던 상황을 잘 인지하지 못할 것이므로 전송되는 화면에서 사용자의 이미지를 제거하고 대체 영상만 전송할 수 있다. In another embodiment of the present invention, when the moving distance or the rotation angle of the movement information of the portable terminal has a very large value, the user's image may be removed from the transmitted screen and only the replacement image may be transmitted. If the mobile terminal is severely moved and moves to the user, the other party may not recognize the situation invisible or invisible because the image is severely shaken, and thus the user may remove the user's image from the transmitted screen and transmit only the replacement image.

반면, 휴대용 단말기의 단말기 자신의 움직임이 감지되지 않으면, 설정된 주기마다 대체배경 영상테이블에서 다른 대체배경 이미지와, 상기 화상통화 이미지 중에서 휴대용 단말기 사용자의 이미지(휴대용 단말기 사용자가 위치한 배경이 제거됨)를 합성하여 상대방 단말기로 전송한다(S33). On the other hand, if the movement of the terminal itself of the portable terminal is not detected, the alternate background image is alternated from the alternate background image table at the set period and the image of the portable terminal user (the background where the portable terminal user is located) is removed from the video call image. In step S33, the terminal transmits the data to the counterpart terminal.

또는, 휴대용 단말기의 단말기 자신의 움직임이 감지되지 않는 경우 중에서 특히 사용자가 거의 움직이지 않을 경우에는 사용자의 얼굴 이미지과 사용자의 뒷 배경 이미지가 모두 정지화면이 되어 사용자의 얼굴 이미지과 사용자의 뒷 배경 이미지가 서로 분리되지 못하여 화상통화 이미지 중에서 휴대용 단말기 사용자의 이미지와 함께 뒷 배경 이미지까지도 함께 전송될 가능성이 있다. 즉, 제1 카메라(10)로 인식된 사용자의 뒷 배경 영상의 움직임이 대체 배경 이미지를 전송해야 하는 소정의 기준값 이하인 경우에 대비하여, 화상 통화 초기에 화면에 비춰지는 사용자의 움직임을 최소화한 체로 일정시간 사용자의 뒷 배경이 소정 크기만큼만 흔들리게끔 제1 카메라(10)를 움직여줘서 사용자의 얼굴 이미지과 사용자의 뒷 배경 이미지가 분리될 수 있도록함으로써 상기 화상통화 이미지 중에서 사용자가 위치한 뒷 배경 이미지를 제거한 후 상기 대체배경 영상테이블에서 다른 대체배경 이미지와 합성하여 전송할 수 있다. 이와 같이 구현함으로써 화상 통화 도중에 사용자의 움직임이 거의 없는 상태가 되더라도 뒷 배경은 계속 대체배경 이미지를 전송할 수 있게 된다. Alternatively, when the movement of the terminal of the portable terminal is not detected, in particular, when the user hardly moves, both the user's face image and the user's back background image become a still image and the user's face image and the user's back background image There is a possibility that the background image may be transmitted together with the image of the portable terminal user among the video call images because they cannot be separated. That is, in case the movement of the background image of the user recognized by the first camera 10 is less than or equal to a predetermined reference value to transmit the replacement background image, the user's movement displayed on the screen at the beginning of the video call is minimized. By removing the back background image where the user is located from the video call image by moving the first camera 10 so that the back background of the user shakes only a predetermined size for a predetermined time so that the face image of the user and the back background image of the user are separated. Thereafter, the image may be transmitted by being synthesized with other substitute background images in the substitute background image table. In this way, even when the user's movement is little during the video call, the back background can continue to transmit the replacement background image.

이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described with reference to the embodiments above, those skilled in the art will understand that the present invention can be variously modified and changed without departing from the spirit and scope of the invention as set forth in the claims below. Could be.

도 1은 본 발명의 일실시예에 따른 휴대용 단말기의 구성을 나타낸 블록도이다. 1 is a block diagram showing the configuration of a portable terminal according to an embodiment of the present invention.

도 2는 본 발명의 일실시예에 따른 휴대용 단말기에서 사용되는 대체배경 이미지를 나타낸다. 2 shows an alternative background image used in a portable terminal according to an embodiment of the present invention.

도 3은 본 발명의 일실시예에 따른 휴대용 단말기의 배경화면 전송방법을 나타낸 순서도이다.3 is a flowchart illustrating a background screen transmission method of a portable terminal according to an embodiment of the present invention.

Claims

In a portable terminal,

A first camera for capturing an image of the user of the portable terminal and a background where the user is located;

A second camera for taking a substitute background image; And

And a controller for synthesizing the alternative background image corresponding to the movement of the portable terminal and the image of the portable terminal user when the movement of the portable terminal is detected while the alternative screen mode is selected, and transmitting the synthesized image to the counterpart terminal. Handheld terminal.

The method of claim 1, wherein the control unit

And determining the movement of the portable terminal by using a change in pixel data between alternate background images captured by the second camera.

According to claim 1, wherein the movement of the portable terminal

And a rotation angle of the portable terminal or a moving distance of the portable terminal set to correspond to the amount of change of pixel data between the alternative background images photographed by the second camera.

The portable terminal of claim 1, further comprising a storage unit which stores a substitute background image corresponding to the movement of the portable terminal.

The method of claim 4, wherein the control unit

If there is no movement of the portable terminal for a predetermined time while the alternative screen mode is selected, the portable terminal user reads different alternative background images from the storage unit at predetermined intervals and is photographed by the first camera at predetermined intervals. The mobile terminal, characterized in that for synthesizing the image of the image to be transmitted to the counterpart terminal.

In the alternative screen transmission method for a video call of a portable terminal including a first camera and a second camera,

Photographing an image of the portable terminal user and a background in which the user is located through the first camera according to the video call request;

Checking whether the portable terminal is moved while the alternative screen mode is selected; And

As a result of checking whether the portable terminal is moved, when the movement of the portable terminal is detected, a substitute background image corresponding to the movement of the portable terminal and the image of the portable terminal user are synthesized and transmitted to the counterpart terminal, and the portable terminal is transmitted for a predetermined time. When the movement of the terminal is not detected, the alternate background image is read from the storage unit at predetermined intervals and the read alternate background image is compared with the image of the portable terminal user captured by the first camera at the predetermined interval. And transmitting the synthesized screen to the counterpart terminal.

The method of claim 6, wherein the substitute background image corresponding to the movement of the portable terminal is captured by the second camera and stored in a predetermined storage unit in advance.

The method of claim 7, wherein the checking of the movement of the portable terminal while the replacement screen mode is selected is performed.

And determining whether the portable terminal moves by using a change in pixel data between alternate background images photographed by the second camera.

The method of claim 7, wherein the movement of the portable terminal

And a rotation angle of the portable terminal or a moving distance of the portable terminal set to correspond to the amount of change of pixel data between the alternative background images captured by the second camera.

delete