KR100628756B1 - Video effect provide apparatus for mobile station at Video telephony and the Method of the Same - Google Patents
Video effect provide apparatus for mobile station at Video telephony and the Method of the Same Download PDFInfo
- Publication number
- KR100628756B1 KR100628756B1 KR1020040071331A KR20040071331A KR100628756B1 KR 100628756 B1 KR100628756 B1 KR 100628756B1 KR 1020040071331 A KR1020040071331 A KR 1020040071331A KR 20040071331 A KR20040071331 A KR 20040071331A KR 100628756 B1 KR100628756 B1 KR 100628756B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- image
- mobile terminal
- video call
- effect
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/50—Telephonic communication in combination with video communication
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
Abstract
본 발명은 이동단말기에 관한 것으로 특히 화상통화가 가능한 이동단말기로 상대방과 화상통화시에 이펙트영상을 사용자의 이미지에 부가시켜 전송하여 이용자에게 감정이나 재미있는 이펙트를 화상으로 전달할 수 있는 이동단말기로 화상 통화시의 이펙트 화면 제공 장치 및 방법에 관한 것이다.The present invention relates to a mobile terminal, and in particular, a mobile terminal capable of a video call, by adding an effect image to a user's image when transmitting a video call with a counterpart, and transmitting a video call to a mobile terminal capable of delivering an emotional or interesting effect to the user as a video. The present invention relates to an apparatus and a method for providing an effect screen.
본 발명은 화상통화를 제공하는 화상통화 서버와 이모티콘이나 배경화면의 영상효과를 컨텐츠를 제공하는 효과 서버와 사용자의 얼굴과 이모티콘이나 배경화면을 합성하여 이펙트가 부가된 영상을 만들어서 제공하는 화상 합성서버로 상대방과 화상통화를 실시할 수 있다. 본 발명은 화상통화가 가능한 이동단말기로 화상통화시에 여러 이펙트를 부여할 수 있어서 이동단말기의 활용도를 높일 수 있다. 또한 사용자의 영상에 이펙트를 부여하여 좀 더 생동감 있는 표현을 전달할 수 있다.The present invention provides a video call server for providing a video call, an effect server for providing a video effect of an emoticon or a background, and an image synthesis server for creating an image to which an effect is added by combining a user's face with an emoticon or a background. You can make a video call with the other party. According to the present invention, various effects can be applied during a video call to a mobile terminal capable of a video call, thereby increasing the utilization of the mobile terminal. In addition, by adding effects to the user's image can be delivered a more lively expression.
Description
도 1은 본 발명의 이동단말기로 화상 통화시의 이펙트 화면을 제공하기 위한 이동통신시스템의 개략적인 구성도를 나타낸 것이고, 1 is a schematic configuration diagram of a mobile communication system for providing an effect screen during a video call with a mobile terminal of the present invention;
도 2는 화상통화중에 상대방에게 이모티콘을 송출하기 위해 얼굴인신 방식을 적용하여 화상을 합성하는 동작 순서도이고, 2 is a flowchart illustrating an operation of synthesizing an image by applying a face-traffic method to send an emoticon to a counterpart during a video call.
도 3은 화상통화중에 상대방에게 이모티콘을 송출하기 위해 화상을 합성하는 동작 순서도이다. 3 is a flowchart illustrating an operation of compositing images to send an emoticon to a counterpart during a video call.
도 4는 화상통화중에 상대방에게 애니메이션으로 만들어진 배경화면을 상대방에게 송출하기 위해 화상을 합성하는 동작 순서도이고,4 is a flowchart illustrating an operation of synthesizing an image in order to send an animated background image to the counterpart during a video call.
도 5는 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 것이고, 5 illustrates an example of sending an emoticon to a counterpart during a video telephony.
도 6은 본 발명의 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 도면이다.6 is a diagram illustrating an example of sending an emoticon to a counterpart during a video telephony of the present invention.
<도면의 주요부호에 대한 설명><Description of Major Symbols in Drawing>
20, 30 : 이동단말기 50 : 화상통화서버20, 30: mobile terminal 50: video call server
60 : 효과서버 70 : 화상합성 서버60: effect server 70: image synthesis server
본 발명은 이동단말기에 관한 것으로 특히 화상통화가 가능한 이동단말기로 상대방과 화상통화시에 이펙트 영상을 사용자의 이미지에 부가시켜 전송하여 이용자에게 감정이나 재미있는 효과를 화상으로 전달할 수 있는 이동단말기로 화상 통화시의 이펙트 화면 제공 장치 및 방법에 관한 것이다.The present invention relates to a mobile terminal, and in particular, a mobile terminal capable of a video call, by adding an effect image to a user's image when transmitting a video call with a counterpart, and transmitting a video call to a mobile terminal capable of delivering an emotional or interesting effect to the user as a video. The present invention relates to an apparatus and a method for providing an effect screen.
일반적으로 이동단말기 서비스는 무선 통신 방식에 의하여 이동체에 설치하는 송수신 설비를 가진 자에 대하여 이동 전화 교환 설비를 이용하여 주로 음성을 송신하거나 수신하는 전기 통신 서비스이다. 현재에는 음성 위주의 2세대 이동통신서비스 단계를 지나 2.5세대를 넘어서 현재 3세대 이동단말기인 CDMA2000-1X 단말기를 대다수가 사용하고 있으며, 비동기식(W-CDMA) 3세대 서비스를 시작하였다.In general, a mobile terminal service is a telecommunication service mainly for transmitting or receiving a voice using a mobile telephone exchange facility to a person having a transmission and reception facility installed in a mobile by a wireless communication method. Currently, after the voice-driven second-generation mobile telecommunications service stage, beyond 2.5 generations, the majority of CDMA2000-1X terminals, which are now third-generation mobile terminals, are being used, and asynchronous (W-CDMA) third-generation services are started.
3세대 서비스 중에서 화상통화(Video telephony)의 기능은 3세대를 대표하는 서비스이지만 현재에는 서로 간의 영상을 주고 받는 것을 제외하고는 개선되어야 할 문제점이 있다. Among the 3G services, the function of video telephony is a 3G service, but there is a problem that needs to be improved except for exchanging images with each other.
현재 이동단말기에 제공되는 서비스는 멀티미디어 서비스, 문자메일 관련 서비스, 글로벌 로밍 서비스, 무선 인터넷 서비스, 무선뱅킹 서비스, 신용카드 무선 결제 서비스와 통화서비스로는 발신번호 서비스, 듀얼넘버, 회의 통화 등의 다양한 서비스를 제공하고 있다.Currently, mobile terminal services include multimedia services, text-mail related services, global roaming services, wireless Internet services, wireless banking services, credit card wireless payment services, and call services such as calling number service, dual number, and conference calls. Providing a service.
이동단말기로 상대방과의 화상통화를 하는 데에는 단순히 상대방의 화상데이터를 주고 받는 것 외에는 없으며, 사용자는 더 편리하고 다양한 서비스의 공급을 원한다.In order to make a video call with the other party using a mobile terminal, there is nothing other than simply sending and receiving the other party's image data, and the user wants to provide more convenient and various services.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 이동단말기로 상대방과 화상 통화시에 LCD 화면에 사용자가 지정하는 이모티콘이나 배경 화면 등의 영상이펙트를 화면에 다른 영상을 삽입하거나, 축소 확대하는 기술로 부가시킬 수 있도록 하여 사용자에게 화상통화의 재미를 부여할 수 있는 이동단말기로 화상통화시의 이펙트 이펙트 제공 장치 및 방법을 제공하는 것을 목적으로 한다.The present invention is to solve the above-mentioned problems, the mobile terminal is a technology for inserting or reducing other images on the screen, such as video effects such as emoticons or background screens specified by the user on the LCD screen when a video call with the other party It is an object of the present invention to provide an apparatus and method for providing an effect effect during a video call to a mobile terminal which can be added to give a user a fun video call.
본 발명은 화상통화를 제공하는 화상통화 서버와 이모티콘이나 배경화면의 영상효과를 컨텐츠를 제공하는 효과 서버와 사용자의 얼굴과 이모티콘이나 배경화면을 합성하여 이펙트가 부가된 영상을 만들어서 제공하는 화상 합성서버로 상대방과 화상통화를 실시할 수 있는 이동단말기로 화상통화시의 이펙트 화면 제공 장치 및 방법을 제공하는 것을 목적으로 한다.
According to the present invention, a video call server providing a video call, an effect server providing a video effect of an emoticon or a background, and a video synthesis server providing a video to which an effect is added by synthesizing the user's face with an emoticon or a background It is an object of the present invention to provide an apparatus and method for providing an effect screen during a video call to a mobile terminal capable of making a video call with a counterpart.
상술한 목적을 달성하기 위한 본 발명의 이동단말기로 화상 통화시의 이펙트 화면 제공 방법은, 사용자가 화상통화가 가능한 이동단말기로 상대방과 화상통화를 하는 1 단계와, 이동단말기의 메뉴에서 사용자가 화상 이펙트 메뉴를 선택하는 2 단계와, 제 2단계의 화상이펙트 메뉴에 의해 사용자의 화상이 합성되어 화상데이터를 생성하는 3 단계와, 제 3단계에 의해 생성된 화상데이터를 전송하여 상대방의 이동단말기로 전송하여 상대방의 이동단말기에 디스플레이시켜 화상통화를 하는 4 단계를 포함하는 것을 특징으로 한다.In order to achieve the above object, there is provided a method of providing an effect screen during a video call with a mobile terminal of the present invention, in which a user makes a video call with a counterpart using a mobile terminal capable of a video call; Step 2 of selecting the effect menu; and step 3 of generating the image data by synthesizing the user's images by the image effect menu of the second step; and transmitting the image data generated by the third step to the other party's mobile terminal. And transmitting and displaying the same on a counterpart's mobile terminal to make a video call.
또한, 본 발명의 2단계의 화상이펙트는, 사용자의 감정이나 사용자의 현재의 상태를 나타내는 이모티콘과, 애니메이션으로 만드어진 배경화면을 포함한다.In addition, the image effect of the second stage of the present invention includes an emoticon indicating the user's emotion or the current state of the user, and a background screen made of animation.
또한, 본 발명의 3단계는, 이동단말기에서 송신되는 사용자의 화면에서 얼굴 부분만을 추출하여 다양한 얼굴 형상 모습을 영상에디터로 생성하여 상기 화상데이터를 제작하여 저장하는 서브 1단계와, 서브 1단계에서의 기저장된 사용자의 여러 모습을 합성하여 상기 화상데이터를 제작하여 저장 하는 서브 2단계와, 서브 2단계에서의 사용자의 화상에 이미티콘이나 배경화면을 합쳐서 다양한 이펙트를 만들어 내는 상기 화상데이터를 제작하여 저장하는 서브 3단계를 포함한다.In addition, in the third step of the present invention, in the sub-step 1 and sub-step 1 to extract the face portion only from the screen of the user transmitted from the mobile terminal to generate a variety of facial shapes as an image editor to produce and store the image data; A sub-step of synthesizing various images of the pre-stored user to create and store the image data; and producing the image data to create various effects by combining the image of the user in the sub-step with an emoticon or a background screen; Sub three levels of storage.
본 발명의 이동단말기로 화상 통화시의 효과 화면 제공 장치는, 화상통화를 할 수 있도록 사용자의 화상과 상대방의 화상을 이동단말기로 제공하는 화상통화 서버와, 화상통화 중에 사용자의 화상에 이모티콘과 배경화면 등의 다양한 영상효과를 부가시킬 수 있도록 컨텐츠를 제공하는 효과 서버와, 화상통화 서버에서 이동단말기로부터 사용자의 화면을 수신하고 사용자가 선택한 이모티콘이나 배경화면을 상기 사용자의 화면과 합성 저장하고 상대방의 이동단말기로 송출하도록 하는 화상 합성 서버를 포함한다.An apparatus for providing an effect screen during a video call with a mobile terminal of the present invention includes a video call server that provides a user's image and a counterpart's image to a mobile terminal so as to make a video call, and an emoticon and a background for the user's image during a video call. An effect server that provides contents to add various visual effects such as a screen, and a video call server receives a user's screen from a mobile terminal, and stores the emoticon or wallpaper selected by the user in combination with the user's screen. And an image synthesizing server for transmitting to a mobile terminal.
이하, 본 발명의 실시예를 첨부한 도면을 참조하여 상세히 살명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 이동단말기로 화상 통화시의 이펙트 화면을 제공하기 위한 이동통신시스템의 개략적인 구성도를 나타낸 것이고, 도 2는 화상통화중에 상대방에게 이모티콘을 송출하기 위해 얼굴인신 방식을 적용하여 화상을 합성하는 동작 순서도이고, 도 3은 화상통화중에 상대방에게 이모티콘을 송출하기 위해 화상을 합성하는 동작 순서도이다. 또한, 도 4는 화상통화중에 상대방에게 애니메이션으로 만들어진 배경화면을 상대방에게 송출하기 위해 화상을 합성하는 동작 순서도이고,도 5는 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 것이고, 도 6은 본 발명의 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 도면이다.1 is a schematic configuration diagram of a mobile communication system for providing an effect screen during a video call with a mobile terminal of the present invention, and FIG. 2 is a face-traffic method for transmitting an emoticon to a counterpart during a video call. 3 is an operation flowchart for synthesizing images, and FIG. 3 is an operation flowchart for synthesizing images for sending an emoticon to a counterpart during a video call. In addition, FIG. 4 is a flowchart illustrating an operation of synthesizing an image in order to send an animated background image to the counterpart during a video call, and FIG. 5 illustrates an example of sending an emoticon to the counterpart during a video telephony. Is a diagram showing an example of sending an emoticon to a counterpart during a video telephony of the present invention.
본 발명의 도 1은 이동단말기로 화상 통화시의 이펙트 화면을 제공하기 위한 구성도를 나타낸 것이다.Figure 1 of the present invention shows a block diagram for providing an effect screen during the video call to the mobile terminal.
화상통화가 가능한 이동단말기(20, 30)와 네트워크(25)와 화상통화 서비스를 제공하는 화상통화 서버(50)와, 화면으로 보여지는 영상에 이모티콘과 배경화면 등의 다양한 컨텐츠를 저장하여 제공하는 효과 서버(60)와, 사용자의 화상데이터와 선택한 이모티콘이나 배경화면을 합성하여 상대방의 이동단말기(25)로 송출하도록 하는 화상합성 서버(70)로 이루어진다.A
효과서버(60)는 웃기는 모습, 웃는 모습, 비오는 모습, 해가 뜨는 모습, 일하는 모습 등의 다양한 이모티콘 컨텐츠를 제작하여 제공하고, 또한 다양한 배경화 면 컨텐츠를 제작하여 제공한다.The
화상 통화 서버(50)는 사용자와 상대방의 이동단말기에서 영상데이터를 수신하고 전송하여 화상통화를 할 수 있도록 하고, 화상합성 서버(70)는 사용자의 모습에 효과서버(60)에서 제공되는 이모티콘이나 배경화면을 합성시켜 화상 통화시에 영상이펙트를 부여한다.The
화상합성 서버(70)에서 사용자의 얼굴과 이모티콘과 배경화면 등의 컨텐츠를 합성하는 데에는 여러가지 방법을 사용한다.The
먼저, 얼굴인식 알고리즘을 적용하여 사용자의 실제 얼굴과 같은 합성화면을 만드는 것은, 사용자의 이동단말기로부터 수신된 사용자의 얼굴이 포함된 영상에서 사용자의 얼굴 부분만을 추출한다.First, to create a composite screen such as a real face of a user by applying a face recognition algorithm, only the face part of the user is extracted from an image including the user's face received from the user's mobile terminal.
추출된 얼굴 영상에서 얼굴의 특징을 나타내는 사용자의 눈, 코, 입, 이마, 눈썹의 크기와 위치에 관한 정보를 뽑아낸다.From the extracted face image, information about the size and location of the user's eyes, nose, mouth, forehead, and eyebrows, which are representative of facial features, is extracted.
추출된 얼굴 영상에서 웃는 모습을 생성하기 위해, 얼굴의 특징 정보를 이용하여 해당 위치에 있는 얼굴부분을 영상에디터를 사용하여 입 꼬리를 위로 올리는 영상을 제작하고, 우는 모습을 생성하기 위해 눈물을 영상에 중첩시키고, 화난모습을 생성하기 위해 눈 꼬리를 위로 올려서 이펙트가 부여된 새로운 영상을 제작하여 화상합성 서버(70)에 저장하여 제공한다. 얼굴인식 알고리즘을 적용하여 합성하는 것은 실제 얼굴에 여러 감정을 이미지로 만들어서 마치 진짜 사용자의 얼굴이 웃는 듯한 모습, 화난 모습으로 합성하는 것이다.In order to create a smiling face from the extracted face image, the face part at the corresponding position is created by using the image feature of the face using the image editor to create a video of raising the tail of the mouth up, and tears are generated to create a crying face. In order to create an angry look, the eye tail is lifted up to produce a new image to which the effect is applied and stored in the
한편, 사용자의 얼굴과 이모티콘이나 배경화면을 합성하는 다른 방식으로는 사용자의 이동단말기(20)로부터 수신한 화상 데이터에 영상에디터를 사용하여 이모티콘과 배경화면을 덮어서 합성하여 화상합성 서버(70)에 저장하여 제공한다.On the other hand, as another method of synthesizing the user's face and the emoticon or the wallpaper, the image data received from the user's
또한, 동영상 배경인 경우에는 애니메이션 GIF로 만들어진 배경화면이 마치 스티커 사진을 촬영하기 위한 영상처럼 위에서 움직이고 그 뒤에 사용자의 얼굴을 합성하여 화상합성 서버(70)에 저장하여 제공한다.In addition, in the case of a moving picture background, a background picture made of animated GIF moves from above like an image for taking a sticker picture, and then synthesizes the user's face and stores it in the
사용자가 화상통화가 가능한 이동단말기(20)로 사용자가 상대방과 화상통화를 선택하여 통화신호를 송신하면, 통화신호는 네트워크(25)와 화상통화 서버(50)를 거쳐서 상대방의 이동단말기(30)와 연결된다.When a user selects a video call with a counterpart and transmits a call signal to the
통화가 이루어지면 사용자의 이동단말기(20)의 카메라에서 사용자의 모습을 촬영하여 전송하거나, 미리 저장시킨 사용자의 모습을 화상통화 서버(50)를 경유하여 상대방의 이동단말기(30)로 송출하고, 상대방의 모습도 화상통화 서버(50)를 경유하여 사용자의 이동단말기(20)로 전송되어 LCD 화면으로 상대방을 보면서 화상통화를 한다.When a call is made, the user's camera is photographed and transmitted from the camera of the user's
이 때 사용자가 디스플레이되는 영상화면에 이펙트를 부여하기 위하여 제공되는 메뉴에서 다양한 이모티콘이나 배경화면에서 선택을 하면, 사용자의 이동단말기로부터 수신되는 화상데이터와 효과 서버(60)에서 제공하는 이모티콘이나 배경화면 등의 이펙트 데이터를 합성하여 상대방의 이동단말기(30)로 전송하여 효도를 부여하는 것이다.At this time, if the user selects from the various emoticons or wallpaper from the menu provided to give the effect to the displayed video screen, the image data received from the user's mobile terminal and the emoticon or wallpaper provided by the
도 2는 화상통화중에 상대방에게 이모티콘을 송출하기 위해 얼굴인식 방식을 적용하여 화상을 합성하는 동작 순서도이다.2 is a flowchart illustrating an operation of synthesizing an image by applying a face recognition method to send an emoticon to a counterpart during a video call.
사용자가 상대방과 화상통화 중에 제공되는 메뉴에서 이모티콘 보내기를 선택을 하면, 사용자의 이동단말기로부터 사용자의 얼굴사진을 화상통화 서버(50)에서 수신을 하고, 효과서버(60)에서 사용자가 선택한 이모티콘 컨텐츠를 수신한 후에 화상합성 서버(70)로 전송을 한다(S 80).When the user selects to send an emoticon from a menu provided during a video call with the other party, the user's mobile terminal receives a picture of the user's face from the
화상합성 서버(70)는 사용자의 얼굴이 포함된 사진에 얼굴인식 알고리즘을 적용하여, 사용자의 얼굴의 바운더리(boundary) 부분만을 추출한다. 추출된 얼굴 영상에서 사용자의 눈, 코, 입의 크기와 위치에 관한 정보를 뽑아낸다(S 82).The
추출된 얼굴 영상에서 웃는 모습을 생성하기 위해, 영상에디터를 사용하여 입 꼬리를 위로 올리는 영상을 제작하고, 우는 모습을 생성하기 위해 눈물을 영상에 중첩시키고, 화난모습을 생성하기 위해 눈 꼬리를 위로 올려서 이펙트가 부여된 새로운 영상을 제작하여 화상합성 서버(70)에 저장하고, 상대방의 이동단말기(30)로 이펙트가 부여된 화상데이터를 네트워크(25)를 경유하여 송출하면, 상대방의 이동단말기(30) 화면으로 이펙트가 부여된 사용자의 다른 모습을 보면서 통화를 한다(S 84~S86). 이와 같은 방식으로 만들어진 화상데이터의 실제 사람의 얼굴과 거의 유사하다. To create a smile from the extracted face image, create a video of raising the tail of the mouth up using the image editor, superimposing tears on the image to create a crying appearance, and using the eye tail up to create an angry appearance. Create a new image to which the effect is assigned, store it in the
도 3은 화상통화중에 상대방에게 이모티콘을 송출하기 위해 화상을 합성하는 동작 순서도이다.3 is a flowchart illustrating an operation of compositing images to send an emoticon to a counterpart during a video call.
사용자가 상대방과 화상통화 중에 제공되는 메뉴에서 이모티콘 보내기를 선택을 하면, 사용자의 이동단말기로부터 사용자의 얼굴사진을 화상통화 서버(50)에서 수신을 하고, 효과서버(60)에서 사용자가 선택한 이모티콘 컨텐츠를 수신한 후 에 화상합성 서버(70)로 전송을 한다(S90).When the user selects to send an emoticon from a menu provided during a video call with the other party, the user's mobile terminal receives a picture of the user's face from the
사용자가 우는 얼굴 모습의 이모티콘을 선택한 경우 화상합성 서버(70)는 사용자의 얼굴이 포함된 사진과 종래에 미리 수신하여 저장해둔 사용자의 얼굴사진을 영상에디터를 사용하여 합성을 한다(S92).When the user selects the emoticon with a crying face, the
합성된 영상데이터는 화상합성 서버(70)에 저장되고, 상대방의 이동단말기(30)로 영상효과가 부여된 화상데이터를 네트워크(25)를 경유하여 송출하면, 상대방의 이동단말기(30) 화면으로 이펙트가 부여된 사용자의 다른 모습을 보면서 통화를 하여 이용자들에게 새로운 감정을 전달할 수 있어서 재미를 유발시킬 수 있는 서비스이다(S94).The synthesized image data is stored in the
한편, 도 4는 화상통화중에 상대방에게 애니메이션으로 만들어진 배경화면을 상대방에게 송출하기 위해 화상을 합성하는 동작 순서도이다.Meanwhile, FIG. 4 is a flowchart illustrating an operation of synthesizing images in order to send an animated background screen to the counterpart during a video call.
사용자가 상대방과 화상통화 중에 제공되는 메뉴에서 배경화면 보내기를 선택을 하면, 사용자의 이동단말기로부터 사용자의 얼굴사진을 화상통화 서버(50)에서 수신을 하고, 효과서버(60)에서 사용자가 선택한 배경화면 컨텐츠를 수신한 후에 화상합성 서버(70)로 전송을 한다(S100).When the user selects to send the wallpaper from the menu provided during the video call with the other party, the user's mobile terminal receives the user's face photo from the
동영상 배경화면인 경우에는 애니메이션 GIF로 만들어진 배경화면이 마치 스티커 사진을 촬영하기 위한 영상처럼 위에서 움직이고 그 뒤에 사용자의 얼굴을 합성하여 화상합성 서버(70)에 저장하고, 화상합성 서버(70)에서 상대방의 이동단말기(30)로 영상효과가 부여된 화상데이터를 네트워크(25)를 경유하여 송출하면, 상대방의 이동단말기(30) 화면으로 애니메이션 배경화면 이펙트가 부여된 사용자의 다른 모습을 보면서 통화를 하여 이용자들에게 새로운 감정을 전달할 수 있어서 재미를 제공할 수 있는 서비스이다(S102, S104).In the case of a video wallpaper, a wallpaper made of an animated GIF moves from above like a picture for taking a sticker picture, and then synthesizes the user's face and stores it in the
한편, 도 5는 본 발명의 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 도면이다.FIG. 5 is a diagram illustrating an example of sending an emoticon to a counterpart during a video telephony of the present invention.
사용자가 화상통화가 가능한 이동단말기(20)로 상대방과 통화시에 사용자가 제공되는 메뉴에서 상대방에게 이모티콘 보내기 서비스를 선택을 한다(S120~S122).When the user makes a video call with the
사용자가 제공되는 이모티콘에서 우는 모습을 선택을 하면, 화상통화서버(50)에서 사용자의 화상데이터를 화상합성 서버(70)로 송신하고, 효과 서버(60)에서 우는 모습의 이모티콘 데이터를 화상합성 서버(70)로 송신하여 하나의 화상데이터로 합성한 후에 상대방의 이동단말기(30)로 송출하여 LCD 화면에는 사용자의 얼굴과 우는 모습의 이펙트 영상이 상대방의 이동단말기에 디스플레이 된다(S124~S126).When the user selects a crying appearance from the provided emoticon, the
한편, 도 6은 본 발명의 화상통화(Video telephony) 중에 상대방에게 이모티콘 보내는 예를 나타낸 도면이다.6 is a diagram illustrating an example of sending an emoticon to the other party during a video telephony of the present invention.
사용자가 화상통화가 가능한 이동단말기(20)로 상대방과 통화시에 사용자가 제공되는 메뉴에서 상대방에게 이모티콘 보내기 서비스를 선택을 한다(S130~S132).When the user makes a video call with the
사용자가 제공되는 서비스에서 우산을 들은 이모티콘을 선택하면, 화상통화서버(50)에서 사용자의 화상데이터를 화상합성 서버(70)로 송신하고, 효과 서버(60)에서 비오는 모습의 이모티콘 데이터를 화상합성 서버(70)로 송신하여 하나의 화상데이터로 합성한 후에 상대방의 이동단말기(30)로 송출하여 상대방의 이동단말 기(30)의 LCD 화면에는 사용자의 얼굴 영상 위에 비오는 모습의 이모티콘이 합쳐져서 상대방의 이동단말기(30)에 디스플레이 된다(S130~S132).When the user selects an emoticon with an umbrella in the provided service, the
이모티콘은 이동통신 서비스 제공자가 다양한 이모티콘 컨텐츠를 제작하여 다양하게 공급될 수 있다.Emoticons can be supplied in various ways by the mobile communication service provider to produce a variety of emoticon content.
한편, 사용자가 화상통화가 가능한 이동단말기(20)로 상대방과 화상통화시에 사용자가 제공되는 메뉴에서 상대방에게 배경화면 보내기 서비스를 선택을 한다.Meanwhile, the user selects a service for sending a background screen to the counterpart from a menu provided by the user during the video call with the
사용자는 제공되는 배경화면 서비스에서 하나의 서비스를 선택을 한다. 사용자가 해 모양의 배경화면 서비스를 선택하는 경우, 화상 통화서버(50)에서 사용자의 화상데이터를 화상합성 서버(70)로 송신하고, 효과 서버(60)에서 해가 뜨는 모습의 이모티콘 데이터를 화상합성 서버(70)로 송신하여 하나의 화상데이터로 합성한 후에 네트워크(25)를 경유하여 상대방의 이동단말기(30)로 송출하여 상대방의 이동단말기(30)의 LCD 화면에는 사용자의 화상에 해가 뜨는 모습의 이모티콘 이펙트 영상이 합쳐져서 디스플레이 된다.The user selects one service from the provided background service. When the user selects the sun background service, the
또한, 사용자가 제공되는 배경화면 서비스에서 무지개 배경화면을 선택하는 경우, 사용자의 화상위에 무지개가 뜨는 화면이 오버랩되어서 상대방의 이동단말기에서 보여준다.In addition, when a user selects a rainbow wallpaper from a background service provided by the user, a screen in which a rainbow floats on the user's image is overlapped and displayed on the other party's mobile terminal.
비오는 모습, 눈오는 모습, 무지개, 밤하늘 등의 다양한 배경 화면을 애니메이션 GIF(Graphics Interchange Format) 파일 등으로 생성하고, 배경 화면이 사용자의 화상 뒤에서 작동되도록 하여 배경화면과 사용자의 얼굴이 합쳐진 데이터를 상대방에게 송출한다. 이모티콘과 마찬가지로 배경화면 서비스도 다양한 이펙트를 낼 수 있는 배경화면 컨텐츠를 제작하여 제공될 수 있다.Create various animated screens such as rainy, snowy, rainbow, and night sky as animated GIF (Graphics Interchange Format) files, and make the wallpaper work behind the user's image so that the combined data of the background and the user's face is sent to the other party. Send it out. Like emoticons, the background service can be provided by creating a background content that can produce various effects.
본 발명은 자신의 영상화면에 이모티콘의 이펙트를 혼합하여 상대방에게 영상데이터를 보내기도 하고, 여러 가지 배경에 자신의 영상과 혼합해서 보냄으로써 사용자에게 재미 요소를 증가시켜 주어 이동단말기의 서비스로 활용할 수가 있다.The present invention mixes the effect of the emoticon on his video screen to send the video data to the other party, by increasing the fun factor to the user by sending mixed with his video on various backgrounds can be utilized as a service of the mobile terminal have.
또한 본 발명은 사용자의 얼굴모양을 추출하는 영상 인식을 통해서 평소에 보여 줄 수 없었던 표정을 제작한 화상데이터를 송출하므로, 사용자의 새로운 이미지를 상대방에게 전달할 수 있다.In addition, the present invention transmits the image data that produced the expression that could not be shown in the usual way through the image recognition to extract the user's face shape, it is possible to deliver a new image of the user to the other party.
본 발명은 화상통화가 가능한 이동단말기로 화상통화시에 여러 이펙트를 부여할 수 있어서 이동단말기의 활용도를 높일 수 있다. 또한 사용자의 영상에 이펙트를 부여하여 좀 더 생동감 있는 표현을 전달할 수 있다.According to the present invention, various effects can be applied during a video call to a mobile terminal capable of a video call, thereby increasing the utilization of the mobile terminal. In addition, by adding effects to the user's image can be delivered a more lively expression.
Claims (4)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020040071331A KR100628756B1 (en) | 2004-09-07 | 2004-09-07 | Video effect provide apparatus for mobile station at Video telephony and the Method of the Same |
CNA2005100538956A CN1747546A (en) | 2004-09-07 | 2005-03-14 | Device and method for providing video effect as communication between mobile communication terminals |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020040071331A KR100628756B1 (en) | 2004-09-07 | 2004-09-07 | Video effect provide apparatus for mobile station at Video telephony and the Method of the Same |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20060022494A KR20060022494A (en) | 2006-03-10 |
KR100628756B1 true KR100628756B1 (en) | 2006-09-29 |
Family
ID=36166846
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020040071331A KR100628756B1 (en) | 2004-09-07 | 2004-09-07 | Video effect provide apparatus for mobile station at Video telephony and the Method of the Same |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR100628756B1 (en) |
CN (1) | CN1747546A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101189043B1 (en) | 2011-04-27 | 2012-10-08 | 강준규 | Service and method for video call, server and terminal thereof |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100775190B1 (en) * | 2006-05-24 | 2007-11-12 | 엘지전자 주식회사 | Method for multimedia synthesis and terminal using the same |
KR100816442B1 (en) * | 2006-08-17 | 2008-03-27 | 에스케이 텔레콤주식회사 | Method and System for Providing Video Effect Service to Video Phone Communication |
KR100864906B1 (en) * | 2007-02-05 | 2008-10-22 | 에스케이 텔레콤주식회사 | System and Method for Providing Ending Effect Service of Video Call, and Mobile Communication Terminal for the Same |
KR100798447B1 (en) * | 2007-03-15 | 2008-01-28 | 에스케이 텔레콤주식회사 | Method for providing virtual action service in video call system and mobile communication terminal for the same |
KR101390126B1 (en) * | 2007-08-14 | 2014-04-28 | 엘지전자 주식회사 | Method of providing a preview image and mobile communication terminal |
TWI376950B (en) | 2007-08-23 | 2012-11-11 | Benq Corp | Multimedia effect processing device for videophone and related method |
CN101383939B (en) * | 2007-09-06 | 2010-09-22 | 佳世达科技股份有限公司 | Image and sound processing device for video telephone and related method thereof |
KR101422009B1 (en) * | 2007-10-05 | 2014-07-23 | 엘지전자 주식회사 | Mobile terminal and method of data communication therein |
KR101408338B1 (en) * | 2008-09-04 | 2014-06-17 | 삼성테크윈 주식회사 | Video presenting system having output of dual image |
CN101924903B (en) * | 2009-06-17 | 2013-03-20 | 华为技术有限公司 | Method, device and system for realizing video call |
KR101420636B1 (en) * | 2009-12-16 | 2014-08-13 | 에스케이플래닛 주식회사 | System and Method for delivering Haptic Contents during Video Call, Server and Terminal thereof |
CN102447873A (en) * | 2010-10-13 | 2012-05-09 | 张明 | Ha-ha video network video chat entertainment auxiliary system |
KR101687616B1 (en) * | 2010-10-21 | 2016-12-19 | 엘지전자 주식회사 | Method for providing video call service in network tv and the network tv |
CN102075727A (en) * | 2010-12-30 | 2011-05-25 | 中兴通讯股份有限公司 | Method and device for processing images in videophone |
US8947491B2 (en) * | 2012-06-28 | 2015-02-03 | Microsoft Corporation | Communication system |
CN103514228B (en) * | 2012-06-29 | 2017-05-24 | 联想(北京)有限公司 | File processing method and electronic device |
CN103581113A (en) * | 2012-07-20 | 2014-02-12 | 中兴通讯股份有限公司 | Sending method, sending system and receiving device of communication data |
CN104079468A (en) * | 2013-03-25 | 2014-10-01 | 腾讯科技(深圳)有限公司 | Animation transmission method and system |
TWI545508B (en) * | 2014-07-18 | 2016-08-11 | 宏達國際電子股份有限公司 | Method for performing a face tracking function and an electric device having the same |
US9858470B2 (en) | 2014-07-18 | 2018-01-02 | Htc Corporation | Method for performing a face tracking function and an electric device having the same |
JP6578742B2 (en) * | 2015-05-28 | 2019-09-25 | 沖電気工業株式会社 | Business System |
CN105100946A (en) * | 2015-07-17 | 2015-11-25 | 小米科技有限责任公司 | Video communication method and apparatus |
CN105430317B (en) * | 2015-10-23 | 2018-10-26 | 东莞酷派软件技术有限公司 | A kind of video background setting method and terminal device |
EP3284249A2 (en) * | 2015-10-30 | 2018-02-21 | 2MEE Ltd | Communication system and method |
CN105872438A (en) * | 2015-12-15 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | Video call method and device, and terminal |
CN106713818A (en) * | 2017-02-21 | 2017-05-24 | 福建江夏学院 | Speech processing system and method during video call |
KR101968723B1 (en) | 2017-10-18 | 2019-04-12 | 네이버 주식회사 | Method and system for providing camera effect |
CN108200373B (en) * | 2017-12-29 | 2021-03-26 | 北京乐蜜科技有限责任公司 | Image processing method, image processing apparatus, electronic device, and medium |
CN115767577A (en) * | 2021-09-04 | 2023-03-07 | 华为技术有限公司 | Method, device and system for providing additional call service |
-
2004
- 2004-09-07 KR KR1020040071331A patent/KR100628756B1/en active IP Right Grant
-
2005
- 2005-03-14 CN CNA2005100538956A patent/CN1747546A/en active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101189043B1 (en) | 2011-04-27 | 2012-10-08 | 강준규 | Service and method for video call, server and terminal thereof |
Also Published As
Publication number | Publication date |
---|---|
KR20060022494A (en) | 2006-03-10 |
CN1747546A (en) | 2006-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100628756B1 (en) | Video effect provide apparatus for mobile station at Video telephony and the Method of the Same | |
EP2127341B1 (en) | A communication network and devices for text to speech and text to facial animation conversion | |
US6825873B2 (en) | TV phone apparatus | |
KR100912877B1 (en) | A mobile communication terminal having a function of the creating 3d avata model and the method thereof | |
AU2003263618B2 (en) | System and method for multiplexing media information over a network using reduced communications resources and prior knowledge/experience of a called or calling party | |
KR101058702B1 (en) | A mobile device receiving an electronic message comprising a text message from a sender and a method of editing the electronic message | |
EP1523160A1 (en) | Apparatus and method for sending messages which indicate an emotional state | |
US8421805B2 (en) | Smooth morphing between personal video calling avatars | |
JP4855501B2 (en) | Data input method and mobile communication terminal | |
JP2004178163A (en) | Image processing method and device | |
KR20020060495A (en) | Video terminal apparatus having displaying virtual background and implementing method thereof | |
JP2006350986A (en) | Cellphone capable of transmitting/receiving mail with face photo | |
US20050122344A1 (en) | Method for generating graphic representation in a mobile terminal | |
KR20020086306A (en) | Animation character generation system and the method on mobile device | |
CN101997958A (en) | Method for synthesizing Avatar by using one photo on phone set terminal | |
CN110288680A (en) | Image generating method and mobile terminal | |
KR100460221B1 (en) | Video communication system | |
JP2013242835A (en) | Image communication system, image generation device and program | |
KR20030096983A (en) | The Integrated Animation System for the Web and Mobile Downloaded Using Facial Image | |
CN101753692A (en) | Method, device and mobile terminal for displaying information at mobile terminal | |
JP2000261574A (en) | Portable terminal and data communication system | |
KR101028257B1 (en) | Avatar editing method for mobile communication device | |
KR100923307B1 (en) | A mobile communication terminal for a video call and method for servicing a video call using the same | |
KR100801664B1 (en) | 3-dimentional action animation service method during video call and 3-dimentional action animation service system and mobile communication terminal for the same | |
KR100629382B1 (en) | Method for generating 3d avatar from 2d image on mobile communication terminal |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20120827 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20130823 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20140822 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20150824 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20160824 Year of fee payment: 11 |
|
FPAY | Annual fee payment |
Payment date: 20170824 Year of fee payment: 12 |