KR101571815B1 - See-through smart glasses having camera image adjustment function - Google Patents
See-through smart glasses having camera image adjustment function Download PDFInfo
- Publication number
- KR101571815B1 KR101571815B1 KR1020130146800A KR20130146800A KR101571815B1 KR 101571815 B1 KR101571815 B1 KR 101571815B1 KR 1020130146800 A KR1020130146800 A KR 1020130146800A KR 20130146800 A KR20130146800 A KR 20130146800A KR 101571815 B1 KR101571815 B1 KR 101571815B1
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- image
- frame
- right eye
- camera unit
- Prior art date
Links
- 239000004984 smart glass Substances 0.000 title abstract description 24
- 238000004891 communication Methods 0.000 claims abstract description 19
- 210000004709 eyebrow Anatomy 0.000 claims 1
- 239000011521 glass Substances 0.000 abstract description 11
- 230000006870 function Effects 0.000 description 10
- 238000000034 method Methods 0.000 description 7
- 238000010295 mobile communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 229920003217 poly(methylsilsesquioxane) Polymers 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000000057 synthetic resin Substances 0.000 description 1
- 229920003002 synthetic resin Polymers 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/34—Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
- G02B30/37—Collapsible stereoscopes
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
Abstract
본 발명에 따른 영상 정합 기능을 갖는 시스루 스마트 안경은 좌, 우안 가시부와, 상기 좌, 우안 가시부가 결합되는 프레임부와, 상기 프레임부의 양단에 결합되는 안경다리부와, 상기 프레임부에 설치되는 헤드마운티드디스플레이부와, 상기 좌, 우안 가시부 및 헤드마운티드디스플레이부를 제어하는 제어부와, 외부의 장치와 통신을 수행하기 위한 통신부와, 상기 좌, 우안 가시부와 헤드마운티드디스플레이부 및 제어부에 전원을 공급하는 전원공급부와, 상기 전원공급부를 온/오프시키기 위한 스위치부와, 영상의 촬영을 위한 카메라부와, 상기 카메라부에 의해 촬영되는 손동작을 인식하기 위한 손인식모듈을 포함하며, 상기 카메라부로 입력되는 영상을 상기 헤드마운티드디스플레이부를 통해 상기 좌, 우안 가시부에 조사하도록 하며, 상기 손인식모듈에 의해 인식되는 손동작에 따라 상기 카메라부로 입력되는 영상의 프레임을 이동시키도록 구성되는 것을 특징으로 한다.
본 발명에 의해, 단순한 손 동작을 통해 카메라부로 입력되는 영상의 프레임을 이동시킬 수 있어 카메라부를 통해 촬영되는 영상의 프레임과 실제 외부 영상을 용이하게 일치시킬 수 있다.The see-through smart glasses having the image matching function according to the present invention are provided with a left and right eye viewing portion, a frame portion to which the left and right eye viewing portions are coupled, a pair of glasses legs coupled to both ends of the frame portion, A control unit for controlling the left and right eye viewing units and the head mounted display unit; a communication unit for performing communication with an external device; and a power supply unit for supplying power to the left and right eye viewing units, the head- A switch unit for turning on / off the power supply unit; a camera unit for capturing an image; and a hand-held module for recognizing a hand movement photographed by the camera unit, To the left and right eye visible portions through the head-mounted display portion, In accordance with the hand movement it is recognized by the module being configured to move the frame of the image input to the camera.
According to the present invention, a frame of an image input to the camera unit can be moved through a simple hand operation, so that a frame of an image captured through the camera unit can be easily matched with an actual external image.
Description
본 발명은 시스루 스마트 안경에 관한 발명으로서, 보다 상세하게는 카메라에 촬영되는 영상의 프레임과 안경 착용자에 의해 보여지는 실제 영상을 손동작을 통해 상호 일치시킬 수 있도록 구성되는 카메라 영상 정합 기능을 갖는 시스루 스마트 안경에 관한 발명이다.[0001] The present invention relates to a see-through smart glasses, and more particularly, to a see-through smart camera having a camera image matching function configured to allow a frame of an image photographed by a camera and an actual image, It is an invention concerning glasses.
근래 PDA, 휴대폰, 스마트 폰 등의 다양한 이동 통신수단이 개발되어, 바쁜 현대인들의 신속한 업무 수행을 위한 도구로 널리 활용되고 있다.Recently, a variety of mobile communication means such as PDA, mobile phone, and smart phone have been developed and widely used as a tool for the quick work of busy modern people.
기존의 휴대폰의 경우 구동을 위한 각종의 프로그램들이 애초 제조사에 의해 저장 설치된 상태로 판매되고, 사용자는 이러한 상태에서 단순히 데이터를 입출력하는 등의 수동적인 작업만이 가능한 상태였다.In the case of the existing mobile phone, various programs for driving are initially sold by the manufacturer, and only the passive operation such as simply inputting and outputting data is possible in this state.
하지만, 최근에는 이동통신 수단의 확장적 기능을 위한 각종의 프로그램들을 사용자의 취향에 따라 개별적으로 선택하여 설치할 수 있는 스마트폰이 개발되었으며, 이러한 스마트폰에 의해 기존 휴대폰에서 가능하던 수동적 작업들의 한계를 벗어나 다양한 기능들을 스마트폰으로 구현할 수 있게 되었다.However, in recent years, a smartphone capable of selecting various programs for the expanding functions of the mobile communication means according to the user's preference has been developed, and the limitation of the passive tasks And various functions can be implemented on a smart phone.
한편, 최근에는 사용자가 눈으로 보는 현실세계에 가상 물체를 겹쳐 보여주는 증강현실의 기술이 개발되었다.On the other hand, in recent years, augmented reality technology in which a virtual object is superimposed on a real world viewed by a user has been developed.
상기 증간현실은 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality, MR)이라고도 한다. The added reality is referred to as a mixed reality (MR) because a virtual world including additional information in real time is combined into a single image.
상기와 같은 스마트폰과 연동되거나 또는 이외의 통신망을 통해 수신한 데이터를 통해 실제 영상에 가상의 영상을 혼합하여 볼 수 있도록 구성되는 안경을 시스루 스마트 안경이라 하며 최근 활발한 연구개발이 진행되고 있다.Recently, active research and development have been conducted on glasses which are configured to be able to mix virtual images with actual images through data received through a communication link with the smart phone or through a communication network other than the smart phone.
또한, 스마트 안경에 설치되는 카메라부를 통해 촬영되는 영상 내에서 특정인의 얼굴을 인식하거나 기업체의 로고 또는 기타 다양한 사물을 인식하여 그에 관한 정보를 안경 착용자의 시야에 디스플레이할 수도 있다.In addition, it is possible to recognize a face of a specific person in the image photographed through the camera unit installed in the smart glasses, or to recognize a logo of the company or various other objects, and to display information about the logo in the field of view of the wearer.
그런데, 이때 상기 카메라부로 입력되는 영상과 안경 착용자가 실제 보게 되는 외부 상황이 일치되지 않을 경우에는 올바르지 못한 정보가 디스플레이될 수 있다.Incidentally, if the image inputted to the camera unit and the external condition actually seen by the wearer of glasses are not identical, incorrect information can be displayed.
본 발명은 상기된 바와 같은 문제점을 해결하기 위해 안출된 것으로서, 본 발명의 목적은, 단순한 손 동작을 통해 카메라부로 입력되는 영상의 프레임을 이동시킬 수 있도록 구성되는 카메라 영상 정합 기능을 갖는 시스루 스마트 안경을 제공하는 것이다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a sight-seeing smart glass having a camera image matching function, which is configured to move a frame of an image input to a camera unit through a simple hand operation, .
상기 목적을 달성하기 위한 본 발명에 따른 영상 정합 기능을 갖는 시스루 스마트 안경은 좌, 우안 가시부와, 상기 좌, 우안 가시부가 결합되는 프레임부와, 상기 프레임부의 양단에 결합되는 안경다리부와, 상기 프레임부에 설치되는 헤드마운티드디스플레이부와, 상기 좌, 우안 가시부 및 헤드마운티드디스플레이부를 제어하는 제어부와, 외부의 장치와 통신을 수행하기 위한 통신부와, 상기 좌, 우안 가시부와 헤드마운티드디스플레이부 및 제어부에 전원을 공급하는 전원공급부와, 상기 전원공급부를 온/오프시키기 위한 스위치부와, 영상의 촬영을 위한 카메라부와, 상기 카메라부에 의해 촬영되는 손동작을 인식하기 위한 손인식모듈을 포함하며, 상기 카메라부로 입력되는 영상을 상기 헤드마운티드디스플레이부를 통해 상기 좌, 우안 가시부에 조사하도록 하며, 상기 손인식모듈에 의해 인식되는 손동작에 따라 상기 카메라부로 입력되는 영상의 프레임을 이동시키도록 구성되는 것을 특징으로 한다.In order to accomplish the above object, a see-through smart spectacle having a video matching function according to the present invention comprises a left and right eye viewing part, a frame part coupled with the left and right eye viewing parts, a spectacle leg part coupled to both ends of the frame part, A control unit for controlling the left and right eye viewing units and the head mounted display unit; a communication unit for performing communication with an external device; and a communication unit for communicating with the left and right eye viewing units and the head mounted display A power supply unit for supplying power to the control unit, a switch unit for turning on / off the power supply unit, a camera unit for capturing an image, and a handwriting module for recognizing a hand movement photographed by the camera unit And an image input to the camera unit is displayed on the left and right eyes through the head- And to use, and in accordance with the hand movement it is recognized by the soninsik module being configured to move the frame of the image input to the camera.
바람직하게는, 사람의 얼굴을 인식하기 위한 얼굴인식모듈을 추가적으로 포함한다.Preferably, the apparatus further includes a face recognition module for recognizing a face of a person.
여기서, 상기 손인식모듈에 의해 인식되는 손동작에 따라 상기 카메라부에 의해 촬영되는 영상 중에서 상기 좌, 우안 가시부에 조사되는 영상의 프레임을 이동시키도록 구성될 수 있다.Here, it is possible to move the frame of the image irradiated to the left and right eye view portions of the images photographed by the camera portion according to the hand operation recognized by the hand-held module.
또는, 상기 손인식모듈에 의해 인식되는 손동작에 따라 상기 카메라부의 촬영 각도를 변경하도록 구성되는 것을 특징으로 하는 카메라 영상 정합 기능을 갖는 시스루 스마트 안경.Or the photographing angle of the camera unit is changed according to a hand movement recognized by the hand-held module.
본 발명에 의해, 단순한 손 동작을 통해 카메라부로 입력되는 영상의 프레임을 이동시킬 수 있어 카메라부를 통해 촬영되는 영상의 프레임과 실제 외부 환경을 용이하게 일치시킬 수 있다.According to the present invention, a frame of an image input to the camera unit can be moved through a simple hand operation, so that the frame of the image captured through the camera unit can be easily matched with the actual external environment.
첨부의 하기 도면들은, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 이해시키기 위한 것이므로, 본 발명은 하기 도면에 도시된 사항에 한정 해석되어서는 아니 된다.
도 1 은 본 발명에 따른 카메라 영상 정합 기능을 갖는 시스루 스마트 안경의 사시도이며,
도 2 는 상기 스마트 안경의 구성 블럭도이며,
도 3 은 상기 스마트 안경을 통해 보여지는 영상의 일 예이며,
도 4 는 상기 안경을 통해 사람의 얼굴을 인식하여 정보를 표시한 영상의 일 예이며,
도 5 는 상기 안경을 통해 기업의 로고를 인식하여 정보를 표시한 영상의 일 예이며,
도 6 은 상기 안경을 통해 사람의 얼굴을 인식하여 옳바르지 못한 정보를 표시한 영상의 일 예이며,
도 7 은 카메라 영상을 정합하는 과정의 일 예를 도시한다.BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are included to provide a further understanding of the invention and are incorporated in and constitute a part of this application, illustrate embodiments of the invention and, together with the description, serve to explain the principles of the invention.
1 is a perspective view of a see-through smart glasses having a camera image matching function according to the present invention,
2 is a structural block diagram of the smart glasses,
3 is an example of an image viewed through the smart glasses,
4 is an example of an image in which information is displayed by recognizing the face of a person through the glasses,
5 is an example of an image in which information is displayed by recognizing a logo of a company through the glasses,
FIG. 6 is an example of an image in which information on a person's face is recognized through the glasses,
FIG. 7 shows an example of a process of matching camera images.
이하, 첨부된 도면을 참조하여 본 발명의 구성을 상세히 설명하기로 한다. Hereinafter, the configuration of the present invention will be described in detail with reference to the accompanying drawings.
이에 앞서, 본 명세서 및 청구범위에 사용된 용어는 사전적인 의미로 한정 해석되어서는 아니되며, 발명자는 자신의 발명을 최선의 방법으로 설명하기 위해 용어의 개념을 적절히 정의할 수 있다는 원칙에 입각하여, 본 발명의 기술적 사상에 부합되는 의미와 개념으로 해석되어야 한다.Prior to this, the terms used in the specification and claims should not be construed in a dictionary sense, and the inventor may, on the principle that the concept of a term can be properly defined in order to explain its invention in the best way And should be construed in light of the meanings and concepts consistent with the technical idea of the present invention.
따라서, 본 명세서에 기재된 실시예 및 도면에 도시된 구성은 본 발명의 바람직한 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 표현하는 것은 아니므로, 본 출원 시점에 있어 이들을 대체할 수 있는 다양한 균등물과 변형예들이 존재할 수 있음을 이해하여야 한다.Therefore, the embodiments shown in the present specification and the drawings are only exemplary embodiments of the present invention, and not all of the technical ideas of the present invention are presented. Therefore, various equivalents It should be understood that water and variations may exist.
도 1 은 본 발명에 따른 카메라 영상 정합 기능을 갖는 시스루 스마트 안경의 사시도이며, 도 2 는 상기 스마트 안경의 구성 블럭도이며, 도 3 은 상기 스마트 안경을 통해 보여지는 영상의 일 예이며, 도 4 는 상기 안경을 통해 사람의 얼굴을 인식하여 정보를 표시한 영상의 일 예이며, 도 5 는 상기 안경을 통해 기업의 로고를 인식하여 정보를 표시한 영상의 일 예이며, 도 6 은 상기 안경을 통해 사람의 얼굴을 인식하여 옳바르지 못한 정보를 표시한 영상의 일 예이며, 도 7 은 카메라 영상을 정합하는 과정의 일 예를 도시한다.FIG. 1 is a perspective view of a see-through smart glasses having a camera image matching function according to the present invention, FIG. 2 is a structural block diagram of the smart glasses, FIG. 3 is an example of an image viewed through the smart glasses, FIG. 5 is an example of an image in which information is displayed by recognizing a logo of a company through the glasses, and FIG. 6 is an example of an image in which information is displayed by recognizing a face of a person through the glasses. FIG. 7 illustrates an example of a process of matching a camera image. In FIG.
본 발명에 따른 영상 정합 기능을 갖는 시스루 스마트 안경은 좌, 우안 가시부(10, 12)와, 상기 좌, 우안 가시부(10, 12)가 결합되는 프레임부(20)와, 상기 프레임부(20)의 양단에 결합되는 안경다리부(30)와, 상기 프레임부(20)에 설치되는 헤드마운티드디스플레이부(40)와, 상기 스마트폰의 각종 구성들을 제어하는 제어부(50)와, 외부의 장치와 통신을 수행하기 위한 통신부(80)와, 상기 좌, 우안 가시부(10, 12)와 헤드마운티드디스플레이부(40) 및 제어부(50)에 전원을 공급하는 전원공급부(60)와, 상기 전원공급부(60)를 온/오프시키기 위한 스위치부(70)와, 영상의 촬영을 위한 카메라부(90)와, 상기 카메라부(90)에 의해 촬영되는 손동작을 인식하기 위한 손인식모듈(94)을 포함하며, 상기 카메라부(90)로 입력되는 영상을 상기 헤드마운티드디스플레이부(40)를 통해 상기 좌, 우안 가시부(10, 12)에 조사하도록 하며, 상기 손인식모듈(94)에 의해 인식되는 손동작에 따라 상기 카메라부(90)로 입력되는 영상 프레임을 이동시키도록 구성되는 것을 특징으로 한다.The see-through smart glasses having the image matching function according to the present invention include a
스마트폰은 이동통신 수단의 확장적 기능을 위한 각종의 프로그램들을 사용자의 취향에 따라 개별적으로 선택하여 설치할 수 있는 장치로서, 기존 일반 이동통신수단에서 가능하던 수동적 작업들의 한계를 벗어나 다양한 기능들을 구현할 수 있다.A smart phone is a device that can selectively install various programs for an expanding function of a mobile communication device according to the user's preference and can implement various functions beyond the limit of the passive operations available in conventional mobile communication means have.
시스루(See-through) 스마트안경은 통신부(80)를 통해 상기와 같은 스마트폰과 연동되어 데이터를 수신하거나 와이파이 통신망에 접속됨으로써, 직접 네트워크에 연결되어 데이터를 수신할 수 있도록 구성된다.The see-through smart glasses are connected to the smart phone through the
상기 통신부(80)는 신호 전송 방식에 따라 예를 들어, 알에프 통신신호 또는 블루투스(BT) 통신신호 등을 수신하고 이를 전기적 신호로 변환시켜 상기 제어부(50)로 전달하거나 외부의 통신서버와 3G 통신망 또는 와이파이 통신망을 통해 통신하여 데이터를 수신하도록 구성된다.The
그리하여, 상기 스마트폰 또는 통신망을 통해 전달받은 데이터에 기초한 영상을 상기 좌, 우안 가시부(10, 12)를 통해 표시하도록 구성된다.Thus, an image based on the data transmitted through the smart phone or the communication network is displayed through the left and
여기서, 상기 좌, 우안 가시부(10, 12)는 바람직하게는 반투명 유리 또는 합성수지재로 구성되어, 외부의 광을 어느 정도 투과하면서도 상기 디스플레이부(40)에 의해 조사되는 영상이 맺히도록 구성된다. The left and right
상기 프레임부(20)의 일측에는 상기 전원공급부(60)를 온/오프 시키기 위한 스위치부(70)가 설치되어, 상기 시스루 스마트안경을 이용하고자 할 경우에는 상기 스위치부(70)를 온시켜 전원이 공급되도록 하고, 스마트안경을 이용하지 않을 경우에는 상기 스위치부(70)를 오프시켜 전원공급이 중단되도록 구성된다.A
상기 제어부(50)는 상기 통신부(80)로부터 전달받은 데이터를 상기 좌, 우안 가시부(10, 12)에 표시하기 위한 제어신호를 생성한다.The
또한, 상기 제어부(50)는 스마트 안경의 각종 구성들을 제어하기 위한 제어신호를 생성한다.In addition, the
상기 제어부(50)는 회로기판 또는 IC 칩의 형태로 구성되어, 상기 스마트 안경의 프레임부(20) 또는 안경다리부(30) 내에 배치된다.The
또한, 상기 제어부(50)를 구성하는 회로기판 또는 IC 칩 내에는 메모리부가 포함되며, 상기 손인식모듈(94) 및 얼굴인식모듈(92)이 프로그램의 형태로 상기 메모리부에 저장된다.A memory unit is included in the circuit board or the IC chip constituting the
상기 메모리부는 램(RAM) 또는 롬(ROM) 등의 메모리 소자로써, 상기 제어부(50)를 구성하는 회로기판 또는 IC 칩 내에 포함된다.The memory unit is a memory device such as a RAM or a ROM, and is included in a circuit board or an IC chip constituting the
상기 스위치부(70)는 프레임부(20) 또는 안경다리부(30)의 측부에 배치될 수 있지만 이에 한정되지는 않으며, 사용자의 조작이 용이한 다양한 위치에 배치될 수 있음은 물론이다.The
상기 프레임부(20)의 일측에는 상기 좌, 우안 가시부(10, 12)에 영상을 디스플레이하기 위한 헤드마운티드디스플레이부(40)가 설치된다.A head-mounted
상기 헤드마운티드디스플레이부(40)는 마이크로 액정과 광원 및 렌즈 등을 포함하여 구성되며, 상기 마이크로 액정을 통해 표현되는 영상을 상기 좌, 우안 가시부(10, 12)로 조사하여 디스플레이함으로써, 안경 착용자의 시야에 가시되도록 한다.The head-mounted
상기 헤드마운티드디스플레이부(40)를 통해 상기 좌, 우안 가시부(10, 12)에 영상을 디스플레이하면서, 상기 좌, 우안 가시부(10, 12)를 통해 외부를 볼 경우, 상기 좌, 우안 가시부(10, 12)에 표시되는 영상을 보면서 동시에 실제 외부 환경을 볼 수 있다.When an image is displayed on the left and right
상기 전원공급부(60)는 스마트 안경의 각종 구성들에 전력을 공급하기 위한 구성으로서, 리튬 이온 배터리, 리튬 폴리머 배터리 등의 이차전지로 구성될 수 있다.The
상기된 바와 같이, 상기 메모리부 내에는 상기 카메라부(90)에 의해 촬영되는 손동작을 인식하기 위한 손인식모듈(94)이 프로그램의 형태로 저장된다.As described above, in the memory unit, a hand-held
상기 손인식모듈(94)은 사람의 손을 촬영하여 손의 형태를 인식하기 위한 프로그램으로서, 도 7 에 도시된 바와 같이 손가락 하나를 편 상태에서 가리키는 방향을 인식하거나 손가락을 모두 편 상태를 인식하거나 또는 주먹을 쥔 상태의 모양 등을 인식할 수 있도록 구성된다.The hand-held
상기 얼굴인식모듈(92)은 사람의 얼굴을 인식하는 프로그램으로써, 현재 다양한 형태의 얼굴 인식 프로그램들이 개발되어 있다.The
상기 카메라부(90)는 외부의 실제 사물을 촬영하는 구성으로서, 상기 카메라부(90)에 의해 촬영된 영상을 상기 헤드마운티드디스플레이부(90)를 통해 상기 좌, 우안 가시부(10, 12)에 디스플레이하도록 구성된다.The
또한, 상기 카메라부(90)에 의해 촬영된 영상에 대해 상기 손인식모듈(94)과 얼굴인식모듈(92)을 적용한다.In addition, the hand-held
도 3 내지 7 을 참조하여, 본 발명에 따른 스마트 안경의 영상 정합 과정을 설명하면 다음과 같다.3 to 7, the image matching process of the smart glasses according to the present invention will be described as follows.
도 3 에 도시된 바와 같이, 상기 스마트 안경을 착용한 상태에서 상기 좌, 우안 가시부(10, 12)에 영상이 디스플레이될 경우에는 외부의 실제 영상(200)과 디스플레이되는 영상(120)이 겹쳐 표현된다.3, when an image is displayed on the left and right
이때, 상기 카메라부(90)를 통해 촬영되는 영상에서 특정 기업체의 로고(110) 또는 사람의 얼굴(110)이 식별될 경우에는, 외부의 서버(미도시)에 저장된 상기 로고(110) 또는 사람의 얼굴(110)에 관련되는 내용을 상기 통신부(80)를 통해 전달받아 상기 좌, 우안 가시부(10, 12)에 디스플레이할 수 있다.When the
또한, 도 4 에 도시되는 바와 같이 스마트 안경 착용자의 시야와 카메라부(90)에 의해 촬영되는 영상의 프레임이 정확히 일치되어 안경 착용자의 시야에 특정인(예를 들어 장동건)이 포착되는 경우, 그 인물에 관련되는 정보가 표시되는 것이 바람직하다.4, when a specific person (for example, Jang Dong Gun) is captured in the visual field of the wearer of the eyeglass so that the visual field of the wearer of the smart glasses and the frame of the image photographed by the
그러면, 안경 착용자의 시야에 포착되는 연예인 장동건에 관한 정보 또는 특정 기업체 로고에 관한 정보가 상기 좌, 우안 가시부(10, 12)에 디스플레이되어 안경 착용자에게 보여져 이용될 수 있다.Then, the information on the entertainer's long legs caught in the sight of the wearer or the information on the specific company logo can be displayed on the left and
그런데, 만약 스마트 안경 착용자의 시야와 상기 카메라부(90)에 의해 촬영되는 영상의 프레임이 일치되지 않을 경우에는 옳바르지 못한 정보가 디스플레이될 수 있다.However, if the view of the wearer of the smart glasses does not match the frame of the image taken by the
즉, 예를 들어 안경 착용자의 시야는 도 4 에 도시된 영상 내에서 장동건 옆의 인물 즉 도 6 에 도시된 인물을 향하고 있는데, 카메라부(90)에 의해 촬영되는 영상의 프레임은 도 4 에 도시된 장동건 쪽을 향할 경우에는, 도 6 에 도시된 안경 착용자에 의해 보여지는 인물에 대해 장동건에 관한 정보가 디스플레이된다.In other words, for example, the vision of the wearer of the eyeglasses faces the person next to the Jang Dong gun in the image shown in Fig. 4, that is, the person shown in Fig. 6. The frame of the image captured by the
따라서, 안경 착용자의 시선 방향과 상기 카메라부(90)에 의해 촬영되는 영상의 프레임을 일치시켜주는 것이 바람직하다.Therefore, it is preferable that the line of sight of the wearer of the eyeglasses coincides with the frame of the image photographed by the
상기와 같이 상기 카메라부(90)에 의해 촬영되는 영상의 프레임을 안경 착용자의 시선 방향과 일치시키기 위해, 상기 카메라부(90)로 입력되는 영상을 상기 헤드마운티드디스플레이부(40)를 통해 상기 좌, 우안 가시부(10, 12)에 조사한다.In order to make the frame of the image photographed by the
이때, 상기 헤드마운티드디스플레이부(40)를 통해 조사되는 영상(120)은 스마트 안경 착용자에게 보여지는 실제 외부 영상(200)에 겹쳐지며, 도 7 (a) 에 도시된 바와 같이, 상기 실제 외부 영상(200)과 상기 헤드마운티드디스플레이부(40)를 통해 조사되는 영상의 프레임(120)이 일치되지 않을 수 있다.At this time, the
상기와 같이, 실제 외부 영상(200)과 상기 조사되는 영상(120)이 일치되지 않는 경우에는, 스마트 안경 착용자의 손을 카메라부(90) 앞에 배치시켜 촬영한다.As described above, when the actual
이때, 손 모양의 인식 정확도를 높이기 위해 예를 들면, 손가락을 하나 편 상태에서 상기 카메라부(90)로 입력되는 영상의 프레임(120)을 이동시키고자 하는 방향으로 가리키면서 상기 카메라부(90)로 촬영할 수 있다.At this time, in order to increase the recognition accuracy of the hand shape, for example, the
그리하여, 상기와 같이 손가락을 하나 편 상태의 모양으로 상기 카메라부(90)로 입력되는 영상의 프레임(120)을 상, 하, 좌, 우로 이동시키고, 상기 영상의 프레임(120)이 실제 외부 영상과 일치될 경우에는, 예를 들어 손가락을 모두 펴거나 주먹을 쥔 상태를 상기 카메라부(90)를 통해 촬영함으로써, 그 위치로 상기 영상의 프레임(120)을 결정짓는다.Thus, when the
상기 카메라부(90)에 의해 촬영되는 영상의 프레임(120)을 이동시키기 위한 방법으로서는, 상기 카메라부(90)의 촬영 각도를 기계적으로 조절하는 방식과 상기 카메라부(90)에 의해 촬영되는 영상에 대해 프로그램적으로 영상의 프레임을 이동시켜 선택하는 방식이 모두 이용될 수 있다.As a method for moving the
이때, 스마트 안경 착용자의 편의를 위해 상기 카메라부(90)에 의해 촬영되는 영상 중에서 상기와 같이 조절되는 영상 프레임 영역을 사각 형태로 표시하여, 상기 좌, 우안 가시부(10, 12)에 나타냄으로써, 안경 착용자가 실제 외부 환경과 직접 비교하면서 상기와 같은 프레임 위치 조절을 수행할 수 있다.At this time, for the sake of the wearer of the smart glasses, the image frame area, which is adjusted as described above, is displayed in a rectangular shape in the images photographed by the
이상, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명의 기술적 사상은 이러한 것에 한정되지 않으며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해, 본 발명의 기술적 사상과 하기 될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형 실시가 가능할 것이다.While the present invention has been described with reference to the exemplary embodiments and the drawings, it is to be understood that the technical scope of the present invention is not limited to these embodiments and various changes and modifications may be made without departing from the spirit and scope of the present invention by those skilled in the art. Various modifications and variations may be made without departing from the scope of the appended claims.
10, 12: 좌, 우안 가시부
20: 프레임부
30: 안경다리부
40: 디스플레이부
50: 제어부
60: 전원공급부
70: 스위치부
80: 통신부
90: 카메라부10, 12: left, right eye
20:
30: eyeglass leg
40:
50:
60: Power supply
70:
80:
90:
Claims (4)
상기 좌, 우안 가시부가 결합되는 프레임부와;
상기 프레임부의 양단에 결합되는 안경다리부와;
상기 프레임부에 설치되는 헤드마운티드디스플레이부와;
각종 구성들을 제어하는 제어부와;
외부의 장치와 통신을 수행하기 위한 통신부와;
상기 좌, 우안 가시부와 헤드마운티드디스플레이부 및 제어부에 전원을 공급하는 전원공급부와;
상기 전원공급부를 온/오프시키기 위한 스위치부와;
영상의 촬영을 위한 카메라부와;
상기 카메라부에 의해 촬영되는 손동작을 인식하기 위한 손인식모듈과;
사람의 얼굴을 인식하기 위한 얼굴인식모듈을 포함하며,
상기 카메라부로 입력되는 영상을 상기 헤드마운티드디스플레이부를 통해 상기 좌, 우안 가시부에 조사하도록 하며,
상기 카메라부를 통해 촬영되는 영상에서 사람의 얼굴이 식별되는 경우, 외부의 서버로부터 상기 통신부를 통해 데이터를 전달받아 상기 좌, 우안 가시부에 디스플레이하며,
상기 카메라부에 의해 촬영되어 상기 좌, 우안 가시부에 표시되는 영상 프레임 영역을 사각 형태로 표시하되,
상기 손인식모듈에 의해 인식되는 손동작에 따라 상기 카메라부의 촬영 각도를 변경하여 상기 카메라부로 입력되는 영상의 프레임을 이동시킴으로써,
상기 좌, 우안 가시부에 조사되는 영상의 프레임을 이동시키도록 구성되는 것을 특징으로 하는 카메라 영상 정합 기능을 갖는 시스루 스마트 안경.
Left and right eyebrows;
A frame part to which the left and right eye viewing parts are coupled;
An eyeglass leg coupled to both ends of the frame portion;
A head-mounted display unit installed in the frame unit;
A control unit for controlling various configurations;
A communication unit for performing communication with an external device;
A power supply unit for supplying power to the left and right eye viewing units, the head-mounted display unit, and the control unit;
A switch unit for turning on / off the power supply unit;
A camera unit for capturing an image;
A hand-held module for recognizing a hand gesture taken by the camera unit;
A face recognition module for recognizing a face of a person,
An image input to the camera unit is irradiated to the left and right eyes through the head-mounted display unit,
Wherein when a face of a person is identified in an image photographed through the camera unit, data is received from an external server through the communication unit and displayed on the left and right eyes,
An image frame area which is photographed by the camera unit and is displayed on the left and right eye view parts in a rectangular form,
By changing a photographing angle of the camera unit according to a hand movement recognized by the hand-held module and moving a frame of an image input to the camera unit,
And a frame of an image irradiated to the left and right eye viewing units is moved.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130146800A KR101571815B1 (en) | 2013-11-29 | 2013-11-29 | See-through smart glasses having camera image adjustment function |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130146800A KR101571815B1 (en) | 2013-11-29 | 2013-11-29 | See-through smart glasses having camera image adjustment function |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20150062303A KR20150062303A (en) | 2015-06-08 |
| KR101571815B1 true KR101571815B1 (en) | 2015-11-26 |
Family
ID=53500338
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020130146800A KR101571815B1 (en) | 2013-11-29 | 2013-11-29 | See-through smart glasses having camera image adjustment function |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101571815B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200103929A (en) | 2019-02-25 | 2020-09-03 | 주식회사 모플래닛 | Smart wearable device, method and system for recognizing 3 dimensional face and space information using this |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102249234B1 (en) * | 2015-07-31 | 2021-05-10 | 한국전자통신연구원 | Apparatus and method for measuring heart rate |
| KR102656528B1 (en) * | 2016-11-25 | 2024-04-12 | 삼성전자주식회사 | Electronic device, external electronic device and method for connecting between electronic device and external electronic device |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011002753A (en) | 2009-06-22 | 2011-01-06 | Sony Corp | Head mounted display, and image display method for the same |
| JP2013054661A (en) | 2011-09-06 | 2013-03-21 | Nec Biglobe Ltd | Information display system, information display method and program for information display |
| JP2013206412A (en) | 2012-03-29 | 2013-10-07 | Brother Ind Ltd | Head-mounted display and computer program |
-
2013
- 2013-11-29 KR KR1020130146800A patent/KR101571815B1/en not_active IP Right Cessation
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011002753A (en) | 2009-06-22 | 2011-01-06 | Sony Corp | Head mounted display, and image display method for the same |
| JP2013054661A (en) | 2011-09-06 | 2013-03-21 | Nec Biglobe Ltd | Information display system, information display method and program for information display |
| JP2013206412A (en) | 2012-03-29 | 2013-10-07 | Brother Ind Ltd | Head-mounted display and computer program |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200103929A (en) | 2019-02-25 | 2020-09-03 | 주식회사 모플래닛 | Smart wearable device, method and system for recognizing 3 dimensional face and space information using this |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20150062303A (en) | 2015-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11287905B2 (en) | Trackability enhancement of a passive stylus | |
| CN108508603B (en) | Head-mounted display device, control method therefor, and recording medium | |
| US10474226B2 (en) | Head-mounted display device, computer program, and control method for head-mounted display device | |
| US20180176547A1 (en) | Display apparatus and method for controlling display apparatus | |
| US20170287222A1 (en) | Head mounted display, method for controlling head mounted display, and computer program | |
| US10884498B2 (en) | Display device and method for controlling display device | |
| US12222510B2 (en) | Head-mounted type display device and method of controlling head-mounted type display device | |
| US10296105B2 (en) | Head-mounted display device, computer program, and control method for head-mounted display device | |
| US20170289533A1 (en) | Head mounted display, control method thereof, and computer program | |
| KR101638157B1 (en) | See-through smart glasses having position adjustment function of display module | |
| KR20130034125A (en) | Augmented reality function glass type monitor | |
| KR20130059827A (en) | Glasses type camera using by pupil tracker | |
| CN105319716A (en) | Display device, method of controlling display device, and program | |
| KR101571815B1 (en) | See-through smart glasses having camera image adjustment function | |
| JP6776578B2 (en) | Input device, input method, computer program | |
| JP6516464B2 (en) | Wearable search system | |
| WO2016101861A1 (en) | Head-worn display device | |
| US11573634B2 (en) | Display method, display device, and program | |
| KR20150062182A (en) | Smart glasses using qr code | |
| KR20140097742A (en) | Smart glasses comprising sensor for sensing intensity of illumination | |
| JP6932917B2 (en) | Head-mounted display, program, and head-mounted display control method | |
| US11454816B1 (en) | Segmented illumination display | |
| JP6790769B2 (en) | Head-mounted display device, program, and control method of head-mounted display device | |
| JP2017182460A (en) | Head-mounted display device, head-mounted display device control method, computer program | |
| KR20160002753U (en) | Smart glasses of light transmittance adjustable type |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20131129 |
|
| PA0201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20141126 Patent event code: PE09021S01D |
|
| PG1501 | Laying open of application | ||
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20150828 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20151119 Patent event code: PR07011E01D |
|
| PR1002 | Payment of registration fee |
Payment date: 20151120 End annual number: 3 Start annual number: 1 |
|
| PG1601 | Publication of registration | ||
| LAPS | Lapse due to unpaid annual fee | ||
| PC1903 | Unpaid annual fee |
Termination category: Default of registration fee Termination date: 20190831 |