KR102212336B1 - Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 - Google Patents
Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 Download PDFInfo
- Publication number
- KR102212336B1 KR102212336B1 KR1020190088841A KR20190088841A KR102212336B1 KR 102212336 B1 KR102212336 B1 KR 102212336B1 KR 1020190088841 A KR1020190088841 A KR 1020190088841A KR 20190088841 A KR20190088841 A KR 20190088841A KR 102212336 B1 KR102212336 B1 KR 102212336B1
- Authority
- KR
- South Korea
- Prior art keywords
- head
- user
- display device
- worn
- emergency
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 claims abstract description 24
- 230000003287 optical effect Effects 0.000 claims abstract description 12
- 231100001261 hazardous Toxicity 0.000 claims abstract description 9
- 210000003128 head Anatomy 0.000 claims description 20
- 238000004891 communication Methods 0.000 claims description 14
- 238000000034 method Methods 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 2
- 230000000644 propagated effect Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 7
- 230000007123 defense Effects 0.000 description 3
- 239000007789 gas Substances 0.000 description 3
- 239000000779 smoke Substances 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 241001465382 Physalis alkekengi Species 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005358 geomagnetic field Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000003949 liquefied natural gas Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 231100000614 poison Toxicity 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 239000003440 toxic substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Navigation (AREA)
- Alarm Systems (AREA)
Abstract
본 발명에서 제안하고 있는 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치에 따르면, 위험작업 현장에 투입되는 사용자들이 착용하는 머리 착용형 디스플레이 장치에 구비되는 IMU 센서를 이용해 작업 중인 사용자의 이동 경로를 추적하고, 위급상황 이벤트 발생 시 사용자의 이동 경로로부터 생성한 탈출 경로를 증강현실 기반으로 안내하는 내비게이션 영상 정보를 출력함으로써, 위급상황 발생 시 사용자가 착용한 머리 착용형 디스플레이 장치에 자동으로 표시되는 내비게이션 영상 정보에 따라 신속하고 안전하게 탈출할 수 있다.
또한, 본 발명에서 제안하고 있는 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치에 따르면, 인접하는 다른 머리 착용형 디스플레이 장치와 탈출 경로를 공유 및 전파하고, 공유된 탈출 경로를 IMU 센서를 이용해 각각의 사용자의 위치 및 자세에 따라 최적화하여 증강현실 기반으로 안내하는 내비게이션 영상 정보를 출력함으로써, 위험작업 현장에 투입되어 작업 중인 사용자들이 위급상황 발생을 인지하고 각각의 사용자가 자신의 상황에 최적화되어 안내되는 내비게이션 영상 정보를 따라 신속하게 이동하여 인명 피해를 최소화할 수 있다.
Description
도 2는 일반적인 밴드형태의 헤드 마운티드 디스플레이(HMD)의 개략적인 구성을 도시한 도면.
도 3은 본 발명의 일실시예에 따른 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치의 구성을 기능블록으로 도시한 도면.
도 4는 본 발명의 일실시예에 따른 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치의 디스플레이 화면을 예를 들어 도시한 도면.
도 5는 본 발명의 일실시예에 따른 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치들 사이에 탈출 경로를 공유하는 구현 일례의 구성을 도시한 도면.
도 6은 본 발명의 일실시예에 따른 IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치가 최적의 탈출 경로를 안내하는 구성을 도시한 도면.
100: 본 발명의 일실시예에 따른 머리 착용형 디스플레이 장치
110: HMD 프레임
120: 광학계
130: 디스플레이
140: 센서부
150: 연산부
160: 제어부
170: GPS 모듈
180: 카메라
190: 전원 공급부
200: 스위치부
210: 통신부
Claims (8)
- 머리 착용형 디스플레이 장치(100)로서,
위험작업 현장에서의 작업을 위해 사용자가 머리에 착용할 수 있는 HMD 프레임(110);
상기 HMD 프레임(110)을 착용한 사용자의 양안의 전방에 배치되며, 사용자의 시야를 통한 실제 세계(real world)가 투과되어 보일 수 있도록 하는 광학계(120);
상기 광학계(120)를 통해 투과되어 보이는 실제 세계와 함께 내비게이션 영상 정보(10)가 사용자에게 제공될 수 있도록 영상 광을 출력하는 디스플레이(130);
상기 HMD 프레임(110)의 일 측에 설치되며 IMU 센서를 포함하는 센서부(140);
상기 센서부(140)에 의해 수집되는 정보에 기초하여, 작업 중인 사용자의 이동 경로를 추적하고, 위급상황 이벤트 발생 시 상기 추적된 사용자의 이동 경로를 역산하여 탈출 경로를 생성하는 연산부(150);
상기 연산부(150)가 생성한 탈출 경로를 증강현실 기반으로 안내하는 내비게이션 영상 정보(10)를 생성하여 상기 디스플레이(130)로 전송 제어하는 제어부(160);
상기 HMD 프레임(110)에 장착되어 위치 정보를 제공하기 위한 GPS 모듈(170);
상기 HMD 프레임(110)에 장착되어 사용자의 시선 방향의 영상을 촬영하기 위한 카메라(180);
상기 머리 착용형 디스플레이 장치(100)의 구동을 위한 전원을 공급하기 위한 전원 공급부(190);
상기 전원 공급부(190)의 온/오프를 위한 스위치부(200); 및
상기 제어부(160)의 제어 하에 인접하는 다른 머리 착용형 디스플레이 장치(100)와 탈출 경로를 송수신하기 위한 데이터 통신을 수행하는 통신부(210)를 포함하며,
상기 위급상황 이벤트는, 상기 제어부(160)의 위급상황 판단에 따라 발생하거나, 다른 머리 착용형 디스플레이 장치(100)로부터 수신하여 발생하고,
상기 머리 착용형 디스플레이 장치(100)는,
위험작업 현장에서의 작업을 위해 투입되는 사용자들이 각각 착용할 수 있는 복수의 머리 착용형 디스플레이 장치(100)로 구성되고, 복수의 머리 착용형 디스플레이 장치(100) 중 하나의 머리 착용형 디스플레이 장치(100)의 디스플레이(130)를 통해 내비게이션 영상 정보(10)의 출력 시 상기 제어부(160)의 제어 하에 인접하는 다른 머리 착용형 디스플레이 장치(100)에서도 상기 연산부(150)가 생성한 탈출 경로가 공유되도록 전파하고,
상기 머리 착용형 디스플레이 장치(100)는,
위험작업 현장에서의 작업을 위해 투입되는 사용자들이 각각 착용할 수 있는 복수의 머리 착용형 디스플레이 장치(100)가 서로 무선으로 연동되고, 위급 상황으로 판단되면 자동으로 상기 연산부(150)가 생성한 탈출 경로의 공유를 통해 위험지역을 벗어날 수 있는 탈출 경로를 증강현실 기반으로 안내하도록 기능하며,
상기 제어부(160)는,
다른 머리 착용형 디스플레이 장치(100)로부터 공유된 탈출 경로와 상기 연산부(150)가 생성한 탈출 경로를 비교하여, 상기 사용자에게 제공할 탈출 경로를 선정하고, 선정된 탈출 경로를 증강현실 기반으로 안내하는 내비게이션 영상 정보(10)를 생성하여 상기 디스플레이(130)로 전송 제어하며, 탈출 경로의 비교를 위해 다른 머리 착용형 디스플레이 장치(100)로부터 카메라(180) 영상, 센서부(140)에서 수집된 정보를 포함하는 정보를 수집하는 것을 특징으로 하는, IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치(100). - 제1항에 있어서, 상기 HMD 프레임(110)은,
사용자가 머리에 착용한 상태에서 빛이 들어올 수 있는 프레임 구조를 갖는 헬멧(helmet) 형태 또는 고글(goggles) 형태로 구성되는 것을 특징으로 하는, IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치(100). - 제1항에 있어서, 상기 연산부(150)는,
추적 시작 신호를 입력받은 시점부터 상기 사용자의 이동 경로를 추적하는 것을 특징으로 하는, IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치(100). - 삭제
- 삭제
- 제1항에 있어서, 상기 제어부(160)는,
다른 머리 착용형 디스플레이 장치(100)로부터 공유된 탈출 경로를, 상기 센서부(140)에 의해 수집되는 정보에 기초하여 사용자의 위치 및 자세에 따라 증강현실 기반으로 안내하는 내비게이션 영상 정보(10)를 생성하여 상기 디스플레이(130)로 전송 제어하는 것을 특징으로 하는, IMU 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치(100). - 삭제
- 삭제
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190088841A KR102212336B1 (ko) | 2019-07-23 | 2019-07-23 | Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190088841A KR102212336B1 (ko) | 2019-07-23 | 2019-07-23 | Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20210011665A KR20210011665A (ko) | 2021-02-02 |
KR102212336B1 true KR102212336B1 (ko) | 2021-02-05 |
Family
ID=74558758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190088841A KR102212336B1 (ko) | 2019-07-23 | 2019-07-23 | Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102212336B1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102021213915A1 (de) | 2021-12-07 | 2023-06-07 | Psa Automobiles Sa | Fernsteuerung einer Fahrzeugfunktion mit Sensorfusion aus Touchscreen und IMU |
US20230252730A1 (en) * | 2022-02-04 | 2023-08-10 | The Boeing Company | Situational awareness headset |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102495641B1 (ko) * | 2021-05-14 | 2023-02-06 | 주식회사 피앤씨솔루션 | 증강현실 hmd를 이용한 전차용 전방위 외부 관측 시스템 |
KR102573067B1 (ko) * | 2022-12-14 | 2023-09-01 | 주식회사 피앤씨솔루션 | 아이트래킹 카메라와 조도 센서를 이용하여 착용자의 상태를 분석할 수 있는 증강현실 글래스 장치 |
KR102698214B1 (ko) * | 2023-02-02 | 2024-08-26 | 주식회사 피앤씨솔루션 | 윙슈트 점프용 ar 글라스 헬멧 장치 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6082272B2 (ja) * | 2013-02-25 | 2017-02-15 | 東京エレクトロン株式会社 | 支援情報表示方法、基板処理装置の保守支援方法、支援情報表示制御装置、基板処理システム及びプログラム |
KR102362117B1 (ko) * | 2014-07-01 | 2022-02-11 | 삼성전자주식회사 | 지도 정보를 제공하기 위한 전자 장치 |
KR20160017593A (ko) * | 2014-08-06 | 2016-02-16 | 넥시스 주식회사 | 글라스형 웨어러블 디바이스를 이용한 탈출경로 제공방법 및 프로그램 |
KR101848276B1 (ko) * | 2016-07-29 | 2018-04-12 | 선문대학교 산학협력단 | 재난대응을 위한 스마트 웨어러블장치 및 이를 이용한 재난대응 시스템 |
-
2019
- 2019-07-23 KR KR1020190088841A patent/KR102212336B1/ko active IP Right Grant
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102021213915A1 (de) | 2021-12-07 | 2023-06-07 | Psa Automobiles Sa | Fernsteuerung einer Fahrzeugfunktion mit Sensorfusion aus Touchscreen und IMU |
US20230252730A1 (en) * | 2022-02-04 | 2023-08-10 | The Boeing Company | Situational awareness headset |
Also Published As
Publication number | Publication date |
---|---|
KR20210011665A (ko) | 2021-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102212336B1 (ko) | Imu 센서를 이용한 위급상황 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 | |
US11231897B2 (en) | Display system, display device, information display method, and program | |
US11140939B2 (en) | Sensor assisted head mounted displays for welding | |
CN108378450B (zh) | 一种燃爆事故感知与风险预测预警智能消防头盔实现方法 | |
KR102201959B1 (ko) | 위급 상황에서 긴급 상황 공유 기능을 갖는 머리 착용형 디스플레이 장치 | |
US10788671B2 (en) | Enhanced vision for firefighter using heads up display and gesture sensing | |
US7110013B2 (en) | Augmented reality display integrated with self-contained breathing apparatus | |
US20110261176A1 (en) | Tactical vision system | |
JP7003633B2 (ja) | 透過型表示装置、表示制御方法、およびコンピュータープログラム | |
KR101671981B1 (ko) | 무선 통신을 이용한 협업 소방관의 위치 제공 방법 및 그 시스템과, 협업 소방관의 위치 표시 방법 및 이를 수행하기 위한 소방 헬멧 | |
US11915376B2 (en) | Wearable assisted perception module for navigation and communication in hazardous environments | |
JPH0854282A (ja) | 頭部装着ディスプレイ装置 | |
US10921592B2 (en) | Self-contained breathing apparatus face piece lens vision system | |
JPWO2015060393A1 (ja) | 遠隔行動誘導システム及びその処理方法 | |
JP6590050B2 (ja) | 表示装置、表示システム、表示装置の制御方法、及び、プログラム | |
Wilson et al. | Design of monocular head-mounted displays for increased indoor firefighting safety and efficiency | |
KR102305405B1 (ko) | 머리 착용형 디스플레이 장치 및 증강현실을 이용한 원격 업무지원 시스템 | |
KR20200061564A (ko) | 복합재난 사고대응 지원용 지휘통제시스템 | |
JP2007121600A (ja) | 画像情報表示装置 | |
KR102396379B1 (ko) | 센서 모듈의 탈착이 가능한 머리 착용형 디스플레이 장치 | |
KR102324129B1 (ko) | 지도 정보와 imu 센서를 이용한 내비게이션 기능을 갖는 머리 착용형 디스플레이 장치 | |
US20240346906A1 (en) | Mountable apparatus for providing user data monitoring and communication in hazardous environments | |
JPH04370207A (ja) | ディスプレイ付ヘルメット | |
KR102409880B1 (ko) | Hmd를 활용한 현장과 원격지의 협업 시스템 및 방법 | |
RU2535229C2 (ru) | Шлем с проекционной системой |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20190723 |
|
PA0201 | Request for examination | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20201027 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20210122 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20210129 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20210201 End annual number: 3 Start annual number: 1 |
|
PG1501 | Laying open of application | ||
PG1601 | Publication of registration |