KR102416446B1 - 증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 - Google Patents
증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 Download PDFInfo
- Publication number
- KR102416446B1 KR102416446B1 KR1020200123121A KR20200123121A KR102416446B1 KR 102416446 B1 KR102416446 B1 KR 102416446B1 KR 1020200123121 A KR1020200123121 A KR 1020200123121A KR 20200123121 A KR20200123121 A KR 20200123121A KR 102416446 B1 KR102416446 B1 KR 102416446B1
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- information
- driver
- augmented reality
- driving
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims description 21
- 238000011017 operating method Methods 0.000 claims abstract description 3
- 230000002265 prevention Effects 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 9
- 206010041349 Somnolence Diseases 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 7
- 238000004891 communication Methods 0.000 claims description 7
- 230000002159 abnormal effect Effects 0.000 claims description 4
- 230000004397 blinking Effects 0.000 claims description 4
- 230000001934 delay Effects 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 14
- 238000013523 data management Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000000284 resting effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000037237 body shape Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 231100000279 safety data Toxicity 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/18—Propelling the vehicle
- B60W30/18009—Propelling the vehicle related to particular drive situations
- B60W30/18163—Lane change; Overtaking manoeuvres
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/04—Traffic conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W40/09—Driving style or behaviour
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/177—Augmented reality
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
- B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0062—Adapting control system settings
- B60W2050/0075—Automatic parameter input, automatic initialising or calibrating means
- B60W2050/009—Priority selection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/06—Direction of travel
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/10—Longitudinal speed
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2555/00—Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
- B60W2555/60—Traffic rules, e.g. speed limits or right of way
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
- B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
- B60W2556/65—Data transmitted between vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2300/00—Purposes or special features of road vehicle drive control systems
- B60Y2300/18—Propelling the vehicle
- B60Y2300/18008—Propelling the vehicle related to particular drive situations
- B60Y2300/18166—Overtaking, changing lanes
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
Abstract
증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법이 개시된다. 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템은, 차량용 전방표시장치(HUD)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별하는 식별부와, 운전자 지원 시스템(ADAS, Advanced Driver Assistance System) 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)으로부터, 상기 운전자 정보 및 상기 차량 정보에 연관되는 데이터를 선별하여 획득하는 획득부, 및 상기 획득되는 데이터를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에, 상기 차량 운전자의 시야를 고려해 증강현실(AR) 기반으로 오버랩하여 표시하는 표시부를 포함한다.
Description
본 발명은 교통 정보 제공 기술에 연관되며, 차량 운전자와 연관되는 교통안전정보를 주행 화면 상에 증강현실(AR) 기반으로 시각화하여, 운전자의 운전 지원과 안전운전을 도모할 수 있는 차량용 인포테인먼트 시스템에 연관된다.
내비게이션 장치와 같은 차량용 단말기를 통한 종래의 차량용 인포테인먼트 시스템(Infortainment system)에서는, 속도 안내 또는 길 안내와 같은 제한적인 정보가 이루어지고 있어, 운전으로 인해 단말기 조작이 어려운 차량 운전자의 편리하고 안전한 운전을 지원할 수 있는 다양한 정보의 제공이 요구된다.
또한 종래에는 차량용 단말기를 통해 제공되는 정보를 차량 운전자가 확인하기 위해서는, 전방으로부터 차량용 단말기 쪽으로 시선을 돌려야 하므로 사고 위험이 높아질 수 있고, 정보의 확인에 어려움이 있었다.
따라서 운전 중인 차량 운전자에게 실질적으로 도움이 될 수 있는 다양한 정보를 선별적으로 획득하여, 이를 운전자 친화적으로 표시해 알려줄 수 있는 기술이 요구된다.
본 발명에서는 교통정보를 제공하는 차세대 지능형 교통체계(C-ITS) 뿐만 아니라, 네비게이션, 차량 통신, 주행, 주차, 충돌 경고, 졸음 방지 등 다양한 운전자 지원 정보를 제공하는 시스템(ADAS)과 연계하여, 차량 운전자에게 필요한 다양한 데이터를 획득하고, 획득한 데이터들을, 차량용 전방표시장치(HUD)를 통해 증강현실(AR) 기반으로 구현함으로써, 차량 운전자의 시야에 맞춘 정보 제공이 가능한 차량용 인포테인먼트 시스템을 제안하고자 한다.
본 발명의 실시예는 차량 운전자의 운전 상태 및 차량의 주행 상태에 근거해, 차량 운전자에게 필요할 것으로 예측되는 데이터를 결정하고, 상기 예측되는 데이터를, 다양한 운전자 지원 시스템(ADAS, Advanced Driver Assistance System) 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)으로부터 획득하여, 차량용 전방표시장치(HUD)에 의해 시각화 되는 주행 화면 상에, 차량 운전자의 시야를 고려하여, 증강현실(AR, AUGMENTED REALITY) 기반으로 표시해 알려주는 것을 목적으로 한다.
본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템은, 차량용 전방표시장치(HUD)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별하는 식별부와, 운전자 지원 시스템(ADAS, Advanced Driver Assistance System) 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)으로부터, 상기 운전자 정보 및 상기 차량 정보에 연관되는 데이터를 선별하여 획득하는 획득부, 및 상기 획득되는 데이터를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에, 상기 차량 운전자의 시야를 고려해 증강현실(AR) 기반으로 오버랩하여 표시하는 표시부를 포함할 수 있다.
또한, 본 발명의 실시예에 따른 증강현실 기반 차량용 인포테인먼트 방법은, 차량용 전방표시장치(HUD)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별하는 단계와, 운전자 지원 시스템(ADAS) 및 지능형 교통 시스템(C-ITS)으로부터, 상기 운전자 정보 및 상기 차량 정보에 연관되는 데이터를 선별하여 획득하는 단계, 및 상기 획득되는 데이터를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에, 상기 차량 운전자의 시야를 고려해 증강현실(AR) 기반으로 오버랩하여 표시하는 단계를 포함할 수 있다.
본 발명에 따르면, 다양한 운전자 지원 시스템(ADAS) 및 지능형 교통 시스템(C-ITS)과 연계하여, 차량 운전자의 운전 상태와 차량의 주행 상태에 따라, 차량 운전자에게 필요할 것으로 예측되는 데이터를 선별적으로 획득하여, 차량용 전방표시장치(HUD)에 의해 시각화 되는 주행 화면 상에 차량 운전자의 시야를 고려해 증강현실(AR) 기반으로 표시해 알려줄 수 있다.
본 발명에 따르면, 차량 운전자의 운전 상태와 차량의 주행 상태를 고려해 운전자를 지원할 수 있는 다양한 데이터를 획득해, 차량용 전방표시장치(HUD)를 통해 증강현실(AR) 기반으로 표시함으로써, 기존의 제한적인 정보를 단순 제공해 운전자를 지원하는 인포테인먼트 시스템 및 운전자 지원 시스템의 한계를 극복할 수 있다.
본 발명에 따르면, 차량의 전방을 주시하는 동안에도 운전에 도움이 되는 데이터를 손쉽게 확인할 수 있도록 지원하여, 운전자의 편리하고 안전한 운전을 지원할 수 있다.
본 발명에 따르면, 다양한 운전자 지원 시스템(ADAS) 및 지능형 교통 시스템(C-ITS)과의 네트워크 지연을 고려하여, 저 지연으로 데이터를 획득함으로써, 네트워크 상태의 변동 상황에서도 안정적인 데이터 전송을 가능하게 할 수 있다.
도 1은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템의 구성을 도시한 블록도이다.
도 2는 본 발명의 다른 실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템의 구성을 도시한 블록도이다.
도 3은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 경로 안내, 예측 속도 및 사고 발생에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 졸음 쉼터 안내에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 긴급 차량 접근을 경고하는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 도로 상황 및 동시간대 교통량을 알 수 있는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 교차로의 현재 신호에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 방법의 순서를 도시한 흐름도이다.
도 2는 본 발명의 다른 실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템의 구성을 도시한 블록도이다.
도 3은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 경로 안내, 예측 속도 및 사고 발생에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 졸음 쉼터 안내에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 긴급 차량 접근을 경고하는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 도로 상황 및 동시간대 교통량을 알 수 있는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 교차로의 현재 신호에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 방법의 순서를 도시한 흐름도이다.
이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.
실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
도 1은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템의 구성을 도시한 블록도이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템(100)은 식별부(110), 획득부(120) 및 표시부(130)를 포함하여 구성할 수 있다. 또한 실시예에 따라, 증강현실 기반 차량용 인포테인먼트 시스템(100)은 결정부(140), 통신부(150), 메모리 공간(160) 및 인증부(170)를 각각 추가하여 구성할 수 있다.
식별부(110)는 차량용 전방표시장치(HUD)(101)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별한다.
실시예에 따라, 증강현실 기반 차량용 인포테인먼트 시스템(100)은 인증부(170)를 더 포함하여 구성할 수 있다.
인증부(170)는 차량용 전방표시장치(HUD)(101)에서 실행되는 어플리케이션을 통해 구동명령이 발생되면, 차량용 전방표시장치(HUD)(101)를 통해 입력되는 아이디와 패스워드에 기초하여, 차량 운전자를 인증 처리한다.
식별부(110)는 차량 운전자가 인증 처리됨에 따라, 차량의 주행 상태와 연관된 차량 정보와, 차량 운전자의 운전 상태와 연관된 운전자 정보를 식별할 수 있다.
일례로, 식별부(110)는 차량에 구비된 GPS 수신 모듈 또는 차량 간 통신(V2V) 모듈을 통해, 상기 차량의 위치와 방향, 속도, 및 차선 변경 중 적어도 하나의 주행 상태에 관한 차량 정보를 식별할 수 있다. 상기 차량 정보는 일례로 상기 차량의 주행 도로를 판단하는데 이용될 수 있다.
또한 식별부(110)는 차량용 전방표시장치(HUD)(101)에 구비된 센서를 통해 차량 운전자의 운전 자세와 눈 깜빡임 등에 관한 운전자 정보를 식별할 수 있다. 상기 운전자 정보와 상기 차량 정보 내의 빈번한 차선 변경은, 차량 운전자의 졸음 운전을 판단하는데 이용될 수 있다.
또한 식별부(110)는 차량 운전자의 목적지와 경유지 및 약속시간 중 적어도 하나의 일정이, 차량용 전방표시장치(HUD)(101)에 등록되어 있으면, 이를 운전자 정보로서 식별할 수도 있다. 여기서 운전자 정보는 차량의 예상 경로를 판단하는데 이용될 수 있다.
획득부(120)는 운전자 지원 시스템(ADAS, Advanced Driver Assistance System)(121) 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)(122)으로부터 상기 운전자 정보와 상기차량 정보에 연관되는 데이터(ADAS 정보, C-ITS 정보)를 획득한다.
획득부(120)는 운전자 지원 시스템(ADAS, Advanced Driver Assistance System) 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)으로부터, 상기 운전자 정보 및 상기 차량 정보에 연관되는 데이터를 선별하여 획득한다.
일례로 획득부(120)는 경로 안내, 교통 상황 안내, 충돌 방지, 졸음 운전 방지, 이상 차량 경고, 주변 이륜차 안내, 긴급차량 안내 중 적어도 하나의 ADAS 정보를 제공하는 복수의 상기 운전자 지원 시스템(ADAS)(121)과 연계하여, 상기 운전자 정보와 차량 정보에 연관되는 데이터를 획득할 수 있다.
또한 획득부(120)는 교통 신호 정보, 사고 위험 정보, 주정차 금지 구역 정보 중 적어도 하나의 C-ITS 정보를 제공하는 지능형 교통 시스템(C-ITS)(122)과 연계하여, 상기 운전자 정보와 차량 정보에 연관되는 데이터를 획득할 수 있다.
즉 획득부(120)는 다양한 운전자 지원 시스템(ADAS)(121)과 상기 지능형 교통 시스템(C-ITS)(122)에서 서비스 하고 있는 대량의 정보 중에서, 차량 운전자의 운전 상태와 주행 상태에 따라 차량 운전자에게 필요할 것으로 예상되는 데이터를 선별적으로 획득할 수 있다.
일례로, 획득부(120)는 운전자 지원 시스템(ADAS)(121) 및 지능형 교통 시스템(C-ITS)(122)에 의해 제공(서비스)되는 정보를 메모리 공간(160)에 저장하고, 메모리 공간(160)으로부터, 상기 운전자 정보와 상기 차량 정보에 연관되는 상기 데이터를 추출하여 상기 획득할 수 있다.
이 경우 메모리 공간(160)은, 상기 운전자 지원 시스템(ADAS)(121)과 상기 지능형 교통 시스템(C-ITS)(122)으로부터 제공되고 있는 대량의 정보(원본)가 임시적으로 유지되는 공간일 수 있다.
또는, 메모리 공간(160)은, 상기 운전자 지원 시스템(ADAS)(121)에 의해 제공되는 ADAS 정보를 상기 운전자 정보에 대응시켜 유지하고, 상기 지능형 교통 시스템(C-ITS)(122)에 의해 제공되는 C-ITS 정보를 상기 차량 정보에 대응시켜 유지하고, 획득부(120)는 메모리 공간(160)으로부터, 상기 운전자 정보와 연관되는 ADAS 정보를 획득하되, 상기 지능형 교통 시스템이 동작함에 따라, 식별된 차량 정보에 대응하는 C-ITS 정보를 선택적으로 획득할 수도 있다.
다른 일례로, 획득부(120)는 운전자 지원 시스템(ADAS)(121) 및 지능형 교통 시스템(C-ITS)(122) 각각에 상기 운전자 정보와 상기 차량 정보에 연관되는 상기 데이터, 예를 들면, 차량 운전자의 운전 상태가 졸음운전으로 판단되면 '졸음운전 방지'에 연관되는 데이터를 요청하고, 차량이 교차로에 인접해 있으면 '인접 교차로의 현재 신호'에 연관되는 데이터를 요청하여 상기 데이터를 획득할 수도 있다.
이를 위해, 증강현실 기반 차량용 인포테인먼트 시스템(100)은 결정부(140)를 더 포함하여 구성할 수 있다.
결정부(140)는 상기 운전자 정보와 상기 차량 정보에 근거하여, 상기 차량 운전자에게 필요할 것으로 예측되는 데이터를 결정한다.
획득부(120)는 예측되는 데이터를, 운전자 지원 시스템(ADAS)(121)과 지능형 교통 시스템(C-ITS)(122)에 요청하여 획득할 수 있다.
일례로 식별부(110)에 의해 차량의 위치와 방향 및 속도 중 적어도 하나의 주행 상태에 관한 차량 정보가 식별되는 경우, 결정부(140)는 상기 차량 정보로부터, 차량 운전자에게 필요한 데이터로서 상기 차량의 '주행 도로'와 연관된 데이터를 판단할 수 있고, 획득부(120)는 운전자 지원 시스템(ADAS)(121)과 지능형 교통 시스템(C-ITS)(122)으로부터, 해당 주행 도로에 해당되는, 교통 표지판, 감시카메라의 위치와 영상, 사고발생정보, 파손 구간 및 위험 구간 중 적어도 하나의 상기 데이터를 획득할 수 있다.
다른 일례로 식별부(110)에 의해 차량 운전자의 목적지와 경유지 및 약속시간 중 적어도 하나의 일정에 관한 운전자 정보가 식별되는 경우, 결정부(140)는 상기 운전자 정보로부터, 차량 운전자에게 필요한 데이터로서 상기 차량의 '예상 경로'와 연관된 데이터를 판단할 수 있고, 이 경우 획득부(120)는 상기 예상 경로에 해당되는, 교통 표지판, 감시카메라의 위치와 영상, 사고발생정보, 파손 구간 및 위험 구간 중 적어도 하나의 상기 데이터를 획득할 수 있다.
또 다른 일례로 식별부(110)에 의해 차량 운전자의 운전 자세 또는 눈 깜빡임에 관한 운전자 정보가 식별되는 경우, 결정부(140)는 상기 운전자 정보로부터, 상기 차량 운전자의 졸음 운전 여부를 판단하고, 졸음 운전으로 판단되는 경우, 차량 운전자에게 필요한 데이터로서, '졸음운전 방지'에 연관 데이터를 결정할 수 있다. 이 경우 획득부(120)는 운전자 지원 시스템(ADAS)(121)과 지능형 교통 시스템(C-ITS)(122)으로부터, 상기 졸음 운전 방지를 위한, 상기 주행 도로에서의 휴게소 위치 또는 졸음쉼터의 위치에 관한 상기 데이터를 획득할 수 있다.
표시부(130)는 획득되는 데이터를, 차량용 전방표시장치(HUD)(101)에 의해 시각화 되는 주행 화면 상에, 증강현실(AR) 기반으로 오버랩하여 표시한다.
즉 표시부(130)는 운전자 지원 시스템(ADAS)(121)으로부터 획득되는 ADAS 데이터와, 지능형 교통 시스템(C-ITS)(122)으로부터 획득되는 C-ITS 데이터를 가공 처리해 교통안전정보를 생성하고, 생성한 교통안전정보를 상기 주행 화면 상에 증강현실(AR) 기반으로 오버랩하여 표시할 수있다.
일례로 표시부(130)는 상기 운전자 지원 시스템(ADAS)(121)과 상기 지능형 교통 시스템(C-ITS)(122)으로부터, 차량의 주행 도로와 연관된 데이터가 획득부(120)에 의해 획득되면, 획득된 데이터를 가공 처리하여, 상기 주행 도로 상의 규정, 설치물, 위험 여부를 안내하는 교통안전정보를 생성하고, 생성한 교통안전정보를, 증강현실(AR) 기반으로 상기 주행 화면 상에 오버랩해 표시할 수 있다.
다른 일례로 표시부(130)는 상기 운전자 지원 시스템(ADAS)(121)과 상기 지능형 교통 시스템(C-ITS)(122)으로부터, 차량 운전자의 졸음 운전 방지와 연관된 데이터가 획득부(120)에 의해 획득되면, 상기 데이터를 가공 처리하여, 졸음운전 경고와 휴식 권고 및 부근 휴게소/졸음쉼터 안내에 관한 교통안전정보를 생성하고, 교통안전정보를, 증강현실(AR) 기반으로 상기 주행 화면 상에 오버랩해 표시할 수 있다.
이때 식별부(110)는 차량용 전방표시장치(HUD)(101)에 구비된 센서를 통해 차량 운전자의 앉은키와 체형에 관한 운전자 정보를 식별할 수 있고, 표시부(130)는, 상기 운전자 정보로부터 판단되는 상기 차량 운전자의 시야를 고려하여, 상기 주행 화면 상에, 상기 교통안전정보를 오버랩 하여 표시할 수 있다.
이처럼 본 발명에 의하면 차량 운전자의 시야 내에 교통안전정보가 AR로 표시되도록 함으로써, 운전을 위해 전방을 계속 주시할 수 있도록 지원할 수 있다.
또한 표시부(130)는 상기 차량의 주행과 상기 차량 운전자의 움직임에 따라, 상기 차량 운전자의 시야가 전환될 경우, 그에 연동하여 상기 교통안전정보를 표시하는 위치를 변경할 수 있다.
이처럼 본 발명에 의하면 운전 중에 차량 운전자가 좌우로 움직여 확인해야 할 필요가 있을 경우에도, 상기 교통안전정보를 자신의 시야 내에서 확인할 수 있도록 지원할 수 있다.
표시부(130)에서 교통안전정보를 대략 실시간에 가깝게 표시하기 위해서는, 획득부(120)에서 상기 운전자 정보와 상기 차량 정보에 연관되는 상기 데이터를 각각의 시스템에서 획득해 올 때의 네트워크 지연을 최소화할 필요가 있다. 데이터 획득 시의 네트워크 지연을 최소화하기 위해, 증강현실 기반 차량용 인포테인먼트 시스템(100)은 통신부(150)를 더 포함하여 구성할 수 있다.
통신부(150)는 상기 운전자 지원 시스템(ADAS)(121)과의 네트워크 지연 및 상기 지능형 교통 시스템(C-ITS)(122)과의 네트워크 지연을 체크하는 기능을 한다.
획득부(120)는 상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS) 중에서, 네트워크 지연이 상대적으로 더 적은 시스템으로, 상기 예측되는 데이터를 먼저 요청하여 획득한다.
즉 획득부(120)는 각 시스템과의 네트워크 지연을 고려하여, 전체적인 네트워크 지연이 줄어들도록, 각 시스템에 데이터를 요청하는 순서를 조정할 수 있다.
일례로, 획득부(120)는 운전자 지원 시스템(ADAS)(121)과의 네트워크 지연이, 지능형 교통 시스템(C-ITS)(122)과의 네트워크 지연 보다 클 경우, 네트워크 지연이 상대적으로 더 적은 지능형 교통 시스템(C-ITS)(122)으로부터의 데이터를, 운전자 지원 시스템(ADAS)(121)으로부터의 데이터 보다 먼저 요청하여 획득하고, 상기 네트워크 지연 정도를 고려해 운전자 지원 시스템(ADAS)(121)으로부터의 데이터를 이어서 요청할 수 있다.
다시 말해 획득부(120)는 네트워크 지연이 상대적으로 짧은 시스템으로부터의 데이터 획득을 먼저 처리함으로써, 해당 데이터를 가공한 제1 교통안전정보가 표시부(130)에서 표시되도록 하는 동안, 네트워크 지연이 더 긴 시스템으로부터 상기 데이터를 획득할 수 있고, 이에 따라 표시부(130)에서는 해당 데이터를 가공한 제2 교통안전정보를 상기 제1 교통안전정보에 이어서 표시할 수 있게 되므로, 복수의 시스템으로부터 데이터를 선별적으로 획득하는 경우에 있어서도, 전체적인 네트워크 지연을 낮추면서도 데이터 표시의 실시간성을 확보할 수 있다.
실시예에 따라 획득부(120)는 상기 예측되는 데이터에 대한 사이즈 및 포맷을 고려해 우선순위를 정하고, 상기 우선순위에 따른 상기 예측되는 데이터를 상기 네트워크 지연이 크더라도 먼저 요청하여 획득할 수도 있다.
예를 들면, 획득부(120)는 ADAS 시스템(121)과의 네트워크 지연이 C-ITS 시스템(122)과의 네트워크 지연 보다 크더라도, 우선순위가 더 높은 데이터, 예를 들면 '충돌 방지'에 연관되는 데이터를 ADAS 시스템(121)으로 먼저 요청해 획득함으로써, 차량 운전자의 안전운전을 우선적으로 지원할 수 있다.
이처럼 본 발명에 의하면, 각 시스템과의 네트워크 상태를 체크하여 지연 정도를 판단하고, 네트워크 지연 상태를 고려하여 저 지연으로 데이터를 획득할 수 있도록 요청하는 데이터의 우선순위, 사이즈, 형식 등을 결정할 수 있다.
이하 도 3 내지 도 7을 참조하여, 표시부(130)에서 교통안전정보를 증강현실(AR) 기반으로 시각화 하는 과정을 설명한다.
도 3은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 경로 안내, 예측 속도 및 사고 발생에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 3을 참조하면, 표시부(130)는 경로 안내, 예측 속도 및 사고 발생을 알리는 교통안전정보(310)를 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 오버랩 시켜서 표시할 수 있다.
일례로 표시부(130)는 현재 위치에서 근접한 교차로까지의 거리와, 실시간 속도, 딥러닝 기반으로 예측되는 속도(예, 5분 후 예측 속도, 15분 후 예측 속도, 30분 후 예측 속도 등), 사고 발생 정보, C-ITS 기반 교통 안전 데이터, 및 C-ITS 기반 도로 관리 데이터와 같은 교통안전정보(310)를 증강현실(AR) 기반으로 시각화 할 수 있다.
도 4는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 졸음 쉼터 안내에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 긴급 차량 접근을 경고하는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 4 내지 도 5를 참조하면, 표시부(130)는 졸음 쉼터를 안내하는 교통안전정보(410) 및 긴급 차량 접근을 경고하는 교통안전정보(510)를, 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 오버랩 시켜서 표시함으로써, C-ITS 시스템(121) 기반의 안전운전 데이터를 시각화할 수 있다.
도 6은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 도로 상황 및 동시간대 교통량을 알 수 있는 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 6을 참조하면, 표시부(130)는 주변 도로 상황을 알려주는 내비게이션 지도(610) 및 CCTV 영상(620)에 관한 교통안전정보를, 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 오버랩 시켜서 표시할 수 있다.
여기서 내비게이션 지도(610)는 차량용 전방표시장치(HUD)(101)에 보여지는 주행지점을 담은 지도(map)일 수 있고, CCTV 영상(620)는 교통관리센터에서 촬영한 주변 도로의 실시간 스트리밍 영상일 수 있다. 표시부(130)는 음성 명령을 통한 차량 운전자와의 상호작용(interaction)을 통해 CCTV 영상(620) 내 특정 부분을 확대하거나 축소시켜 시각화할 수도 있다.
또한 표시부(130)는 주변 교통량을 알려주는 과거 속도 변화 추이에 관한 교통안전정보(630)를 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 오버랩 시켜서 표시할 수도 있다.
예를 들어 표시부(130)는 현재 위치한 도로의 과거 속도 데이터를 선 그래프(line chart)와 같은 차트를 이용해 표시함으로써, 차량 운전자로 하여금 과거 속도 변화 추이를 통해 동시간대 교통량을 파악할 수 있도록 지원할 수 있다.
이때 표시부(130)는 네트워크 상태에 따라 CCTV 영상(620)의 화질을 유동적으로 조절하고, 다량의 데이터의 경우 네트워크 상태에 따라 분할된 데이터를 수신 후 취합(aggregation)하는 방식을 채용하여, 로딩 시간을 최소화할 수 있다.
도 7은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템에서, 주변 교차로의 현재 신호에 관한 교통안전정보를 증강현실 기반으로 시각화 하는 일례를 도시한 도면이다.
도 7을 참조하면, 표시부(130)는 주변 교차로의 현재 신호를 알리는 교통안전정보(710)를, 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 오버랩 시켜서 표시할 수 있다.
표시부(130)는 획득되는 주변 교차로의 신호 데이터를 날짜 별, 시간 별로 구분하여 차량 운전자에게 교통안전정보(710)를 시각화하는 시점에 맞는 현재 신호를 표시할 수 있다.
이와 같이 본 발명의 일실시예에 따르면, 다양한 운전자 지원 시스템(ADAS) 및 지능형 교통 시스템(C-ITS)에 의해 서비스 되는 정보 중, 차량 운전자와 관련되는 정보를 선별적으로 획득해 가공 처리하여, 차량용 전방표시장치(HUD)(101)의 주행 화면 상에 증강현실(AR) 기반으로 표시해 알려줄 수 있다.
도 2는 본 발명의 다른 실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템의 구성을 도시한 블록도이다.
도 2를 참조하면, 본 발명의 다른 실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템(200)은 차량용 전방표시장치(210) 및 데이터 관리 서버(220)를 포함하여 구성할 수 있다.
차량용 전방표시장치(210)는 증강현실(AR) 환경에서 데이터를 시각화할 수 있는 디바이스로서, HUD 디바이스 또는 AR glass 등을 예시할 수 있다.
일례로 차량용 전방표시장치(210)는 컨텍스트 추출부(211), 네트워크부(212) 및 디스플레이부(213)를 포함하여 구성할 수 있다.
컨텍스트 추출부(211)는 차량 정보와 운전자 정보를 추출하는 기능을 한다.
컨텍스트 추출부(211)는 상기 차량 정보와 상기 운전자 정보를 바탕으로 차량 운전자에게 필요한 데이터를 결정할 수 있다.
상기 차량 정보로는 차량의 위치, 방향, 속도 등의 정보가 포함되고, 상기 운전자 정보로는 운전자의 자세, 운전자의 체형 등의 물리적 정보와 운전자의 일정, 목적지(운전자의 어플리케이션과 연동) 등의 개인정보가 포함될 수 있다.
네트워크부(212)는 네트워크 상태를 체크하여 지연 정도를 판단하고, 네트워크 지연 상태를 고려하여 저지연으로 데이터를 전송 받을 수 있도록 데이터의 우선순위, 사이즈, 형식 등을 결정하고, 데이터 관리 서버(220) 혹은 ADAS 시스템(222)와 C-ITS 시스템(223)으로 상기 차량 정보 및 운전자 정보와 연관되는 적절한 데이터를 요청한다.
네트워크부(212)는 상기 요청에 따라 데이터 관리 서버(220)로부터 획득되는 데이터를 취합하여, 디스플레이부(213)로 전달한다.
디스플레이부(213)는 데이터 관리 서버(220)로부터 획득되는 데이터를 가공 처리해 운전자에게 필요한 교통안전정보를, 차량용 전방표시장치(210)의 주행 화면 상에 증강현실 기반으로 시각화 한다.
상기 교통안전정보는, 지도(Map), CCTV 영상, 예측 정보, 속도, 사고 발생 정보 및 지능형 교통 시스템(C-ITS)에 의해 획득되는 C-ITS 정보 중 적어도 하나일 수 있다.
예를 들어 디스플레이부(213)는 '교통 안전'과 연관되는 교통안전정보로서, 안전운전가이드, 도로위험가이드, 화물 및 위험물 차량, 장애인 탑승 차량 정차 정보('부르미' 차량 또는 행선 안내기), 차량 긴급상황 경고, 사고위험정보, 긴급차량 접근 경고 및 우선 신호, 도로위험구간 정보제공, 졸음운전 차량 감지, 및 돌발상황 검지 데이터를, 주행 화면 상에 AR로 시각화할 수 있다.
또한 디스플레이부(213)는 '도로 관리'와 연관되는 교통안전정보로서, 도로작업구간 경고, 실시간 불법 주정차 정보제공(주차단속 알림 및 차량 이동 유도), 최적 신호 연동 속도 제공, 재난 정보 제공, 도로 포장 파손 탐지를 주행 화면 상에 AR로 시각화할 수 있다.
또한 디스플레이부(213)는 '졸음운전'과 연관되는 교통안전정보로서, 졸음운전 경고(ADAS), 졸음운전 시작 후 정보 생성(차선이탈, 잦은 가감속 검지), 졸음 쉼터에 대한 정보, 졸음운전 센서(운전자 '눈 깜빡임 패턴' 검지), 이륜차에 대한 정보, 차량운전자에게 이륜차 위치 공유, 이상 차량에 대한 정보, 서행 차량, 임의 정차, 역 주행 등 이상 차량에 대한 정보, 사고 위험 정보, 특정 도로/운전 행태/기상 조건 별 실시간 사고 위험도 정보, 도로파손 감지, 도로위험구간 정보, 교통신호 정보, 및 위치 기반 실시간 현시 정보를 주행 화면 상에 AR로 시각화할 수 있다.
데이터 관리 서버(220)는 ADAS 시스템(222) 및 C-ITS 시스템(223)에서 제공되는 정보를 데이터베이스(221)에 저장하고, 차량용 전방표시장치(210)로부터 요청되는 데이터를, 데이터베이스(221)로부터 추출하여, 네트워크를 통해 차량용 전방표시장치(210)로 전달한다.
데이터 관리 서버(220)는 ADAS 시스템(222) 및 C-ITS 시스템(223)에서 제공되는, 속도 예측 데이터, CCTV, 사고 정보, ADAS 이벤트 정보, C-ITS 정보를 데이터베이스(221)에 저장할 수 있다. 여기서 C-ITS 정보는 교통 신호 정보, 사고 위험 정보, 주정차 금지 구역 정보 등을 예시할 수 있다.
데이터 관리 서버(220)는 다양한 운전자 지원을 위한 ADAS 시스템(222)과 연계하여 차량 운전자에게 필요한 데이터를 데이터베이스(221)로부터 추출하여, 네트워크를 통해 차량용 전방표시장치(210)로 전송할 수 있다.
이처럼 본 발명에 의하면 차량 정보와 운전자 정보를 바탕으로 차량용 전방표시장치(210)에 운전자가 필요로 하는 다양한 교통안전정보를 AR 기반으로 표출해줄 수 있다.
이에 따라 본 발명에 의하면, 기존 인포테인먼트 시스템 및 운전자 지원 시스템의 한계를 극복할 수 있고, 운전자 및 차량의 컨텍스트를 추출하여 운전자를 지원 할 수 있는 다양한 데이터를 시각화할 수 있으며, 네트워크 상태 변동 상황에서도 안정적인 데이터 전송이 가능해진다.
도 8은 본 발명의 일실시예에 따른 증강현실 기반 차량용 인포테인먼트 방법의 순서를 도시한 흐름도이다.
본 실시예에 따른 증강현실 기반 차량용 인포테인먼트 시스템 운용 방법은, 상술한 증강현실 기반 차량용 인포테인먼트 시스템(100)에 의해 수행될 수 있다.
도 8을 참조하면, 단계(810)에서 차량용 인포테인먼트 시스템(100)은 차량용 전방표시장치(HUD)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별한다.
단계(820)에서 차량용 인포테인먼트 시스템(100)은 상기 운전자 정보와 상기 차량 정보에 근거하여, 차량 운전자에게 필요할 것으로 예측되는 데이터를 결정한다.
예를 들면, 차량용 인포테인먼트 시스템(100)은 차량 운전자의 운전 상태와 차량의 주행 상태로부터 졸음운전으로 판단되면, '졸음운전 방지'에 연관되는 데이터를 차량 운전자에게 필요할 것으로 예측되는 데이터로서 결정할 수 있다.
단계(830)에서 차량용 인포테인먼트 시스템(100)은 상기 예측되는 데이터를, 상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS)에 요청하여 획득한다.
예를 들면 차량용 인포테인먼트 시스템(100)은 주행 도로에서 가까운 졸음쉼터나 휴게소의 위치를 상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS)에 요청하여 획득할 수 있다.
단계(840, 850)에서 차량용 인포테인먼트 시스템(100)은 획득되는 데이터를 가공 처리해 교통안전정보 생성하고, 차량용 전방표시장치(HUD)에 의해 시각화 되는 주행 화면 상에, 상기 교통안전정보를 증강현실(AR) 기반으로 오버랩 하여 표시한다.
예를 들어 차량용 인포테인먼트 시스템(100)은 상기 데이터를 가공 처리하여, 졸음운전 경고와, 휴식 권고, 및 휴게소/졸음쉼터 안내에 관한 교통안전정보(410)를 생성하고, 졸음 쉼터를 안내하는 교통안전정보(410)를 도 4와 같이 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에 증강현실(AR) 기반으로 표시할 수 있다.
이때 차량용 인포테인먼트 시스템(100)은 상기 운전자 정보로부터 판단되는 차량 운전자의 시야를 고려하여, 상기 교통안전정보를 주행 화면 상에 오버랩 하여 표시함으로써, 차량 운전자의 시야 내에서 교통안전정보가 AR로 표시되도록 하여, 운전을 위해 전방을 계속 주시할 수 있도록 지원할 수 있다.
또한 차량용 인포테인먼트 시스템(100)은 상기 차량의 주행과 상기 차량 운전자의 움직임에 따라, 상기 차량 운전자의 시야가 전환될 경우, 그에 따라 상기 교통안전정보를 표시하는 위치를 변경함으로써, 차량 운전자가 운전 중에 좌우로 움직여 확인해야 할 필요가 있을 경우에도, 상기 교통안전정보를 자신의 시야 내에서 확인할 수 있도록 지원할 수 있다.
이와 같이, 본 발명의 일실시예에 따르면, 다양한 운전자 지원 시스템(ADAS) 및 지능형 교통 시스템(C-ITS)과 연계하여, 차량 운전자에게 실질적으로 도움이 될 수 있는 다양한 정보를 획득하고, 이를 차량 운전자의 시야와 네트워크 지연 상태를 고려해 차량용 전방표시장치(HUD)의 주행 화면 상에 증강현실(AR) 기반으로 표시함으로써, 운전자의 편리하고 안전한 운전을 지원할 수 있고, 기존의 인포테인먼트 시스템 및 운전자 지원 시스템의 한계를 극복할 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.
100: 증강현실 기반 차량용 인포테인먼트 시스템
110: 식별부
120: 획득부
130: 표시부
140: 결정부
150: 통신부
160: 메모리 공간
170: 인증부
101: 차량용 전방표시장치(HUD)
121: ADAS 시스템
122: C-ITS 시스템
110: 식별부
120: 획득부
130: 표시부
140: 결정부
150: 통신부
160: 메모리 공간
170: 인증부
101: 차량용 전방표시장치(HUD)
121: ADAS 시스템
122: C-ITS 시스템
Claims (15)
- 차량용 전방표시장치(HUD, Head Up Display)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별하는 식별부;
상기 운전자 정보와 상기 차량 정보에 근거하여, 상기 차량 운전자에게 필요할 것으로 예측되는 데이터를 결정하는 결정부;
운전자 지원 시스템(ADAS, Advanced Driver Assistance System)과의 네트워크 지연, 및 지능형 교통 시스템(C-ITS, Cooperative-Intelligent Transport Systems)과의 네트워크 지연을 체크하는 통신부;
상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS) 중, 네트워크 지연이 상대적으로 더 적은 제1 시스템으로, 상기 예측되는 데이터를 먼저 요청하여 획득하는 획득부; 및
상기 획득되는 데이터를 가공 처리하여 생성한 제1 교통안전정보를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에, 상기 차량 운전자의 시야를 고려해 증강현실(AR, Augmented Virtuality) 기반으로 오버랩하여 표시하는 표시부
를 포함하고,
상기 획득부는,
상기 표시부에 의해 상기 제1 교통안전정보가 상기 주행 화면 상에 표시되는 동안에, 상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS) 중, 네트워크 지연이 상대적으로 더 큰 제2 시스템으로, 상기 예측되는 데이터를 이어서 요청하여 획득하고,
상기 표시부는,
상기 획득되는 데이터를 가공 처리하여 생성한 제2 교통안전정보를, 상기 제1 교통안전정보에 이어서 상기 주행 화면 상에 증강현실(AR) 기반으로 표시하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제1항에 있어서,
상기 운전자 지원 시스템(ADAS)에 의해 제공되는 ADAS 정보를 상기 운전자 정보에 대응시켜 유지하고, 상기 지능형 교통 시스템(C-ITS)에 의해 제공되는 C-ITS 정보를 상기 차량 정보에 대응시켜 유지하는 메모리 공간
을 더 포함하고,
상기 획득부는,
상기 메모리 공간으로부터, 상기 운전자 정보와 연관되는 ADAS 정보를 획득하되, 상기 지능형 교통 시스템이 동작함에 따라, 식별된 차량 정보에 대응하는 C-ITS 정보를 선택적으로 획득하는
증강현실 기반 차량용 인포테인먼트 시스템. - 삭제
- 삭제
- 제1항에 있어서,
상기 획득부는,
상기 예측되는 데이터에 대한 사이즈 및 포맷을 고려해 우선순위를 정하고,
상기 우선순위에 따른 상기 예측되는 데이터를 상기 네트워크 지연이 크더라도 먼저 요청하여 획득하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제1항에 있어서,
상기 증강현실 기반 차량용 인포테인먼트 시스템은,
상기 식별부에 의해, 차량에 구비된 GPS 수신 모듈 또는 차량 간 통신(V2V, Vehicle-to-Vehicle) 모듈을 통해 식별되는 상기 차량의 위치와 방향 및 속도 중 적어도 하나의 주행 상태에 관한 상기 차량 정보로부터, 상기 차량의 주행 도로를 판단하는 결정부
를 더 포함하고,
상기 획득부는,
상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS)으로부터, 상기 주행 도로에 해당되는, 교통 표지판, 감시카메라의 위치와 영상, 사고발생정보, 파손 구간 및 위험 구간 중 적어도 하나의 상기 데이터를 획득하고,
상기 표시부는,
상기 데이터를 가공 처리하여, 상기 주행 도로 상의 규정, 설치물, 위험 여부를 안내하는 교통안전정보를 생성하고, 생성한 상기 교통안전정보를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 상기 주행 화면 상에 증강현실(AR) 기반으로 표시하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제6항에 있어서,
상기 차량 운전자의 목적지와 경유지 및 약속시간 중 적어도 하나의 일정에 관한 상기 운전자 정보가 상기 차량용 전방표시장치(HUD)에 등록되어 있으면,
상기 결정부는,
상기 식별부에 의해 식별되는 상기 운전자 정보로부터, 상기 차량의 예상 경로를 판단하고,
상기 획득부는,
상기 예상 경로에 해당되는, 교통 표지판, 감시카메라의 위치와 영상, 사고발생정보, 파손 구간 및 위험 구간 중 적어도 하나의 상기 데이터를 더 획득하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제6항에 있어서,
상기 차량 운전자의 앉은키와 체형에 관한 상기 운전자 정보가, 상기 차량용 전방표시장치(HUD)에 구비된 센서를 통해 식별되는 경우,
상기 표시부는,
상기 운전자 정보로부터 판단되는 상기 차량 운전자의 시야를 고려하여, 상기 주행 화면 상에, 상기 교통안전정보를 오버랩 하여 표시하고,
상기 차량의 주행과 상기 차량 운전자의 움직임에 따라, 상기 차량 운전자의 시야가 전환됨에 연동하여, 상기 교통안전정보를 표시하는 위치를 변경하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제6항에 있어서,
상기 결정부는,
상기 식별부에 의해, 상기 차량용 전방표시장치(HUD)에 구비된 센서를 통해 식별되는 상기 차량 운전자의 운전 자세와 눈 깜빡임에 관한 상기 운전자 정보 및 상기 차량의 차선 변경에 관한 상기 차량 정보로부터, 상기 차량 운전자의 졸음 운전 여부를 판단하고,
졸음 운전으로 판단되는 경우,
상기 획득부는,
상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS)으로부터, 졸음 운전 방지를 위한, 상기 주행 도로에서의 휴게소 위치 또는 졸음쉼터의 위치에 관한 상기 데이터를 획득하고,
상기 표시부는,
상기 데이터를 가공 처리하여, 졸음운전 경고와, 휴식 권고, 및 휴게소/졸음쉼터 안내에 관한 교통안전정보를 생성하고, 생성한 상기 교통안전정보를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 상기 주행 화면 상에 증강현실(AR) 기반으로 표시하는
증강현실 기반 차량용 인포테인먼트 시스템. - 제1항에 있어서,
상기 표시부는,
교통 신호 정보, 사고 위험 정보, 주정차 금지 구역 정보 중 적어도 하나의 C-ITS 정보를 제공하는 상기 지능형 교통 시스템(C-ITS)과 연계하여 획득되는 상기 차량 정보에 연관되는 데이터를, 상기 차량용 전방표시장치(HUD)의 주행 화면 상에 증강현실(AR) 기반으로 표시하는 동안,
경로 안내, 교통 상황 안내, 충돌 방지, 졸음 운전 방지, 이상 차량 경고, 주변 이륜차 안내 및 긴급차량 안내 중 적어도 하나의 ADAS 정보를 제공하는 복수의 상기 운전자 지원 시스템(ADAS)과 연계하여 더 획득되는 상기 운전자 정보에 연관되는 데이터를, 상기 주행 화면 상에 증강현실(AR) 기반으로 표시하는
증강현실 기반 차량용 인포테인먼트 시스템. - 차량용 전방표시장치(HUD)를 통해, 차량 운전자의 운전 상태에 관한 운전자 정보 및 차량의 주행 상태에 관한 차량 정보를 식별하는 단계;
상기 운전자 정보와 상기 차량 정보에 근거하여, 상기 차량 운전자에게 필요할 것으로 예측되는 데이터를 결정하는 단계;
운전자 지원 시스템(ADAS)과의 네트워크 지연, 및 지능형 교통 시스템(C-ITS)과의 네트워크 지연을 체크하는 단계;
상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS) 중, 네트워크 지연이 상대적으로 더 적은 제1 시스템으로, 상기 예측되는 데이터를 먼저 요청하여 획득하는 단계;
상기 획득되는 데이터를 가공 처리하여 생성한 제1 교통안전정보를, 상기 차량용 전방표시장치(HUD)를 통해 시각화 되는 주행 화면 상에, 상기 차량 운전자의 시야를 고려해 증강현실(AR) 기반으로 오버랩하여 표시하는 단계;
상기 제1 교통안전정보가 상기 주행 화면 상에 표시되는 동안에, 상기 운전자 지원 시스템(ADAS)과 상기 지능형 교통 시스템(C-ITS) 중, 네트워크 지연이 상대적으로 더 큰 제2 시스템으로, 상기 예측되는 데이터를 이어서 요청하여 획득하는 단계; 및
상기 획득되는 데이터를 가공 처리하여 생성한 제2 교통안전정보를, 상기 제1 교통안전정보에 이어서 상기 주행 화면 상에 증강현실(AR) 기반으로 표시하는 단계
를 포함하는 증강현실 기반 차량용 인포테인먼트 운용 방법. - 삭제
- 삭제
- 제11항에 있어서,
상기 예측되는 데이터에 대한 사이즈 및 포맷을 고려해 우선순위를 정하는 단계; 및
상기 우선순위에 따른 상기 예측되는 데이터를 상기 네트워크 지연이 크더라도 먼저 요청하여 획득하는 단계
를 더 포함하는 증강현실 기반 차량용 인포테인먼트 운용 방법. - 제11항 또는 제14항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록매체.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200123121A KR102416446B1 (ko) | 2020-09-23 | 2020-09-23 | 증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200123121A KR102416446B1 (ko) | 2020-09-23 | 2020-09-23 | 증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220040569A KR20220040569A (ko) | 2022-03-31 |
KR102416446B1 true KR102416446B1 (ko) | 2022-07-06 |
Family
ID=80934790
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200123121A KR102416446B1 (ko) | 2020-09-23 | 2020-09-23 | 증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102416446B1 (ko) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024025016A1 (ko) * | 2022-07-29 | 2024-02-01 | 엘지전자 주식회사 | 차량의 ar 사이니지 디스플레이 장치 및 그것의 동작방법 |
WO2024025018A1 (ko) * | 2022-07-29 | 2024-02-01 | 엘지전자 주식회사 | 차량의 ar 사이니지 디스플레이 장치 및 그것의 동작방법 |
WO2024034966A1 (ko) * | 2022-08-08 | 2024-02-15 | 엘지전자 주식회사 | 무선 통신 시스템에서 신호를 송수신 하는 방법 및 이를 위한 장치 |
WO2024123043A1 (ko) * | 2022-12-05 | 2024-06-13 | 삼성전자 주식회사 | 생체 정보 제공 방법 및 이를 지원하는 전자 장치 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101916435B1 (ko) * | 2017-01-10 | 2018-11-07 | 엘지전자 주식회사 | 자율 주행 차량 및 자율 주행 차량의 동작 방법 |
KR101976106B1 (ko) * | 2017-08-11 | 2019-05-07 | 주식회사 에이디테크 | 정보제공을 위한 차량용 통합 헤드업디스플레이장치 |
KR20190064819A (ko) * | 2017-12-01 | 2019-06-11 | 현대자동차주식회사 | V2i 통신을 제어하는 차량, 인프라 및 방법 |
KR20200071840A (ko) * | 2018-12-03 | 2020-06-22 | 현대자동차주식회사 | 자율주행차량을 지원하는 시스템 및 방법 |
KR20190091419A (ko) * | 2019-07-17 | 2019-08-06 | 엘지전자 주식회사 | 자율주행 차량의 제어방법 및 이를 위한 제어장치 |
-
2020
- 2020-09-23 KR KR1020200123121A patent/KR102416446B1/ko active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR20220040569A (ko) | 2022-03-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102416446B1 (ko) | 증강현실 기반 차량용 인포테인먼트 시스템 및 차량용 인포테인먼트 시스템 운용 방법 | |
CN109791054B (zh) | 信息输出控制装置及信息输出控制方法 | |
JP6493282B2 (ja) | サーバー及び情報提供装置 | |
EP2133851B1 (en) | Safe driving assisting device | |
US10410423B2 (en) | Display control device for controlling stereoscopic display of superimposed display object, display system, display control method and computer readable medium | |
WO2016186039A1 (ja) | 自動車周辺情報表示システム | |
US9639990B2 (en) | Display control apparatus, computer-implemented method, storage medium, and projection apparatus | |
JP7187242B2 (ja) | 情報処理方法、及び、情報処理システム | |
US11003925B2 (en) | Event prediction system, event prediction method, program, and recording medium having same recorded therein | |
US11567509B2 (en) | Control system, control method, and non-transitory storage medium | |
US20200168080A1 (en) | Communication device, control method thereof and communication system including the same | |
WO2016091306A1 (en) | Apparatus and associated method for providing u-turn guidance | |
JP6520974B2 (ja) | 運転切り替え判定装置、及び運転切り替え判定のためのプログラム | |
US20230166754A1 (en) | Vehicle congestion determination device and vehicle display control device | |
CN114093186A (zh) | 车辆预警信息提示系统、方法及存储介质 | |
JP2022041244A (ja) | 車載表示装置、方法およびプログラム | |
KR20210020463A (ko) | 블랙박스 영상을 이용하여 교통 법규 위반 차량을 자동으로 신고하는 장치 및 방법 | |
WO2018163266A1 (ja) | 表示制御装置および表示制御方法 | |
US20230356746A1 (en) | Presentation control device and non-transitory computer readable medium | |
WO2022113772A1 (ja) | 情報処理装置、情報処理方法、及び、情報処理システム | |
KR101816635B1 (ko) | 차량의 운전 보조 시스템 및 서비스 방법 | |
KR101744718B1 (ko) | 차량용 표시 시스템 및 그 제어방법 | |
CN114207691B (zh) | 车辆驾驶辅助系统、站点侧驾驶辅助装置和车载驾驶辅助装置 | |
WO2017141375A1 (ja) | 危険予測装置、移動端末及び危険予測方法 | |
JP7185251B2 (ja) | 運転用情報処理装置および運転用情報処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |