[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR20170036428A - 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치 - Google Patents

웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치 Download PDF

Info

Publication number
KR20170036428A
KR20170036428A KR1020150135573A KR20150135573A KR20170036428A KR 20170036428 A KR20170036428 A KR 20170036428A KR 1020150135573 A KR1020150135573 A KR 1020150135573A KR 20150135573 A KR20150135573 A KR 20150135573A KR 20170036428 A KR20170036428 A KR 20170036428A
Authority
KR
South Korea
Prior art keywords
driver
monitoring
wearable device
vehicle
monitoring devices
Prior art date
Application number
KR1020150135573A
Other languages
English (en)
Inventor
최창목
고병훈
이탁형
김상준
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150135573A priority Critical patent/KR20170036428A/ko
Priority to US15/188,074 priority patent/US20170090475A1/en
Publication of KR20170036428A publication Critical patent/KR20170036428A/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0055—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements
    • G05D1/0061—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/002—Monitoring the patient using a local or closed circuit, e.g. in a room or building
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14532—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring glucose, e.g. by tissue impedance measurement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A61B5/14552—Details of sensors specially adapted therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/389—Electromyography [EMG]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00—Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20—Workers
    • A61B2503/22—Motor vehicles operators, e.g. drivers, pilots, captains
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021—Measuring pressure in heart or blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02444—Details of sensor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053—Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531—Measuring skin impedance
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053—Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531—Measuring skin impedance
    • A61B5/0533—Measuring galvanic skin response
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Psychology (AREA)
  • Psychiatry (AREA)
  • Automation & Control Theory (AREA)
  • Educational Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Social Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pulmonology (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Dentistry (AREA)
  • Emergency Medicine (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Neurology (AREA)

Abstract

운전자가 착용한 웨어러블 디바이스로부터 수신한 운전자의 움직임에 대한 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들의 구동 여부를 제어하고, 제어에 의해 구동된 모니터링 디바이스들로부터 수집된 정보를 이용하여 운전자가 운전 가능한 상태인지 여부를 판단하는 운전자 모니터링 방법 및 장치를 제공할 수 있다.

Description

웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치{DRIVER MONITORING METHOD AND DRIVER MONITORING APPARATUS USING WEARABLE DEVICE}
아래의 실시예들은 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치에 관한 것이다.
자동차 사고로 사망하는 인구가 해마다 늘어나고 있다. 이 중 1/4은 운전자 부주의 또는 졸음 운전 때문인 것으로 파악되고 있다. 또한, 고령화로 인해 노인 운전자의 수 또한 증가하고 있으며, 운전 중 쇼크 발생 등과 같은 건강 이상으로 인한 사고 또한 증가하고 있다. 운전 중인 운전자가 졸고 있거나, 건강 상태에 이상이 발생한 경우에 이를 되도록 빠른 시간에 파악하여 경고함으로써 자동차 사고를 미연에 방지할 수 있다.
운전 중인 운전자의 상태를 감지하기 위해 다양한 센서들이 이용될 수 있으나, 이러한 센서들은 대부분 전력 소비가 많은 고전력 디바이스에 해당한다.
일 측에 따르면, 운전자 모니터링 방법은 운전자가 착용한 웨어러블 디바이스(wearable device)로부터, 상기 운전자의 움직임에 대한 감지 결과를 수신하는 단계; 상기 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들- 상기 모니터링 디바이스들은 상기 운전자의 움직임을 모니터링 함- 의 구동 여부를 제어하는 단계; 상기 제어에 의해 구동된 모니터링 디바이스들로부터 정보를 수집하는 단계; 및 상기 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계를 포함한다.
상기 웨어러블 디바이스는 생체 신호 센서, 모션 센서, 가속도계 및 자이로 센서 중 적어도 하나를 포함하고, 상기 운전자의 움직임은 상기 모션 센서, 상기 가속도계 및 상기 자이로 센서 중 적어도 하나에 의해 감지될 수 있다.
상기 웨어러블 디바이스는 일정 시간 동안에 상기 운전자의 움직임이 감지되지 않는 경우에 상기 운전자의 움직임이 없음을 나타내는 메시지를 생성할 수 있다.
상기 웨어러블 디바이스는 상기 운전자의 움직임이 없음을 나타내는 메시지를 생성한 후, 상기 운전자의 생체 신호를 측정하고, 상기 측정된 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지를 판단할 수 있다.
상기 웨어러블 디바이스는 상기 운전자의 건강에 이상이 발생했다고 판단된 경우, 상기 운전자의 건강에 이상이 발생했음을 알리는 메시지를 생성할 수 있다.
상기 운전자 모니터링 방법은 상기 웨어러블 디바이스로부터 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 웨어러블 디바이스가 상기 운전자의 생체 신호를 측정하도록 제어하는 단계; 상기 웨어러블 디바이스로부터 상기 운전자의 생체 신호를 수신하는 단계; 및 상기 운전자의 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지 여부를 판단하는 단계를 더 포함할 수 있다.
상기 감지 결과를 수신하는 단계는 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하는 단계를 포함할 수 있다.
상기 구동 여부를 제어하는 단계는 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 모니터링 디바이스들의 동작 모드를 활성 모드(active mode)로 설정하는 단계를 포함할 수 있다.
상기 구동 여부를 제어하는 단계는 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하지 않은 경우, 상기 모니터링 디바이스들의 동작 모드를 슬립 모드(sleep mode)로 설정하는 단계를 포함할 수 있다.
상기 운전 가능한 상태인지 여부를 판단하는 단계는 상기 모니터링 디바이스들에서 수집된 정보 및 상기 웨어러블 디바이스에서 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계를 포함할 수 있다.
상기 운전 가능한 상태인지 여부를 판단하는 단계는 상기 차량의 운행 모드를 자율 운행 모드에서 수동 운전 모드로의 전환하는 경우에 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계를 포함할 수 있다.
상기 운전 가능한 상태인지 여부를 판단하는 단계는 상기 수집된 정보를 이용하여 상기 운전자가 졸고 있는지 여부 및 상기 운전자의 건강에 이상이 발생했는지 여부를 추정(estimate)하는 단계; 및 상기 추정 결과에 기초하여 상기 운전자가 상기 운전 가능한 상태인지 여부를 판단하는 단계를 포함할 수 있다.
상기 모니터링 디바이스들은 상기 운전자의 생체 신호를 감지하는 센서, 상기 운전자의 움직임을 감지하는 모션 센서, 상기 운전자의 접촉을 감지하는 촉각 센서 및 상기 운전자를 촬영하는 카메라 중 적어도 하나를 포함할 수 있다.
상기 운전자 모니터링 방법은 상기 운전자가 상기 운전 가능한 상태가 아니라고 판단되는 경우, 상기 차량의 주변에서 운행 중인 다른 차량 또는 관제 서버 중 적어도 하나에게 무선으로 경고 신호를 전송하는 단계, 또는 상기 관제 서버에게 상기 운전자의 생체 신호 및 상기 차량의 정보를 전송하는 단계 중 적어도 하나를 더 포함할 수 있다.
상기 운전자 모니터링 방법은 상기 운전자가 상기 운전 가능한 상태가 아니라고 판단되는 경우, 상기 차량의 운행 모드를 자율 운행 모드로 강제 설정하는 단계를 더 포함할 수 있다.
일 측에 따르면, 운전자 모니터링 장치는 운전자가 착용한 웨어러블 디바이스로부터, 상기 운전자의 움직임에 대한 감지 결과를 수신하는 수신부; 및 상기 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들- 상기 모니터링 디바이스들은 상기 운전자의 움직임을 모니터링 함- 의 구동 여부를 제어하고, 상기 제어에 의해 구동된 모니터링 디바이스들로부터 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 프로세서를 포함한다.
상기 웨어러블 디바이스는 일정 시간 동안에 상기 운전자의 움직임이 감지되지 않는 경우에 상기 운전자의 움직임이 없음을 나타내는 메시지를 생성한 후, 상기 운전자의 생체 신호를 측정하고, 상기 측정된 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지를 판단할 수 있다.
상기 프로세서는 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 모니터링 디바이스들의 동작 모드를 활성 모드로 설정하고, 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하지 않은 경우, 상기 차량에 구비된 모니터링 디바이스들의 동작 모드를 슬립 모드로 설정할 수 있다.
상기 프로세서는 상기 수집된 정보를 이용하여 상기 운전자가 졸고 있는지 여부 및 상기 운전자의 건강에 이상이 발생했는지 여부를 추정하고, 상기 추정 결과에 기초하여 상기 운전자가 상기 운전 가능한 상태인지 여부를 판단할 수 있다.
도 1은 일 실시예에 따른 운전자 모니터링 시스템의 구성을 설명하기 위한 도면.
도 2는 일 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도.
도 3은 다른 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도.
도 4는 다른 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도.
도 5는 일 실시예에 따른 운전자 모니터링 시스템에서 수행되는 운전자 모니터링 방법을 설명하기 위한 도면.
도 6은 일 실시예에 따른 운전자 모니터링 장치의 블록도.
본 명세서에서 개시되어 있는 특정한 구조적 또는 기능적 설명들은 단지 실시예들을 설명하기 위한 목적으로 예시된 것으로서, 실시예들은 다양한 다른 형태로 실시될 수 있으며 본 명세서에 설명된 실시예들에 한정되지 않는다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 이해되어야 한다. 예를 들어 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 표현들, 예를 들어 "~간의에"와 "바로~간의에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
하기에서 설명될 실시예들은 운전자를 모니터링하는 데에 사용될 수 있다. 실시예들은 태블릿 컴퓨터, 스마트 폰, 스마트 가전 기기, 지능형 자동차, 웨어러블 장치 등 다양한 형태의 제품으로 구현될 수 있다. 예를 들어, 실시예들은 스마트 폰, 웨어러블 장치, 모바일 기기, 지능형 자동차 등에서 사용자로부터 측정된 심박수를 이용하여 사용자의 건강에 이상이 발생했다거나, 사용자가 졸고 있는지를 판단하여 적절한 대응책을 제공하는 데에 적용될 수 있다. 실시예들은 차량의 운행 모드가 자율 운행 모드 또는 수동 운전 모드 간의 전환이 가능한 지능형 자동차 등에 적용될 수 있다. 이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 일 실시예에 따른 운전자 모니터링 시스템의 구성을 설명하기 위한 도면이다. 도 1을 참조하면, 일 실시예에 따른 운전자 모니터링 시스템(100)은 웨어러블 디바이스(110) 및 운전자 모니터링 장치(130)를 포함할 수 있다. 또한, 운전자 모니터링 시스템(100)은 카메라(150)를 더 포함할 수 있다. 카메라(150)는 운전자 모니터링 장치(130)에 포함될 수도 있고, 독립적인 별개의 장치로 구성될 수도 있다.
웨어러블 디바이스(110)는 운전자가 착용하는 장치로써 다양한 센서들에 의해 운전자의 생체 신호 및 운전자의 움직임을 감지할 수 있다. 웨어러블 디바이스(110)는 예를 들어, 시계형, 팔찌형, 체스트형, 패치형, 또는 목걸이형 등으로 구성될 수 있다.
웨어러블 디바이스(110)는 생체 신호 센서, 모션 센서, 가속도계 및 자이로 센서를 포함할 수 있다. 생체 신호 센서는 예를 들어, PPG(PhotoPlethysmoGram) 센서일 수 있다. 생체 신호 센서는 운전자의 심전도(ElectroCardioGraphy; ECG), 근전도(ElectortoMyoGraphy; EMG), 광용적맥파(PhotoPlethysmoGraphy; PPG), 신경 전도(Electronervegram; ENG), 뇌전도(Electroencephalogram; EEG), 심박수(Heart rate), 혈압, 혈당, 산소 포화도, 호흡, 맥박, 피층 전기 반응(Galvanic skin response), 임피던스 등의 생체 신호를 측정할 수 있다. 모션 센서, 가속도계 및 자이로 센서는 운전자의 신체 움직임을 감지 또는 측정할 수 있다.
운전 중인 운전자는 예를 들어, 졸고 있는 상태거나, 쇼크 상태가 아닌 정상적인 상태에서 팔 또는 그 밖의 신체 부분들을 항상 움직이게 된다. 때문에, 웨어러블 디바이스(110)는 모션 센서를 이용해 운전자가 현재 팔 또는 그 밖의 신체 부분들을 움직이고 있는지를 항시 모니터링할 수 있다. 모션 센서의 전력 소비량은 매우 낮으므로 모션 센서의 구동으로 인한 전력 소모는 크지 않다.
모션 센서에서 운전자의 팔 또는 그 밖의 신체 부분들의 움직임이 감지되면, 웨어러블 디바이스(110)는 운전자가 깨어 있는 상태라고 판단할 수 있다. 운전자가 깨어 있는 상태라고 판단되면, 웨어러블 디바이스(110)는 운전자 모니터링 장치(130)에게 아무런 신호도 보내지 않을 수 있다.
이와 달리, 일정 시간 동안 모션 센서에서 운전자의 신체 부분들의 움직임이 감지되지 않으면, 웨어러블 디바이스(110)는 운전자가 졸고 있거나, 운전자의 건강에 이상이 발생한 상태라고 판단할 수 있다.
일정 시간 동안에 모션 센서에서 운전자의 움직임이 감지되지 않는 경우, 웨어러블 디바이스(110)는 운전자의 움직임이 없음을 나타내는 메시지를 생성하여 운전자 모니터링 장치(130)에게 전송할 수 있다. 이때, 웨어러블 디바이스(110)는 웨어러블 디바이스(110) 내에 포함된 생체 신호 센서를 작동시켜 운전자의 건강 상태에 이상이 있는지를 체크할 수 있다.
웨어러블 디바이스(110)는 운전자의 움직임이 감지되는 경우에는 생체 신호 센서를 슬립 모드로 유지하고, 운전자의 움직임이 감지되지 않는 경우에 생체 신호 센서를 활성화하여 운전자의 생체 신호를 측정할 수 있다.
생체 신호 센서는 운전자의 생체 신호를 안정적으로 측정할 수는 있지만 배터리의 소모가 매우 크다. 웨어러블 디바이스(110)에서 운전자의 생체 신호를 계속 측정하는 경우, 배터리 소모로 인해 배터리가 방전될 수 있다. 일 실시예에서 웨어러블 디바이스(110)는 운전자의 움직임이 감지되지 않는 경우에 생체 신호 센서를 활성화 함으로써 웨어러블 디바이스(110)의 배터리 소모를 줄일 수 있다.
운전자의 건강에 이상이 있다고 판단되면, 웨어러블 디바이스(110)는 운전자의 건강에 이상이 발생했음을 알리는 메시지를 생성하여 운전자 모니터링 장치(130)에게 전송할 수 있다. 또는 웨어러블 디바이스(110)는 자체적으로 응급 상황을 알리는 신호를 전송하거나, 웨어러블 디바이스(110)와 연동된 운전자의 스마트 폰 등을 통해 응급 상황을 알리는 신호를 병원 또는 경찰서 등으로 전송할 수 있다.
웨어러블 디바이스(110)에서 운전자의 움직임이 감지되지 않으나, 운전자의 건강에 이상이 없다고 판단되면, 운전자 모니터링 장치(130)는 운전자가 졸고 있는 상태라고 판단할 수 있다. 이때, 운전자 모니터링 장치(130)는 졸고 있는 운전자를 깨우거나, 운전자의 차량 주변을 주행하는 다른 차량들에게 무선으로 경고 신호를 전송할 수 있다.
운전자 모니터링 장치(130)는 웨어러블 디바이스(110)에서 운전자의 움직임을 감지한 결과를 기초로 차량에 구비된 모니터링 디바이스들의 구동 여부를 제어하여 운전자를 모니터링할 수 있다.
운전자 모니터링 장치(130)는 웨어러블 디바이스(110)로부터 운전자의 움직임이 없음을 나타내는 메시지를 수신하기 전까지 모니터링 디바이스들의 동작 모드를 슬립 모드로 설정하여 소비 전력을 절감할 수 있다. 운전자 모니터링 장치(130)는 웨어러블 디바이스(110)에서 일정 시간 동안 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 모니터링 디바이스들의 동작 모드를 활성 모드(active mode)로 설정하여 모니터링 디바이스들을 구동시킬 수 있다.
모니터링 디바이스들은 예를 들어, 운전자의 생체 신호를 감지하는 센서, 운전자의 움직임을 감지하는 모션 센서, 운전자의 접촉을 감지하는 촉각 센서 및 운전자를 촬영하는 카메라(이미지 센서) 등을 포함할 수 있다.
운전자 모니터링 장치(130)는 자체적으로 보유하고 있는 모니터링 디바이스들 또는 외부의 추가적인 센서 등을 이용해 운전자를 모니터링 할 수 있다.
운전자 모니터링 장치(130)는 모니터링 디바이스들에서 수집된 정보 및 웨어러블 디바이스에서 수집된 정보를 이용하여 운전자가 운전 가능한 상태인지 여부를 판단할 수 있다. 여기서, '운전 가능한 상태'는 운전자가 졸거나, 알코올, 약품에 의한 신체 이상이 발생하지 않은 상태 또는 쇼크 등과 같은 운전자의 건강에 이상이 발생하지 않은, 정상적인 차량 운행이 가능한 상태로 이해될 수 있다.
운전자의 건강 이상이나 졸음이 감지되면, 운전자 모니터링 장치(130)는 운전자를 깨우기 위한 경고 신호 또는 알람을 발생시키거나, 주변 차량에 해당 차량의 운전자가 이상이 있으므로 조심하라는 경고 메시지를 보내 미리 안전에 유의할 것을 경고할 수 있다. 또는 운전자 모니터링 장치(130)는 통신망을 이용해 119(소방서) 및 112(경찰서)등에 도움 요청 메시지를 보낼 수 있다.
운전자의 움직임이 없음을 나타내는 메시지를 수신했으나, 운전자의 건강에 이상이 없고, 운전자가 졸고 있지도 않다면, 운전자 모니터링 장치(130)는 예를 들어, 신호 대기 등으로 운전자가 단순히 가만히 있는 상황으로 판단할 수 있다.
실시예에 따라서, 운전자 모니터링 장치(130)는 차량의 운행 모드가 자율 운행 모드 또는 수동 운전 모드 간의 전환이 가능한 지능형 자동차에서 자율 주행을 수행하다가 수동 운전으로 전환해야 하는 경우(예, 고속도로를 벗어나려고 할 때), 운전자가 운전이 가능한 상태인지 확인할 수 있다. 운전자 모니터링 장치(130)는 운전자가 수동 운전을 하다가 조는 것으로 판단되면, 차량의 운행 모드를 강제적으로 자율 주행으로 전환할 수 있다.
운전자 모니터링 장치(130)는 예를 들어, 차량 내 내비게이션, 오디오, 비디오 및 인터넷이 결합된 차량 인포테인먼트(infotainment)로 구성되거나, 운전자의 스마트 폰, 또는 애프터마켓(aftermarket) 제품인 운전자 모니터링 시스템으로 구성될 수도 있다.
운전자 모니터링 장치(130)는 웨어러블 디바이스(110)와 유/무선 통신에 의해 서로 연결될 수 있다. 운전자 모니터링 장치(130)는 웨어러블 디바이스(110)와 직접 통신할 수도 있고, 관제 서버를 통해 연결될 수도 있다.
카메라(150)는 운전자 모니터링 장치(130)의 제어 신호에 의해 구동되며, 운전자의 얼굴 또는 영상을 촬영할 수 있다. 카메라(150)는 예를 들어, 운전자의 운전 행동, 운전자의 얼굴을 촬영하거나, 운전자의 시선을 추적할 수 있다.
도 2는 일 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도이다. 도 2를 참조하면, 일 실시예에 따른 운전자 모니터링 장치는 운전자가 착용한 웨어러블 디바이스로부터, 운전자의 움직임에 대한 감지 결과를 수신한다(210). 웨어러블 디바이스는 예를 들어, 생체 신호 센서, 모션 센서, 가속도계 및 자이로 센서 등을 포함할 수 있다. 운전자의 움직임은 모션 센서, 가속도계 및 자이로 센서 중 적어도 하나에 의해 감지될 수 있다. 운전자의 움직임은 운전자가 웨어러블 디바이스를 착용한 신체 부위의 움직임과 그 밖의 신체 일부의 움직임을 포함할 수 있다.
웨어러블 디바이스는 일정 시간 동안에 운전자의 움직임이 감지되지 않는 경우에 운전자의 움직임이 없음을 나타내는 메시지를 생성하여 운전자 모니터링 장치에게 전달할 수 있다. 운전자의 움직임에 대한 감지 결과는 예를 들어, 운전자의 움직임이 없음을 나타내는 메시지일 수 있다.
운전자 모니터링 장치는 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들의 구동 여부를 제어한다(220). 운전자 모니터링 장치는 운전자의 움직임이 없음을 나타내는 메시지를 수신했는지 여부에 따라 모니터링 디바이스들의 동작 모드를 활성 모드 또는 슬립 모드로 설정할 수 있다.
실시예에 따라서, 운전자 모니터링 장치는 모니터링 디바이스들 전부를 구동시킬 수도 있고, 필요에 따라서, 모니터링 디바이스들 중 일부만을 구동시킬 수도 있다.
운전자 모니터링 장치는 제어에 의해 구동된 모니터링 디바이스들로부터 정보를 수집한다(230). 모니터링 디바이스들은 차량의 내부 또는 외부 여러 곳에 설치될 수 있다. 모니터링 디바이스들은 예를 들어, 차량의 운전대, 차량의 룸 미러, 운전석 등에 설치될 수 있다. 모니터링 디바이스들은 예를 들어, 운전자의 생체 신호를 감지하는 센서, 운전자의 움직임을 감지하는 모션 센서, 운전자의 접촉을 감지하는 촉각 센서 및 운전자를 촬영하는 카메라(이미지 센서) 등을 포함할 수 있다.
운전자 모니터링 장치는 운전자의 생체 신호를 감지하는 센서로부터 예를 들어, 운전자의 심박수, 호흡, 체온 등의 감지 결과를 수집하고, 모션 센서, 가속도 센서 및 자이로 센서 등으로부터는 운전자의 움직임을 감지한 결과를 수집할 수 있다. 운전자 모니터링 장치는 촉각 센서로부터 운전자가 운전대를 잡고 있는지를 나타내는 접촉 또는 압력 감지 결과를 수집할 수 있다. 운전자 모니터링 장치는 카메라로부터 운전자의 운전 행동, 운전자의 얼굴 또는 운전자의 시선을 추적한 영상을 수집할 수 있다.
운전자 모니터링 장치는 모니터링 디바이스들로부터 수집된 정보를 이용하여 운전자가 운전 가능한 상태인지 여부를 판단한다(240). 운전자 모니터링 장치는 예를 들어, 운전자의 심박수, 호흡, 체온 등이 정상치 보다 5% 이상 높거나 낮은 경우에 운전자의 건강에 이상이 발생한 것으로 판단(추정)하거나, 또는 촉각 센서로부터 감지된 운전대에 대한 운전자의 접촉 또는 압력이 평균치보다 낮고, 카메라를 통해 촬영된 운전자의 눈이 감겨 있거나, 시선이 고정되지 않고 짧은 기간에 불안정하게 움직이는 경우, 또는 운전자의 얼굴이 일정 방향이고 끄덕이고 있는 경우에 운전자가 졸고 있는 것으로 추정 혹은 판단할 수 있다. 운전자 모니터링 장치는 예를 들어, 얼굴 인식(Facial Recognition) 알고리즘 또는 시선 추적(Eye Tracking) 알고리즘 등을 이용하여 촬영된 영상에서 운전자의 시선의 방향 및 운전자의 눈이 감겨 있는지 여부 등을 파악할 수 있다.
실시예에 따라서, 운전자 모니터링 장치는 모니터링 디바이스들에서 수집된 정보 및 웨어러블 디바이스에서 수집된 정보를 함께 이용하여 운전자가 운전 가능한 상태인지 여부를 판단할 수 있다.
도 3은 다른 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도이다. 도 3을 참조하면, 일 실시예에 따른 운전자 모니터링 장치는 웨어러블 디바이스로부터 운전자의 움직임이 없음을 나타내는 메시지가 수신되었는지를 판단할 수 있다(305).
단계(305)의 판단 결과, 운전자의 움직임이 없음을 나타내는 메시지가 수신되지 않은 경우, 운전자 모니터링 장치는 모니터링 디바이스들의 동작 모드를 슬립 모드로 설정할 수 있다(310). 운전자 모니터링 장치는 단계(305)로 가서 운전자의 움직임이 없음을 나타내는 메시지의 수신을 대기할 수 있다.
단계(305)의 판단 결과, 운전자의 움직임이 없음을 나타내는 메시지가 수신된 경우, 운전자 모니터링 장치는 모니터링 디바이스들의 동작 모드를 활성 모드로 설정하고(315), 구동된 모니터링 디바이스들로부터 정보를 수집할 수 있다(320). 운전자 모니터링 장치는 웨어러블 디바이스로부터 정보를 수집할 수 있다(325).
운전자 모니터링 장치는 웨어러블 디바이스 및 모니터링 디바이스들로부터 수집된 정보들을 이용하여 운전자가 졸고 있는지 여부 및 운전자의 건강에 이상이 발생했는지 여부를 추정할 수 있다(330). 이때, 웨어러블 디바이스 및 모니터링 디바이스들로부터 수집된 정보들은 웨어러블 디바이스 및 모니터링 디바이스들에 포함된 다양한 센서들로부터 감지된 결과일 수 있다.
운전자 모니터링 장치는 예를 들어, 카메라(이미지 센서)로부터 수집된 정보로부터 PERCLOS(Percentage Closure of Eyes)와 안구의 단속성 운동을 측정하여 운전자의 피로도를 예측하거나, 운전자가 졸고 있는지를 추정할 수 있다. 안구의 단속성 운동은 두 안구가 같은 방향으로 빠르게 동시에 움직이는 것으로 이해될 수 있다. 또한, 운전자 모니터링 장치는 예를 들어, 운전자의 심박수, 호흡, 체온 등이 정상치 보다 5% 이상 높거나 낮은 경우에 운전자의 건강에 이상이 발생한 것으로 추정할 수 있다.
운전자 모니터링 장치는 추정 결과에 기초하여 운전자가 운전 가능한 상태인지 여부를 판단할 수 있다(335). 운전자 모니터링 장치는 예를 들어, 차량의 운행 모드를 자율 운행 모드에서 수동 운전 모드로의 전환하는 경우에 운전자가 운전 가능한 상태인지 여부를 판단할 수 있다.
단계(335)의 판단 결과, 운전자가 운전 가능한 상태가 아니라면, 운전자 모니터링 장치는 차량의 운행 모드를 자율 운행 모드로 강제 설정할 수 있다(340).
단계(335)의 판단 결과, 운전자가 운전 가능한 상태라면, 운전자 모니터링 장치는 차량의 운행 모드를 수동 운전 모드로 설정할 수 있다(345).
도 4는 다른 실시예에 따른 운전자 모니터링 방법을 나타낸 흐름도이다. 도 4를 참조하면, 일 실시예에 따른 운전자 모니터링 장치는 웨어러블 디바이스로부터 운전자의 움직임이 없음을 나타내는 메시지가 수신되었는지를 판단할 수 있다(410). 단계(410)의 판단 결과, 운전자의 움직임이 없음을 나타내는 메시지가 수신되지 않은 경우, 운전자 모니터링 장치는 운전자의 움직임이 없음을 나타내는 메시지의 수신을 대기할 수 있다.
단계(410)의 판단 결과, 운전자의 움직임이 없음을 나타내는 메시지가 수신된 경우, 운전자 모니터링 장치는 모니터링 디바이스들을 구동하고(420), 구동된 모니터링 디바이스들로부터 정보를 수집할 수 있다(430).
또한, 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 운전자 모니터링 장치는 웨어러블 디바이스가 운전자의 생체 신호를 측정하도록 제어할 수 있다(440). 운전자 모니터링 장치는 웨어러블 디바이스로부터 운전자의 생체 신호를 수신할 수 있다(450). 실시예에 따라서, 단계(440)은 단계(420)과 함께 수행될 수도 있고, 단계(420)과 단계(430)의 사이에 수행될 수도 있으며, 단계(420)에 앞서 수행될 수도 있다.
운전자 모니터링 장치는 단계(450)에서 수신한 운전자의 생체 신호 및 단계(430)에서 모니터링 디바이스들로부터 수집한 정보를 기초로 운전자가 운전 가능한 상태가 아닌지 여부를 판단할 수 있다(460).
단계(460)의 판단 결과, 운전자가 운전 가능한 상태가 아니라고 판단되면, 운전자 모니터링 장치는 운전자의 차량의 주변에서 운행 중인 다른 차량 또는 관제 서버 중 적어도 하나에게 무선으로 경고 신호를 전송할 수 있다(470).
운전자 모니터링 장치는 관제 서버에게 운전자의 생체 신호 및 차량의 정보를 전송할 수 있다(480).
도 5는 일 실시예에 따른 운전자 모니터링 시스템에서 수행되는 운전자 모니터링 방법을 나타낸 도면이다. 도 5를 참조하면, 운전자 모니터링 시스템을 구성하는 웨어러블 디바이스(501)와 운전자 모니터링 장치(503) 간에 수행되는 운전자 모니터링 방법이 도시된다.
웨어러블 디바이스(501)는 모션 센서의 감지 결과로부터 운전자의 움직임이 있는지를 판단할 수 있다(510). 단계(510)의 판단 결과, 운전자의 움직임이 있다고 판단되면, 웨어러블 디바이스(501)는 계속 대기할 수 있다.
단계(510)의 판단 결과, 운전자의 움직임이 없다고 판단되면, 웨어러블 디바이스(501)는 운전자 모니터링 장치(503)로 메시지를 전송할 수 있다(515). 이때, 메시지는 예를 들어, 운전자의 움직임이 없음을 나타내는 메시지일 수 있다.
웨어러블 디바이스(501)는 운전자 모니터링 장치(503)로 메시지를 전송한 후, 운전자의 생체 신호 측정할 수 있다(520).
웨어러블 디바이스(501)는 단계(520)의 측정 결과를 기초로 운전자가 건강에 이상이 있는지를 판단할 수 있다(525). 단계(525)의 판단 결과, 운전자가 건강에 이상이 있다면, 웨어러블 디바이스(501)는 운전자의 건강에 이상이 있음을 알리는 메시지를 운전자 모니터링 장치(503)로 전송할 수 있다(550).
운전자의 건강에 이상이 있음을 알리는 메시지를 수신한 운전자 모니터링 장치(503)는 관제 서버 또는 경찰서에 이러한 정보를 알리거나, 차량의 운행 모드를 자율 운행 모드로 강제 전환할 수 있다(555).
웨어러블 디바이스(501)로부터 운전자의 움직임이 없음을 나타내는 메시지를 수신한 운전자 모니터링 장치(503)는 차량에 구비되었거나, 차량의 외부에 구비된 모니터링 디바이스들을 활성화할 수 있다(530).
운전자 모니터링 장치(503)는 활성화된 모니터링 디바이스들로부터 정보를 수집하고(535), 수집된 정보를 이용하여 운전자가 졸고 있는지 여부를 판단할 수 있다(540).
단계(540)에서 운전자가 졸고 있다고 판단되는 경우, 운전자 모니터링 장치(503)는 운전자 및 차량의 주변에서 운행 중인 다른 차량에게 알람 등에 의해 경고할 수 있다(550).
도 6은 일 실시예에 따른 운전자 모니터링 장치의 블록도이다.
도 6을 참조하면, 일 실시예에 따른 운전자 모니터링 장치(600)는 수신부(610), 프로세서(620), 모니터링 디바이스들(630), 및 메모리(640)를 포함할 수 있다. 모니터링 디바이스들(630)은 센서들(632) 및 카메라(이미지 센서)(634)를 포함할 수 있다.
수신부(610), 프로세서(620), 모니터링 디바이스들(630), 및 메모리(640)는 버스(650)를 통하여 서로 통신할 수 있다.
수신부(610)는 운전자가 착용한 웨어러블 디바이스로부터, 운전자의 움직임에 대한 감지 결과를 수신한다. 웨어러블 디바이스는 일정 시간 동안에 운전자의 움직임이 감지되지 않는 경우에 운전자의 움직임이 없음을 나타내는 메시지를 생성할 수 있다. 웨어러블 디바이스는 운전자의 생체 신호를 측정하고, 측정된 생체 신호를 기초로 운전자의 건강에 이상이 발생했는지를 판단할 수 있다.
프로세서(620)는 수신부(610)가 수신한 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들의 구동 여부를 제어한다. 프로세서(620)는 제어에 의해 구동된 모니터링 디바이스들로부터 수집된 정보를 이용하여 운전자가 운전 가능한 상태인지 여부를 판단한다.
프로세서(620)는 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 모니터링 디바이스들의 동작 모드를 활성 모드로 설정할 수 있다. 프로세서(620)는 운전자의 움직임이 없음을 나타내는 메시지를 수신하지 않은 경우, 차량에 구비된 모니터링 디바이스들의 동작 모드를 슬립 모드로 설정할 수 있다.
프로세서(620)는 수집된 정보를 이용하여 운전자가 졸고 있는지 여부 및 운전자의 건강에 이상이 발생했는지 여부를 추정하고, 추정 결과에 기초하여 운전자가 운전 가능한 상태인지 여부를 판단할 수 있다.
모니터링 디바이스들(630)은 운전자의 움직임을 모니터링 한다. 모니터링 디바이스들(630)은 예를 들어, 운전자의 생체 신호를 감지하는 센서, 운전자의 움직임을 감지하는 모션 센서, 운전자의 접촉을 감지하는 촉각 센서, 초음파 센서 등과 같은 센서들(632) 및 운전자를 촬영하는 카메라(634)를 포함할 수 있다.
이 밖에도, 프로세서(620)는 도 1 내지 도 5를 통하여 전술한 적어도 하나의 방법을 수행할 수 있다. 프로세서(620)는 프로그램을 실행하고, 운전자 모니터링 장치(600)를 제어할 수 있다. 프로세서(620)에 의하여 실행되는 프로그램 코드는 메모리(640)에 저장될 수 있다. 운전자 모니터링 장치(600)는 입출력 장치(도면 미 표시)를 통하여 외부 장치(예를 들어, 퍼스널 컴퓨터 또는 네트워크)에 연결되고, 데이터를 교환할 수 있다.
도 1 내지 도 5를 통하여 전술한 적어도 하나의 방법은 태블릿, 스마트 폰, 또는 웨어러블 디바이스 내의 프로세서에서 동작하는 앱 형태로도 구현되거나, 칩 형태로 구현되어 스마트 폰, 웨어러블 디바이스 또는 지능형 자동차 내에 내장될 수 있다.
이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
600: 운전자 모니터링 장치
610: 수신부
620: 프로세서
630: 모니터링 디바이스들
640: 메모리
650: 버스

Claims (20)

  1. 운전자가 착용한 웨어러블 디바이스(wearable device)로부터, 상기 운전자의 움직임에 대한 감지 결과를 수신하는 단계;
    상기 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들- 상기 모니터링 디바이스들은 상기 운전자의 움직임을 모니터링 함- 의 구동 여부를 제어하는 단계;
    상기 제어에 의해 구동된 모니터링 디바이스들로부터 정보를 수집하는 단계; 및
    상기 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계
    를 포함하는, 운전자 모니터링 방법.
  2. 제1항에 있어서,
    상기 웨어러블 디바이스는
    생체 신호 센서, 모션 센서, 가속도계 및 자이로 센서 중 적어도 하나를 포함하고,
    상기 운전자의 움직임은
    상기 모션 센서, 상기 가속도계 및 상기 자이로 센서 중 적어도 하나에 의해 감지되는, 운전자 모니터링 방법.
  3. 제1항에 있어서,
    상기 웨어러블 디바이스는
    일정 시간 동안에 상기 운전자의 움직임이 감지되지 않는 경우에 상기 운전자의 움직임이 없음을 나타내는 메시지를 생성하는, 운전자 모니터링 방법.
  4. 제3항에 있어서,
    상기 웨어러블 디바이스는
    상기 운전자의 움직임이 없음을 나타내는 메시지를 생성한 후, 상기 운전자의 생체 신호를 측정하고, 상기 측정된 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지를 판단하는, 운전자 모니터링 방법.
  5. 제4항에 있어서,
    상기 웨어러블 디바이스는
    상기 운전자의 건강에 이상이 발생했다고 판단된 경우, 상기 운전자의 건강에 이상이 발생했음을 알리는 메시지를 생성하는, 운전자 모니터링 방법.
  6. 제3항에 있어서,
    상기 웨어러블 디바이스로부터 상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 웨어러블 디바이스가 상기 운전자의 생체 신호를 측정하도록 제어하는 단계;
    상기 웨어러블 디바이스로부터 상기 운전자의 생체 신호를 수신하는 단계; 및
    상기 운전자의 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지 여부를 판단하는 단계
    를 더 포함하는, 운전자 모니터링 방법.
  7. 제3항에 있어서,
    상기 감지 결과를 수신하는 단계는
    상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하는 단계
    를 포함하는, 운전자 모니터링 방법.
  8. 제1항에 있어서,
    상기 구동 여부를 제어하는 단계는
    상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 모니터링 디바이스들의 동작 모드를 활성 모드(active mode)로 설정하는 단계
    를 포함하는, 운전자 모니터링 방법.
  9. 제1항에 있어서,
    상기 구동 여부를 제어하는 단계는
    상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하지 않은 경우, 상기 모니터링 디바이스들의 동작 모드를 슬립 모드(sleep mode)로 설정하는 단계
    를 포함하는, 운전자 모니터링 방법.
  10. 제1항에 있어서,
    상기 운전 가능한 상태인지 여부를 판단하는 단계는
    상기 모니터링 디바이스들에서 수집된 정보 및 상기 웨어러블 디바이스에서 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계
    를 포함하는, 운전자 모니터링 방법.
  11. 제1항에 있어서,
    상기 운전 가능한 상태인지 여부를 판단하는 단계는
    상기 차량의 운행 모드를 자율 운행 모드에서 수동 운전 모드로의 전환하는 경우에 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 단계
    를 포함하는, 운전자 모니터링 방법.
  12. 제1항에 있어서,
    상기 운전 가능한 상태인지 여부를 판단하는 단계는
    상기 수집된 정보를 이용하여 상기 운전자가 졸고 있는지 여부 및 상기 운전자의 건강에 이상이 발생했는지 여부를 추정(estimate)하는 단계; 및
    상기 추정 결과에 기초하여 상기 운전자가 상기 운전 가능한 상태인지 여부를 판단하는 단계
    를 포함하는, 운전자 모니터링 방법.
  13. 제1항에 있어서,
    상기 모니터링 디바이스들은
    상기 운전자의 생체 신호를 감지하는 센서, 상기 운전자의 움직임을 감지하는 모션 센서, 상기 운전자의 접촉을 감지하는 촉각 센서 및 상기 운전자를 촬영하는 카메라 중 적어도 하나를 포함하는, 운전자 모니터링 방법.
  14. 제1항에 있어서,
    상기 운전자가 상기 운전 가능한 상태가 아니라고 판단되는 경우,
    상기 차량의 주변에서 운행 중인 다른 차량 또는 관제 서버 중 적어도 하나에게 무선으로 경고 신호를 전송하는 단계, 또는
    상기 관제 서버에게 상기 운전자의 생체 신호 및 상기 차량의 정보를 전송하는 단계
    중 적어도 하나를 더 포함하는, 운전자 모니터링 방법.
  15. 제1항에 있어서,
    상기 운전자가 상기 운전 가능한 상태가 아니라고 판단되는 경우, 상기 차량의 운행 모드를 자율 운행 모드로 강제 설정하는 단계
    를 더 포함하는, 운전자 모니터링 방법.
  16. 하드웨어와 결합되어 제1항 내지 제15항 중에서 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
  17. 운전자가 착용한 웨어러블 디바이스로부터, 상기 운전자의 움직임에 대한 감지 결과를 수신하는 수신부; 및
    상기 감지 결과를 기초로, 차량에 구비된 모니터링 디바이스들- 상기 모니터링 디바이스들은 상기 운전자의 움직임을 모니터링 함- 의 구동 여부를 제어하고, 상기 제어에 의해 구동된 모니터링 디바이스들로부터 수집된 정보를 이용하여 상기 운전자가 운전 가능한 상태인지 여부를 판단하는 프로세서
    를 포함하는, 운전자 모니터링 장치.
  18. 제17항에 있어서,
    상기 웨어러블 디바이스는
    일정 시간 동안에 상기 운전자의 움직임이 감지되지 않는 경우에 상기 운전자의 움직임이 없음을 나타내는 메시지를 생성한 후, 상기 운전자의 생체 신호를 측정하고, 상기 측정된 생체 신호를 기초로 상기 운전자의 건강에 이상이 발생했는지를 판단하는, 운전자 모니터링 장치.
  19. 제17항에 있어서,
    상기 프로세서는
    상기 운전자의 움직임이 없음을 나타내는 메시지를 수신한 경우, 상기 모니터링 디바이스들의 동작 모드를 활성 모드로 설정하고,
    상기 운전자의 움직임이 없음을 나타내는 메시지를 수신하지 않은 경우, 상기 차량에 구비된 모니터링 디바이스들의 동작 모드를 슬립 모드로 설정하는, 운전자 모니터링 장치.
  20. 제17항에 있어서,
    상기 프로세서는
    상기 수집된 정보를 이용하여 상기 운전자가 졸고 있는지 여부 및 상기 운전자의 건강에 이상이 발생했는지 여부를 추정하고, 상기 추정 결과에 기초하여 상기 운전자가 상기 운전 가능한 상태인지 여부를 판단하는, 운전자 모니터링 장치.
KR1020150135573A 2015-09-24 2015-09-24 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치 KR20170036428A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020150135573A KR20170036428A (ko) 2015-09-24 2015-09-24 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치
US15/188,074 US20170090475A1 (en) 2015-09-24 2016-06-21 Driver monitoring method and apparatus using wearable device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150135573A KR20170036428A (ko) 2015-09-24 2015-09-24 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20170036428A true KR20170036428A (ko) 2017-04-03

Family

ID=58409218

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150135573A KR20170036428A (ko) 2015-09-24 2015-09-24 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치

Country Status (2)

Country Link
US (1) US20170090475A1 (ko)
KR (1) KR20170036428A (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101861324B1 (ko) * 2017-08-23 2018-06-04 주식회사 웨어롬 움직임 분석에 기반한 응급상황 판단 시스템 및 방법
KR20190004547A (ko) * 2017-07-04 2019-01-14 현대자동차주식회사 차량 시스템 및 그 제어 방법
KR20210129401A (ko) * 2020-04-20 2021-10-28 백우민 운전자 상태에 기반한 차량 운행 제어 시스템
CN114081513A (zh) * 2021-12-13 2022-02-25 苏州大学 基于肌电信号的异常驾驶行为检测方法及系统
KR20220060569A (ko) * 2020-11-02 2022-05-12 한국자동차연구원 자율주행 차량의 제어장치 및 방법

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11712557B2 (en) 2013-05-30 2023-08-01 Neurostim Technologies Llc Detection and treatment of obstructive sleep apnea
KR101866724B1 (ko) * 2016-06-23 2018-06-15 현대자동차주식회사 웨어러블 디바이스, 그와 통신하는 차량 및 그 제어 방법
US10317897B1 (en) * 2016-11-16 2019-06-11 Zoox, Inc. Wearable for autonomous vehicle interaction
EP3343306B1 (en) * 2016-12-28 2019-08-07 Faurecia Automotive Seating, LLC Occupant-status prediction system
JP7005933B2 (ja) 2017-05-09 2022-01-24 オムロン株式会社 運転者監視装置、及び運転者監視方法
JP6948559B2 (ja) 2017-05-09 2021-10-13 オムロン株式会社 運転者監視装置、及び運転者監視方法
JP7080598B2 (ja) * 2017-07-21 2022-06-06 ソニーセミコンダクタソリューションズ株式会社 車両制御装置および車両制御方法
US10635101B2 (en) 2017-08-21 2020-04-28 Honda Motor Co., Ltd. Methods and systems for preventing an autonomous vehicle from transitioning from an autonomous driving mode to a manual driving mode based on a risk model
WO2019047067A1 (zh) * 2017-09-06 2019-03-14 北京小米移动软件有限公司 非连续接收的实现方法、装置、用户设备和基站
US11723579B2 (en) 2017-09-19 2023-08-15 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement
US10561357B2 (en) * 2017-09-29 2020-02-18 Steering Solutions Ip Holding Corporation Automotive driver health monitoring and response system
JP2019073069A (ja) * 2017-10-12 2019-05-16 京セラ株式会社 車両、判定方法及び判定プログラム
US11717686B2 (en) 2017-12-04 2023-08-08 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement to facilitate learning and performance
US11318277B2 (en) 2017-12-31 2022-05-03 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement to enhance emotional response
GB2571128B (en) * 2018-02-19 2022-10-12 Kinetik Tech Group Ltd A wearable alarm device and a method of use thereof
US11364361B2 (en) 2018-04-20 2022-06-21 Neuroenhancement Lab, LLC System and method for inducing sleep by transplanting mental states
JP7099037B2 (ja) * 2018-05-07 2022-07-12 オムロン株式会社 データ処理装置、モニタリングシステム、覚醒システム、データ処理方法、及びデータ処理プログラム
JP7096565B2 (ja) * 2018-05-27 2022-07-06 学校法人早稲田大学 心電モニタリングシステム
US11452839B2 (en) 2018-09-14 2022-09-27 Neuroenhancement Lab, LLC System and method of improving sleep
JP7135634B2 (ja) * 2018-09-14 2022-09-13 株式会社デンソー 車両用装置及び運転支援プログラム
US11021147B2 (en) 2018-12-12 2021-06-01 Toyota Research Institute, Inc. Vehicles and methods for determining objects of driver focus
US10471969B1 (en) * 2019-01-07 2019-11-12 GM Global Technology Operations LLC System and method to restrict vehicle operations in response to driver impairment
US11305110B2 (en) 2019-03-22 2022-04-19 Neurostim Technologies Llc Detection and treatment of obstructive sleep apnea
US11478638B2 (en) 2019-03-22 2022-10-25 Neurostim Technologies Llc Detection and treatment of obstructive sleep apnea
CN109965889B (zh) * 2019-04-01 2020-06-16 北京理工大学 一种利用智能手机扬声器和麦克风的疲劳驾驶检测方法
TWI816008B (zh) * 2019-04-03 2023-09-21 財團法人工業技術研究院 駕駛輔助系統與駕駛輔助方法
US11786694B2 (en) 2019-05-24 2023-10-17 NeuroLight, Inc. Device, method, and app for facilitating sleep
JP7226160B2 (ja) * 2019-07-16 2023-02-21 トヨタ自動車株式会社 車両走行制御装置
US11637511B2 (en) 2019-07-23 2023-04-25 BlueOwl, LLC Harvesting energy for a smart ring via piezoelectric charging
US11537917B1 (en) 2019-07-23 2022-12-27 BlueOwl, LLC Smart ring system for measuring driver impairment levels and using machine learning techniques to predict high risk driving behavior
US11594128B2 (en) 2019-07-23 2023-02-28 BlueOwl, LLC Non-visual outputs for a smart ring
US11551644B1 (en) 2019-07-23 2023-01-10 BlueOwl, LLC Electronic ink display for smart ring
US12126181B2 (en) 2019-07-23 2024-10-22 Quanata, Llc Energy harvesting circuits for a smart ring
US11537203B2 (en) 2019-07-23 2022-12-27 BlueOwl, LLC Projection system for smart ring visual output
US12067093B2 (en) 2019-07-23 2024-08-20 Quanata, Llc Biometric authentication using a smart ring
US12077193B1 (en) 2019-07-23 2024-09-03 Quanata, Llc Smart ring system for monitoring sleep patterns and using machine learning techniques to predict high risk driving behavior
US11853030B2 (en) 2019-07-23 2023-12-26 BlueOwl, LLC Soft smart ring and method of manufacture
US11909238B1 (en) 2019-07-23 2024-02-20 BlueOwl, LLC Environment-integrated smart ring charger
US11462107B1 (en) 2019-07-23 2022-10-04 BlueOwl, LLC Light emitting diodes and diode arrays for smart ring visual output
US11949673B1 (en) 2019-07-23 2024-04-02 BlueOwl, LLC Gesture authentication using a smart ring
US11984742B2 (en) 2019-07-23 2024-05-14 BlueOwl, LLC Smart ring power and charging
KR20210015323A (ko) * 2019-08-01 2021-02-10 현대자동차주식회사 운전자 상태 경고 장치, 차량 및 운전자 상태 경고 방법
US11254286B2 (en) 2019-09-17 2022-02-22 GM Global Technology Operations LLC System and method to disable automated driving mode based on vehicle operation context
EP4288952A4 (en) * 2021-02-04 2024-10-23 Naqi Logix Inc SYSTEMS AND METHODS FOR OPERATOR MONITORING AND FATIGUE DETECTION
DE102021202946A1 (de) 2021-03-25 2022-09-29 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Fahrzeugs mit Notrufeinrichtung in einem Notfallmodus und Notrufeinrichtung für ein Fahrzeug
GB2608627A (en) * 2021-07-07 2023-01-11 Continental Automotive Gmbh A power management system for a motor vehicle and method thereof
IT202200022092A1 (it) * 2022-10-26 2024-04-26 Marco Ceccarelli Dispositivo di monitoraggio per conducente di veicoli

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7134687B2 (en) * 1992-05-05 2006-11-14 Automotive Technologies International, Inc. Rear view mirror monitor
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
US20110241855A1 (en) * 2010-03-30 2011-10-06 Kandis Weaver Combined motion /thermal detection system and method for a vehicle
US20140309876A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Universal vehicle voice command system
US20140240132A1 (en) * 2013-02-28 2014-08-28 Exmovere Wireless LLC Method and apparatus for determining vehicle operator performance
US10339711B2 (en) * 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US20150066284A1 (en) * 2013-09-05 2015-03-05 Ford Global Technologies, Llc Autonomous vehicle control for impaired driver
DE102013019141A1 (de) * 2013-11-15 2015-05-21 Audi Ag Fahrmoduswechsel beim Fahrerassistenzsystem
KR101659027B1 (ko) * 2014-05-15 2016-09-23 엘지전자 주식회사 이동 단말기 및 차량 제어 장치
US9997077B2 (en) * 2014-09-04 2018-06-12 Honda Motor Co., Ltd. Vehicle operation assistance
KR20170057313A (ko) * 2014-09-09 2017-05-24 토르벡 인코포레이티드 웨어러블 디바이스를 활용하여 개인의 각성을 모니터링하고 통보를 제공하기 위한 방법들 및 장치
IN2015DE00754A (ko) * 2015-03-19 2015-04-03 Hcl Technologies Ltd
US9821657B2 (en) * 2015-04-22 2017-11-21 Motorola Mobility Llc Drowsy driver detection
KR20160139756A (ko) * 2015-05-28 2016-12-07 주식회사 엠투브 차량간 비콘 메시지 송수신 시스템 및 방법

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190004547A (ko) * 2017-07-04 2019-01-14 현대자동차주식회사 차량 시스템 및 그 제어 방법
KR101861324B1 (ko) * 2017-08-23 2018-06-04 주식회사 웨어롬 움직임 분석에 기반한 응급상황 판단 시스템 및 방법
WO2019039644A1 (ko) * 2017-08-23 2019-02-28 주식회사 웨어롬 움직임 분석에 기반한 응급상황 판단 시스템 및 방법
KR20210129401A (ko) * 2020-04-20 2021-10-28 백우민 운전자 상태에 기반한 차량 운행 제어 시스템
KR20220060569A (ko) * 2020-11-02 2022-05-12 한국자동차연구원 자율주행 차량의 제어장치 및 방법
CN114081513A (zh) * 2021-12-13 2022-02-25 苏州大学 基于肌电信号的异常驾驶行为检测方法及系统
CN114081513B (zh) * 2021-12-13 2023-04-07 苏州大学 基于肌电信号的异常驾驶行为检测方法及系统

Also Published As

Publication number Publication date
US20170090475A1 (en) 2017-03-30

Similar Documents

Publication Publication Date Title
KR20170036428A (ko) 웨어러블 디바이스를 이용한 운전자 모니터링 방법 및 장치
CN109591823B (zh) 汽车驾驶员健康监测与响应系统
EP3132739B1 (en) Enhancing vehicle system control
US9874862B2 (en) Method and device to monitor and analyze biosignal of user
US8917182B2 (en) System and method for detecting and preventing drowsiness
Lin et al. A real-time wireless brain–computer interface system for drowsiness detection
CN106963348B (zh) 基于行驶环境的用于车辆座椅的生物信号测量系统
WO2016078258A1 (zh) 一种生理体征监测方法、装置及计算机存储介质
KR101970481B1 (ko) 뇌졸중 모니터링 시스템
Collet et al. Associating vehicles automation with drivers functional state assessment systems: A challenge for road safety in the future
CN105007808B (zh) 访问持续时间控制系统和方法
JP2018005343A (ja) 運転支援装置及び運転支援方法
US10297131B2 (en) Providing safe mobility while detecting drowsiness
JP2014100227A (ja) 集中度推定装置、集中度推定方法、運転支援装置及び運転支援方法
KR20110105411A (ko) 무선 측정 생체 신호를 이용한 안전 운전 시스템
EP3357425A1 (en) On-duty/off-duty work alternation planning based on sensed physiological and activity parameters
KR20180046587A (ko) 개인별 수면 패턴 및 생체 리듬 분석을 이용하는 운전자 안전 사고 예방 시스템 및 그 작동 방법
JP2017536946A (ja) 意識状態を決定するデバイスおよび方法
JP7461952B2 (ja) 患者における脳卒中を検出する装置及び方法
WO2014133142A1 (ja) 居眠り予防方法、及び居眠り予防装置
KR20170036168A (ko) 차량 운전자 상태 모니터링 시스템 및 그 방법
CN115959138A (zh) 基于生理数据的驾驶员救援方法、装置及系统
RU2529944C1 (ru) Устройство диагностики работоспособности водителя транспортного средства
US11033214B1 (en) Wearable eye tracking system
Prabhakar et al. Comparing pupil dilation, head movement, and eeg for distraction detection of drivers