[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR102673147B1 - 운전자 보조 시스템 및 그 제어방법 - Google Patents

운전자 보조 시스템 및 그 제어방법 Download PDF

Info

Publication number
KR102673147B1
KR102673147B1 KR1020190011785A KR20190011785A KR102673147B1 KR 102673147 B1 KR102673147 B1 KR 102673147B1 KR 1020190011785 A KR1020190011785 A KR 1020190011785A KR 20190011785 A KR20190011785 A KR 20190011785A KR 102673147 B1 KR102673147 B1 KR 102673147B1
Authority
KR
South Korea
Prior art keywords
vehicle
adjacent
coordinates
image data
adjacent vehicle
Prior art date
Application number
KR1020190011785A
Other languages
English (en)
Other versions
KR20200094378A (ko
Inventor
강보련
Original Assignee
주식회사 에이치엘클레무브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에이치엘클레무브 filed Critical 주식회사 에이치엘클레무브
Priority to KR1020190011785A priority Critical patent/KR102673147B1/ko
Priority to CN201911213041.8A priority patent/CN111497833B/zh
Priority to US16/715,671 priority patent/US11299147B2/en
Priority to EP19219610.3A priority patent/EP3690481B1/en
Publication of KR20200094378A publication Critical patent/KR20200094378A/ko
Application granted granted Critical
Publication of KR102673147B1 publication Critical patent/KR102673147B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • B60W10/184Conjoint control of vehicle sub-units of different type or different function including control of braking systems with wheel brakes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/025Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
    • B62D15/0265Automatic obstacle avoidance by steering
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50Systems of measurement based on relative movement of target
    • G01S13/58Velocity or trajectory determination systems; Sense-of-movement determination systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • B60W2520/105Longitudinal acceleration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4042Longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/806Relative heading
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/08Predicting or avoiding probable or impending collision
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9318Controlling the steering
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/93185Controlling the brakes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93271Sensor installation details in the front of the vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93272Sensor installation details in the back of the vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Electromagnetism (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)

Abstract

개시된 발명의 일 실시예에 따른 운전자 보조 시스템은 차량의 외부 시야를 갖도록 차량에 배치되고, 외부 영상 데이터를 획득하는 카메라; 차량의 외부의 감지 시야를 갖도록 차량에 배치되고, 레이더 데이터를 획득하는 레이더; 및 영상 데이터 및 레이더 데이터를 처리하는 프로세서를 포함하는 제어부;를 포함하고, 제어부는, 카메라에 의해 획득된 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적을 산출하고, 산출된 합류 면적에 기초하여 타겟 차량을 결정하고, 타겟 차량과의 충돌을 회피하도록 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어한다.

Description

운전자 보조 시스템 및 그 제어방법{DRIVER ASSISTANCE SYSTEM AND CONTROLLING METHOD THEREOF}
개시된 발명은 운전자 보조 시스템에 관한 것으로써, 더욱 상세하게는 주행 상황에서 주변 객체와의 충돌을 회피할 수 있는 운전자 보조 시스템 및 그 제어방법에 관한 것이다.
일반적으로 차량은 화석 연료, 전기 등을 동력원으로 하여 도로 또는 선로를 주행하는 이동 수단 또는 운송 수단을 의미한다. 차량은 주로 차체에 설치된 하나 이상의 차륜을 이용하여 여러 위치로 이동할 수 있다. 이와 같은 차량으로는 삼륜 또는 사륜 자동차나, 모터사이클 등의 이륜 자동차나, 건설 기계, 자전거 및 선로 상에 배치된 레일 위에서 주행하는 열차 등이 있을 수 있다.
최근에는 운전자의 부담을 경감시켜주고 편의를 증진시켜주기 위하여 차량 상태, 운전자 상태, 및 주변 환경에 대한 정보를 능동적으로 제공하는 첨단 운전자 보조 시스템(Advanced Driver Assist System; ADAS)이 탑재된 차량에 대한 연구가 활발히 진행되고 있다.
차량에 탑재되는 첨단 운전자 보조 시스템의 일 예로, 전방 충돌 회피 시스템(Forward Collision Avoidance; FCA), 긴급 제동 시스템(Autonomous Emergency Brake; AEB), 운전자 주의 경고 시스템(Driver Attention Warning, DAW) 등이 있다. 이러한 시스템은 차량의 주행 상황에서 객체와의 충돌 위험을 판단하고, 충돌 상황에서 긴급 제동을 통한 충돌 회피 및 경고 제공 시스템이다.
개시된 발명의 일 측면은 차량의 주행 상황에서 근거리에 존재하는 주변 객체와의 충돌을 회피할 수 있는 운전자 보조 시스템 및 운전자 보조 방법을 제공한다.
개시된 발명의 일 측면에 따른 운전자 보조 장치는 차량의 외부 시야를 갖도록 상기 차량에 배치되고, 외부 영상 데이터를 획득하는 카메라; 상기 차량의 외부의 감지 시야를 갖도록 상기 차량에 배치되고, 레이더 데이터를 획득하는 레이더; 및 상기 영상 데이터 및 레이더 데이터를 처리하는 프로세서를 포함하는 제어부;를 포함하고, 상기 제어부는, 상기 카메라에 의해 획득된 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적을 산출하고, 상기 산출된 합류 면적에 기초하여 타겟 차량을 결정하고, 상기 타겟 차량과의 충돌을 회피하도록 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어한다.
또한, 상기 제어부는, 상기 영상 데이터에 기초하여 상기 차량의 주행 차선과 관련된 차선 정보 및 상기 인접 차량에 관한 감지 정보를 획득하고, 상기 감지 정보는 상기 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나를 포함하고, 상기 차선 정보는 상기 주행 차선의 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함할 수 있다.
또한, 상기 제어부는, 상기 영상 데이터에 기초하여 상기 주행 차선과 상기 인접 차량의 접점의 좌표를 획득하고, 상기 감지 정보는 상기 획득된 접점의 좌표를 더 포함할 수 있다.
또한, 상기 제어부는, 상기 차선 정보, 상기 접점의 좌표 및 상기 인접 차량의 꼭지점 좌표에 기초하여 상기 인접 차량의 합류 면적을 산출할 수 있다.
또한, 상기 제어부는, 상기 영상 데이터에 기초하여 상기 인접 차량을 결정하고, 상기 인접 차량은 상기 차량의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량일 수 있다.
또한, 상기 제어부는, 상기 영상 데이터에 기초하여 상기 인접 차량이 합류할 것인지 여부를 결정하고, 상기 인접 차량이 합류할 것으로 결정되면 상기 인접 차량의 합류 면적을 산출할 수 있다.
또한, 상기 제어부는, 상기 영상 데이터에 기초하여 상기 인접 차량의 횡가속도를 산출하고, 상기 산출된 횡가속도가 미리 정해진 조건을 만족하면 상기 인접 차량이 합류할 것으로 결정할 수 있다.
또한, 상기 제어부는, 상기 산출된 합류 면적이 미리 정해진 기준값 이상인 인접 차량을 상기 타겟 차량으로 결정할 수 있다.
또한, 상기 제어부는, 상기 레이더 데이터 또는 상기 영상 데이터 중 적어도 하나에 기초하여 상기 타겟 차량의 속도를 산출하고, 상기 타겟 차량의 속도에 기초하여 목표 가속도를 산출하고, 상기 목표 가속도에 기초하여 상기 제동 장치로 종방향 회피를 위한 제동 신호를 출력할 수 있다.
또한, 상기 제어부는, 상기 종방향 회피가 불가능한 경우, 상기 조향 장치로 횡방향 회피를 위한 조향 신호를 출력할 수 있다.
개시된 발명의 다른 측면에 따른 운전자 보조 장치의 제어방법은 차량의 외부 영상 데이터를 획득하고; 상기 차량의 외부에 대한 레이더 데이터를 획득하고; 상기 영상 데이터 및 레이더 데이터를 처리하고; 상기 획득된 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적을 산출하고; 상기 산출된 합류 면적에 기초하여 타겟 차량을 결정하고; 및 상기 타겟 차량과의 충돌을 회피하도록 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것;을 포함한다.
또한, 상기 영상 데이터에 기초하여 상기 차량의 주행 차선과 관련된 차선 정보 및 상기 인접 차량에 관한 감지 정보를 획득하는 것;을 더 포함하고, 상기 감지 정보는 상기 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나를 포함하고, 상기 차선 정보는 상기 주행 차선의 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함할 수 있다.
또한, 상기 인접 차량에 관한 감지 정보를 획득하는 것은, 상기 영상 데이터에 기초하여 상기 주행 차선과 상기 인접 차량의 접점의 좌표를 획득하는 것;을 포함하고, 상기 감지 정보는 상기 획득된 접점의 좌표를 더 포함할 수 있다.
또한, 상기 인접 차량의 합류(cut-in) 면적을 산출하는 것은, 상기 차선 정보, 상기 접점의 좌표 및 상기 인접 차량의 꼭지점 좌표에 기초하여 상기 인접 차량의 합류 면적을 산출하는 것;을 포함할 수 있다.
또한, 상기 영상 데이터에 기초하여 상기 인접 차량을 결정하는 것;을 더 포함하고, 상기 인접 차량은 상기 차량의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량일 수 있다.
또한, 상기 인접 차량의 합류(cut-in) 면적을 산출하는 것은, 상기 영상 데이터에 기초하여 상기 인접 차량이 합류할 것인지 여부를 결정하고; 및 상기 인접 차량이 합류할 것으로 결정되면 상기 인접 차량의 합류 면적을 산출하는 것;을 포함할 수 있다.
또한, 상기 인접 차량이 합류할 것인지 여부를 결정하는 것은, 상기 영상 데이터에 기초하여 상기 인접 차량의 횡가속도를 산출하고, 상기 산출된 횡가속도가 미리 정해진 조건을 만족하면 상기 인접 차량이 합류할 것으로 결정하는 것;을 포함할 수 있다.
또한, 상기 타겟 차량을 결정하는 것은, 상기 산출된 합류 면적이 미리 정해진 기준값 이상인 인접 차량을 상기 타겟 차량으로 결정하는 것;을 포함할 수 있다.
또한, 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것은, 상기 레이더 데이터 또는 상기 영상 데이터 중 적어도 하나에 기초하여 상기 타겟 차량의 속도를 산출하고; 상기 타겟 차량의 속도에 기초하여 목표 가속도를 산출하고; 및 상기 목표 가속도에 기초하여 상기 제동 장치로 종방향 회피를 위한 제동 신호를 출력하는 것;을 포함할 수 있다.
또한, 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것은, 상기 종방향 회피가 불가능한 경우, 상기 조향 장치로 횡방향 회피를 위한 조향 신호를 출력하는 것;을 더 포함할 수 있다.
개시된 발명의 일 측면에 따르면, 차량과 주위 객체 사이의 충돌을 회피할 수 있는 운전자 보조 시스템 및 운전자 보조 방법을 제공할 수 있으므로, 운전자에게 보다 안전한 주행 환경을 제공할 수 있다.
도 1은 일 실시예에 의한 차량의 구성을 도시한다.
도 2은 일 실시예에 의한 운전자 보조 시스템의 구성을 도시한다.
도 3은 일 실시예에 의한 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한다.
도 4는 종래 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한다.
도 5는 일 실시예에 의한 운전자 보조 시스템의 주행 차선으로 합류하는 차량과의 충돌을 회피하기 위한 동작을 설명하기 위한 도면이다.
도 6은 일 실시예에 의한 운전자 보조 시스템의 제어방법을 나타낸 흐름도이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 개시된 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 '부, 모듈, 부재, 블록'이라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있으며, 실시예들에 따라 복수의 '부, 모듈, 부재, 블록'이 하나의 구성요소로 구현되거나, 하나의 '부, 모듈, 부재, 블록'이 복수의 구성요소들을 포함하는 것도 가능하다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
명세서 전체에서, 어떤 부재가 다른 부재 "상에" 위치하고 있다고 할 때, 이는 어떤 부재가 다른 부재에 접해 있는 경우뿐 아니라 두 부재 사이에 또 다른 부재가 존재하는 경우도 포함한다.
제 1, 제 2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위해 사용되는 것으로, 구성요소가 전술된 용어들에 의해 제한되는 것은 아니다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
각 단계들에 있어 식별부호는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하 첨부된 도면들을 참고하여 개시된 발명의 작용 원리 및 실시예들에 대해 설명한다.
도 1은 일 실시예에 의한 차량의 구성을 도시한다.
도 1에 도시된 바와 같이, 차량(1)은 엔진(10)과, 변속기(20)와, 제동 장치(30)와, 조향 장치(40)를 포함한다. 엔진(10)은 실린더와 피스톤을 포함하며, 차량(1)이 주행하기 위한 동력을 생성할 수 있다. 변속기(20)는 복수의 기어들을 포함하며, 엔진(10)에 의하여 생성된 동력을 차륜까지 전달할 수 있다. 제동 장치(30)는 차륜과의 마찰을 통하여 차량(1)을 감속시키거나 차량(1)을 정지시킬 수 있다. 조향 장치(40)는 차량(1)의 주행 방향을 변경시킬 수 있다.
차량(1)은 복수의 전장 부품들을 포함할 수 있다. 예를 들어, 차량(1)은 엔진 관리 시스템(Engine Management System, EMS) (11)과, 변속기 제어 유닛(Transmission Control Unit, TCU) (21)과, 전자식 제동 제어 모듈(Electronic Brake Control Module) (31)과, 전자식 조향 장치(Electronic Power Steering, EPS) (41)과, 바디 컨트롤 모듈(Body Control Module, BCM)과, 운전자 보조 시스템(Driver Assistance System, DAS)을 더 포함한다.
엔진 관리 시스템(11)은 가속 페달을 통한 운전자의 가속 의지 또는 운전자 보조 시스템(100)의 요청에 응답하여 엔진(10)을 제어할 수 있다. 예를 들어, 엔진 관리 시스템(11)은 엔진(10)의 토크를 제어할 수 있다.
변속기 제어 유닛(21)은 변속 레버를 통한 운전자의 변속 명령 및/또는 차량(1)의 주행 속도에 응답하여 변속기(20)를 제어할 수 있다. 예를 들어, 변속기 제어 유닛(21)은 엔진(10)으로부터 차륜까지의 변속 비율을 조절할 수 있다.
전자식 제동 제어 모듈(31)은 제동 페달을 통한 운전자의 제동 의지 및/또는 차륜들의 슬립(slip)에 응답하여 제동 장치(30)를 제어할 수 있다. 예를 들어, 전자식 제동 제어 모듈(31)은 차량(1)의 제동 시에 감지되는 차륜의 슬립에 응답하여 차륜의 제동을 일시적으로 해제할 수 있다(Anti-lock Braking Systems, ABS). 전자식 제동 제어 모듈(31)은 차량(1)의 조향 시에 감지되는 오버스티어링(oversteering) 및/또는 언더스티어링(understeering)에 응답하여 차륜의 제동을 선택적으로 해제할 수 있다(Electronic stability control, ESC). 또한, 전자식 제동 제어 모듈(31)은 차량(1)의 구동 시에 감지되는 차륜의 슬립에 응답하여 차륜을 일시적으로 제동할 수 있다(Traction Control System, TCS).
전자식 조향 장치(41)는 스티어링 휠을 통한 운전자의 조향 의지에 응답하여 운전자가 쉽게 스티어링 휠을 조작할 수 있도록 조향 장치(40)의 동작을 보조할 수 있다. 예를 들어, 전자식 조향 장치(41)는 저속 주행 또는 주차 시에는 조향력을 감소시키고 고속 주행 시에는 조향력을 증가시키도록 조향 장치(40)의 동작을 보조할 수 있다.
바디 컨트롤 모듈(51)은 운전자에게 편의를 제공하거나 운전자의 안전을 보장하는 전장 부품들의 동작을 제어할 수 있다. 예를 들어, 바디 컨트롤 모듈(51)은 헤드 램프, 와이퍼, 클러스터, 다기능 스위치 및 방향 지시 램프 등을 제어할 수 있다.
운전자 보조 시스템(100)은 운전자가 차량(1)을 조작(구동, 제동, 조향)하는 것을 보조할 수 있다. 예를 들어, 운전자 보조 시스템(100)은 차량(1) 주변의 환경(예를 들어, 다른 차량, 보행자, 사이클리스트(cyclist), 차선, 도로 표지판 등)을 감지하고, 감지된 환경에 응답하여 차량(1)의 구동 및/또는 제동 및/또는 조향을 제어할 수 있다.
운전자 보조 시스템(100)은 운전자에게 다양한 기능을 제공할 수 있다. 예를 들어, 운전자 보조 시스템(100)은 차선 이탈 경고(Lane Departure Warning, LDW)와, 차선 유지 보조(Lane Keeping Assist, LKA)와, 상향등 보조(High Beam Assist, HBA)와, 자동 긴급 제동(Autonomous Emergency Braking, AEB)과, 교통 표지판 인식(Traffic Sign Recognition, TSR)과, 스마트 크루즈 컨트롤(Smart Cruise Control, SCC)과, 사각지대 감지(Blind Spot Detection, BSD) 등을 제공할 수 있다.
운전자 보조 시스템(100)은 차량(1) 주변의 영상 데이터를 획득하는 카메라 모듈(101)과, 차량(1) 주변의 객체 데이터를 획득하는 레이더 모듈(102)을 포함한다.
카메라 모듈(101)은 카메라(101a)와 제어기(Electronic Control Unit, ECU) (101b)를 포함하며, 차량(1)의 전방 또는 측방 중 적어도 하나를 촬영하고 다른 차량, 보행자, 사이클리스트, 차선, 도로 표지판 등을 인식할 수 있다.
레이더 모듈(102)은 레이더(102a)와 제어기(102b)를 포함하며, 차량(1) 주변의 객체(예를 들어, 다른 차량, 보행자, 사이클리스트 등)의 상대 위치, 상대 속도 등을 획득할 수 있다.
이상의 전자 부품들은 차량용 통신 네트워크(NT)를 통하여 서로 통신할 수 있다. 예를 들어, 전장 부품들은 이더넷(Ethernet), 모스트(MOST, Media Oriented Systems Transport), 플렉스레이(Flexray), 캔(CAN, Controller Area Network), 린(LIN, Local Interconnect Network) 등을 통하여 데이터를 주고 받을 수 있다. 예를 들어, 운전자 보조 시스템(100)은 엔진 관리 시스템(11), 전자식 제동 제어 모듈(31) 및 전자식 조향 장치(41)에 각각 차량용 통신 네트워크(NT)를 통하여 구동 제어 신호, 제동 신호 및 조향 신호를 전송할 수 있다.
도 2은 일 실시예에 의한 운전자 보조 시스템의 구성을 도시한다. 도 3은 일 실시예에 의한 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한다.
도 2에 도시된 바와 같이, 차량(1)은 제동 시스템(32)과, 조향 시스템(42)과, 운전자 보조 시스템(100)을 포함할 수 있다.
제동 시스템(32)은 도 1과 함께 설명된 전자식 제동 제어 모듈(31, 도 1 참조)과 제동 장치(30, 도 1 참조)를 포함하며, 조향 시스템(42)은 전자식 조향 장치(41, 도 1 참조)와 조향 장치(40, 도 1 참조)를 포함할 수 있다.
운전자 보조 시스템(100)은 전방 카메라(110)와, 전방 레이더(120)와, 복수의 코너 레이더들(130)을 포함할 수 있다.
전방 카메라(110)는 차량(1)의 전방을 촬영하고, 차량(1) 전방의 영상 데이터를 획득할 수 있다. 차량(1) 전방의 영상 데이터는 차량(1) 전방에 위치하는 다른 차량 또는 보행자 또는 사이클리스트 또는 차선에 관한 위치 정보를 포함할 수 있다.
또한, 전방 카메라(110)는 도 3에 도시된 바와 같이, 차량(1)의 전방 뿐만 아니라 차량(1)의 측방을 향하는 시야(field of view) (110a, 110b)를 가질 수 있다.
전방 카메라(110)는 차량(1)의 전방 뿐만 아니라 차량(1)의 측방에 대한 시각 정보를 포함하는 차량(1) 주변의 외부 영상 데이터를 획득할 수 있다. 이러한 차량(1)의 외부 영상 데이터는 차량(1)의 전방 또는 측방 중 적어도 하나에 위치하는 다른 차량 또는 보행자 또는 사이클리스트 또는 차선에 관한 위치 정보를 포함할 수 있다.
이를 위해, 전방 카메라(110)는 복수의 렌즈들 및 이미지 센서를 포함할 수 있다. 이미지 센서는 광을 전기 신호로 변환하는 복수의 포토 다이오드들을 포함할 수 있으며, 복수의 포토 다이오드들이 2차원 매트릭스로 배치될 수 있다.
전방 카메라(110)는 제어부(140)와 전기적으로 연결될 수 있다. 예를 들어, 전방 카메라(110)는 차량용 통신 네트워크(NT)를 통하여 제어부(140)와 연결되거나, 하드 와이어(hard wire)를 통하여 제어부(140)와 연결되거나, 인쇄 회로 기판(Printed Circuit Board, PCB)을 통하여 제어부(140)와 연결될 수 있다.
전방 카메라(110)는 차량(1) 전방 또는 측방 중 적어도 하나를 포함하는 차량(1) 주변의 외부 영상 데이터를 제어부(140)로 전달할 수 있다.
한편, 전방 카메라(110)는 차량(1)의 전방 또는 측방의 시야를 갖기 위한 위치에 설치될 수 있으며, 예를 들어 차량(1)의 프론트 윈드 쉴드에 설치될 수 있다.
전방 레이더(120)는 차량(1)의 전방을 향하여 송신 전파를 방사하는 송신 안테나(또는 송신 안테나 어레이)와, 객체에 반사된 반사 전파를 수신하는 수신 안테나(또는 수신 안테나 어레이)를 포함할 수 있다. 전방 레이더(120)는 송신 안테나에 의한 송신된 송신 전파와 수신 안테나에 의하여 수신된 반사 전파로부터 전방 레이더 데이터를 획득할 수 있다. 전방 레이더 데이터는 차량(1) 전방에 위치하는 다른 차량 또는 보행자 또는 사이클리스트에 관한 거리 정보 및 속도 정도를 포함할 수 있다. 전방 레이더(120)는 송신 전파와 반사 전파 사이의 위상 차이(또는 시간 차이)에 기초하여 객체까지의 상태 거리를 산출하고, 송신 전파와 반사 전파 사이의 주파수 차이에 기초하여 객체의 상대 속도를 산출할 수 있다.
전방 레이더(120)는 예를 들어 차량용 통신 네트워크(NT) 또는 하드 와이어 또는 인쇄 회로 기판을 통하여 제어부(140)와 연결될 수 있다. 전방 레이더(120)는 전방 레이더 데이터를 제어부(140)로 전달할 수 있다.
전방 레이더(120)는 차량(1)의 전방에 대한 정보를 획득할 수 있는 위치에 설치될 수 있으며, 예를 들어 차량(1)의 그릴(grille) 또는 범퍼(bumper)에 설치될 수 있다.
복수의 코너 레이더들(130)은 차량(1)의 전방 우측에 설치되는 제1 코너 레이더(131)와, 차량(1)의 전방 좌측에 설치되는 제2 코너 레이더(132)와, 차량(1)의 후방 우측에 설치되는 제3 코너 레이더(133)와, 차량(1)의 후방 좌측에 설치되는 제4 코너 레이더(134)를 포함한다.
제1 코너 레이더(131)는 도 3에 도시된 바와 같이 차량(1)의 전방 우측을 향하는 감지 시야 (field of sensing) (131a)를 가질 수 있다. 전방 레이더(120)는 예를 들어 차량(1)의 전방 범퍼의 우측에 설치될 수 있다. 제2 코너 레이더(132)는 차량(1)의 전방 좌측을 향하는 감지 시야(132a)를 가질 수 있으며, 예를 들어 차량(1)의 전방 범퍼의 좌측에 설치될 수 있다. 제3 코너 레이더(133)는 차량(1)의 후방 우측을 향하는 감지 시야(133a)를 가질 수 있으며, 예를 들어 차량(1)의 후방 범퍼의 우측에 설치될 수 있다. 제4 코너 레이더(134)는 차량(1)의 후방 좌측을 향하는 감지 시야(134a)를 가질 수 있으며, 예를 들어 차량(1)의 후방 범퍼의 좌측에 설치될 수 있다.
제1, 제2, 제3 및 제4 코너 레이더들(131, 132, 133, 134) 각각은 송신 안테나와 수신 안테나를 포함할 수 있다. 제1, 제2, 제3 및 제4 코너 레이더들(131, 132, 133, 134)은 각각 제1 코너 레이더 데이터와 제2 코너 레이더 데이터와 제3 코너 레이더 데이터와 제4 코너 레이더 데이터를 획득할 수 있다. 제1 코너 레이더 데이터는 차량(1) 전방 우측에 위치하는 다른 차량 또는 보행자 또는 사이클리스트(이하 "객체"라 한다)에 관한 거리 정보 및 속도 정도를 포함할 수 있다. 제2 코너 레이더 데이터는 차량(1) 전방 좌측에 위치하는 객체의 거리 정보 및 속도 정도를 포함할 수 있다. 제3 및 제4 코너 레이더 데이터는 차량(1) 후방 우측 및 차량(1) 후방 좌측에 위치하는 객체의 거리 정보 및 속도 정보를 포함할 수 있다.
제1, 제2, 제3 및 제4 코너 레이더들(131, 132, 133, 134) 각각은 예를 들어 차량용 통신 네트워크(NT) 또는 하드 와이어 또는 인쇄 회로 기판을 통하여 제어부(140)와 연결될 수 있다. 제1, 제2, 제3 및 제4 코너 레이더들(131, 132, 133, 134)은 각각 제1, 제2, 제3 및 제4 코너 레이더 데이터를 제어부(140)로 전달할 수 있다.
전술한 전방 레이더(120) 및 복수의 코너 레이더(130)를 포함하는 레이더(102a)는 전방 레이더(120)의 전방 레이더 데이터 및 복수의 코너 레이더(130)의 코너 레이더 데이터를 제어부(140)로 전달할 수 있다.
제어부(140)는 카메라 모듈(101, 도 1 참조)의 제어기(101b, 도 1 참조) 및/또는 레이더 모듈(102, 도 1 참조)의 제어기(102b, 도 1 참조) 및/또는 별도의 통합 제어기를 포함할 수 있다.
제어부(140)는 프로세서(141)와 메모리(142)를 포함한다.
프로세서(141)는 전방 카메라(110)의 외부 영상 데이터와 레이더(102a)의 레이더 데이터를 처리하고, 제동 시스템(32) 및 조향 시스템(42)을 제어하기 위한 제동 신호 및 조향 신호를 생성할 수 있다. 예를 들어, 프로세서(141)는 전방 카메라(110)의 외부 영상 데이터를 처리하는 이미지 시그널 프로세서 및/또는 레이더들(102a)의 레이더 데이터를 처리하는 디지털 시그널 프로세서 및/또는 제동 신호와 조향 신호를 생성하는 마이크로 컨트롤 유닛(Micro Control Unit, MCU)를 포함할 수 있다.
프로세서(141)는 전방 카메라(110)의 외부 영상 데이터와 레이더(102a)의 레이더 데이터에 기초하여 차량(1) 전방 또는 측방의 객체들(예를 들어, 다른 차량, 보행자, 사이클리스트 등)을 감지할 수 있다.
구체적으로, 프로세서(141)는 레이더(102a)의 레이더 데이터에 기초하여 차량(1) 전방 또는 후방의 객체들의 위치 정보(거리 및 방향) 및 속도 정보(상대 속도)를 획득할 수 있다. 프로세서(141)는 전방 카메라(110)의 외부 영상 데이터에 기초하여 차량(1) 전방 또는 후방의 객체들의 위치 정보(방향) 및 유형 정보(예를 들어, 객체가 다른 차량인지, 또는 보행자인지, 또는 사이클리스트인지 등)를 획득할 수 있다. 또한, 프로세서(141)는 외부 영상 데이터에 의하여 감지된 객체들을 레이더 데이터에 의한 감지된 객체에 매칭하고, 매칭 결과에 기초하여 차량(1)의 주변 객체들의 유형 정보와 위치 정보와 속도 정보를 획득할 수 있다.
프로세서(141)는 주변 객체들의 유형 정보와 위치 정보와 속도 정보에 기초하여 제동 신호와 조향 신호를 생성할 수 있다.
예를 들어, 프로세서(141)는 주변 객체들의 위치 정보(거리)와 속도 정보(상대 속도)에 기초하여 차량(1)과 주변 객체 사이의 충돌까지의 시간(Time to Collision, TTC)를 산출하고, 충돌까지의 시간과 미리 정해진 기준 시간 사이의 비교 결과에 기초하여 운전자에게 충돌을 경고하거나 제동 신호를 제동 시스템(32)으로 전송할 수 있다. 미리 정해진 제1 기준 시간보다 작은 충돌까지의 시간에 응답하여, 프로세서(141)는 오디오 및/또는 디스플레이를 통한 경고를 출력하도록 할 수 있다. 미리 정해진 제2 기준 시간보다 작은 충돌까지의 시간에 응답하여, 프로세서(141)는 사전 제동 신호를 제동 시스템(32)으로 전송할 수 있다. 미리 정해진 제3 기준 시간보다 작은 충돌까지의 시간에 응답하여, 프로세서(141)는 긴급 제동 신호를 제동 시스템(32)으로 전송할 수 있다. 이때, 제2 기준 시간은 제1 기준 시간보다 작고, 제3 기준 시간은 제2 기준 시간보다 작다.
다른 예로, 프로세서(141)는 주변 객체들의 속도 정보(상대 속도)에 기초하여 충돌까지의 거리(Distance to Collision, DTC)를 산출하고, 충돌까지의 거리와 주변 객체들까지의 거리 사이의 비교 결과에 기초하여 운전자에게 충돌을 경고하거나 제동 신호를 제동 시스템(32)으로 전송할 수 있다.
프로세서(141)는 복수의 코너 레이더들(130)의 코너 레이더 데이터에 기초하여 차량(1) 측방(전방 우측, 전방 좌측, 후방 우측, 후방 좌측)의 객체들의 위치 정보(거리 및 방향) 및 속도 정보(상대 속도)를 획득할 수 있다.
이처럼, 제어부(140)는 전방 또는 측방 객체와의 충돌이 예측되는지 여부에 기초하여 제동 시스템(32) 또는 조향 시스템(42)에 제어 신호를 전송할 수 있다.
측방 객체와의 충돌이 예측되면, 제어부(140)는 측방 객체와의 충돌을 회피하기 위하여 제동 신호를 제동 시스템(32)으로 전송함으로써 종방향(longitudinal) 회피를 할 수 있다. 종방향 회피를 위한 제동 신호를 전송한 이후에도 측방 객체와의 충돌이 예측되면, 제어부(140)는 측방 객체와의 충돌을 회피하기 위하여 조향 신호를 조향 시스템(42)으로 전송함으로써 횡방향(lateral) 회피를 할 수 있다.
또한, 측방 객체가 존재하지 아니하거나 측방 객체와의 충돌이 예측되지 않으면 제어부(140)는 전방 객체와의 충돌을 회피하기 위하여 조향 신호를 조향 시스템(42)으로 전송할 수 있다. 조향 이후 측방 객체와의 충돌이 예측되면 제어부(140)는 조향 신호를 조향 시스템(42)으로 전송하지 아니할 수 있다.
메모리(142)는 프로세서(141)가 영상 데이터를 처리하기 위한 프로그램 및/또는 데이터와, 레이더 데이터를 처리하기 위한 프로그램 및/또는 데이터와, 프로세서(141)가 제동 신호 및/또는 조향 신호를 생성하기 위한 프로그램 및/또는 데이터를 저장할 수 있다.
메모리(142)는 전방 카메라(110)로부터 수신된 영상 데이터 및/또는 레이더들(120, 130)로부터 수신된 레이더 데이터를 임시로 기억하고, 프로세서(141)의 영상 데이터 및/또는 레이더 데이터의 처리 결과를 임시로 기억할 수 있다.
메모리(142)는 S램(S-RAM), D램(D-RAM) 등의 휘발성 메모리뿐만 아니라 플래시 메모리, 롬(Read Only Memory, ROM), 이피롬(Erasable Programmable Read Only Memory: EPROM) 등의 비휘발성 메모리를 포함할 수 있다.
도 1 및 도 2에 도시된 차량(1)의 구성 요소들의 성능에 대응하여 적어도 하나의 구성요소가 추가되거나 삭제될 수 있다. 또한, 구성 요소들의 상호 위치는 시스템의 성능 또는 구조에 대응하여 변경될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
한편, 도 1 및 도 2에서 도시된 각각의 구성요소는 소프트웨어 및/또는 Field Programmable Gate Array(FPGA) 및 주문형 반도체(ASIC, Application Specific Integrated Circuit)와 같은 하드웨어 구성요소를 의미한다.
도 4는 종래 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한 도면이다.
도 4를 참조하면, 종래 운전자 보조 시스템에 포함된 전방 카메라(110')는 차량(1')의 전방을 향하는 시야(field of view)(110a')를 가질 수 있다.
또한, 전방 레이더(120')는 도 4에 도시된 바와 같이 차량(1')의 전방을 향하는 감지 시야(field of sensing) (120a')을 가질 수 있다.
다만, 이러한 전방 카메라(110') 또는 전방 레이더(120')의 시야각(110a', 120a')은 전방에 대하여 제한되어 있다. 따라서, 이러한 제한된 시야각(110a', 120a')의 범위 외에 위치한 주변 객체 대한 정보는 획득하기 어려운 문제가 발생한다.
예를 들어, 차량(1')으로부터 가까운 거리에 위치하는 인접 차량이 차량(1')의 주행 차선으로 합류(cut-in)하는 경우, 이러한 근거리에서의 합류 차량은 제한된 시야각(110a', 120a')에 의하여 감지되지 못할 수 있다. 따라서, 이러한 제한된 시야각(110a', 120a')의 범위 외에 위치한 주변 객체에 대한 충돌을 예방하는 것이 중요하다.
이하, 전술한 종래 운전자 보조 시스템의 제한된 시야각(110a', 120a')에 의한 충돌을 예방하고, 근거리에서의 합류 차량을 보다 빠르게 감지하기 위한, 일 실시예에 따른 운전자 보조 시스템(100)의 동작에 관하여 자세히 설명한다.
도 5는 일 실시예에 의한 운전자 보조 시스템의 주행 차선으로 합류하는 차량과의 충돌을 회피하기 위한 동작을 설명하기 위한 도면이다.
도 5를 참조하면, 일 실시예에 의한 제어부(140)는 전방 카메라(110)에 의해 획득된 외부 영상 데이터에 기초하여 인접 차량을 결정할 수 있다. 이 때, 인접 차량은 차량(1)의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량을 의미한다.
이를 위해, 제어부(140)는 전방 카메라(110)에 의해 획득된 외부 영상 데이터에 기초하여 차량(1)의 주행 차선과 관련된 차선 정보 및 인접 차량에 관한 감지 정보를 획득할 수 있다.
이 때, 차선 정보는 차량(1)의 주행 차선에 관한 정보를 의미하며, 주행 차선의 위치, 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함할 수 있다. 다만, 이에 한정되지 않고, 차선 정보는 차량(1)의 주행 차선에 관한 다양한 정보를 포함할 수 있다.
또한, 감지 정보는 차량(1) 주변의 차량에 대한 정보를 의미하며, 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나를 포함할 수 있다. 이 때, 인접 차량의 꼭지점 좌표는 인접 차량의 각 모서리가 접하는 점을 의미한다. 이 외에도, 감지 정보는 차량(1) 주변의 인접 차량에 관한 다양한 정보를 포함할 수 있다.
또한, 제어부(140)는 외부 영상 데이터에 기초하여 인접 차량이 주행 차선에 접하는지 여부를 확인할 수 있으며, 인접 차량이 주행 차선과 접하는 경우, 주행 차선과 인접 차량의 접점의 좌표를 획득할 수 있다.
이 때, 감지 정보는 차량(1)의 주행 차선과 인접 차량의 접점의 좌표를 더 포함할 수 있다.
인접 차량이 결정되면, 제어부(140)는 외부 영상 데이터에 기초하여 인접 차량이 합류할 것인지 여부를 결정할 수 있다.
구체적으로, 제어부(140)는 외부 영상 데이터에 기초하여 인접 차량의 횡가속도를 산출할 수 있고, 산출된 횡가속도가 미리 정해진 제1조건을 만족하는지 여부에 기초하여 인접 차량이 합류할 것인지 여부를 결정할 수 있다. 이 때, 감지 정보는 인접 차량의 횡가속도를 더 포함할 수 있다.
또는, 제어부(140)는 외부 영상 데이터에 기초하여 획득된 인접 차량의 주행 각도가 미리 정해진 제2조건을 만족하는지 여부에 기초하여 인접 차량이 합류할 것인지 여부를 결정할 수 있다.
또한, 제어부(140)는 외부 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적(S)을 산출할 수 있다.
구체적으로, 인접 차량이 합류할 것으로 결정되면, 제어부(140)는 외부 영상 데이터에 기초하여 획득된 차선 정보 및 인접 차량에 대한 감지 정보에 기초하여 인접 차량의 합류 면적을 산출할 수 있다.
제어부(140)는 차선 정보 및 감지 정보에 기초하여 인접 차량이 주행 차선에 접하는 지점, 즉 인접 차량과 주행 차선의 접점의 좌표를 이용함으로써 인접 차량의 합류 면적을 산출할 수 있다.
구체적으로, 제어부(140)는 인접 차량과 주행 차선의 접점의 좌표 및 인접 차량의 꼭지점 좌표에 기초하여 인접 차량의 합류 면적을 산출할 수 있다. 이 때, 인접 차량의 꼭지점 좌표는 주행 차선 내에 위치한 꼭지점 중 주행 차선으로부터 최대 거리에 있는 꼭지점의 좌표를 의미할 수 있다. 또한, 인접 차량의 꼭지점 좌표는 주행 차선으로부터 종축 최대 좌표를 갖는 꼭지점의 좌표를 의미할 수 있다.
제어부(140)는 인접 차량과 주행 차선의 접점의 좌표 및 인접 차량의 꼭지점 좌표뿐만 아니라 인접 차량의 주행 각도에 기초하여 인접 차량의 합류 면적을 산출할 수 있다.
예를 들어, 도 5에 도시된 바와 같이, 인접 차량(3)이 주행 차선(L1)으로 합류하면, 제어부(140)는 인접 차량(3)과 주행 차선(L1)의 접점(X5, X6)의 좌표 및 인접 차량(3)의 꼭지점 좌표(X1, X2, X3, X4)에 기초하여 인접 차량(3)의 합류 면적(S)를 산출할 수 있다.
제어부(140)는 인접 차량(3)의 주행 각도, 인접 차량(3)과 주행 차선(L1)의 접점(X5, X6)의 좌표, 주행 차선(L1) 내에 위치하고 주행 차선(L1)으로부터 종축 최대 좌표를 갖는 꼭지점(X1)의 좌표에 기초하여 인접 차량(3)의 합류 면적(S)를 산출할 수 있다.
이 때, 제어부(140)는 합류 면적(S)을 산출하기 위하여, 합류 면적(S)을 이루는 다각형의 각 꼭지점 사이의 거리(Sa, Sb, Sc)를 산출할 수 있다.
제어부(140)는 인접 차량의 합류 면적에 기초하여 타겟 차량을 결정할 수 있고, 타겟 차량과의 충돌을 회피하도록 제동 시스템(32) 또는 조향 시스템(42) 중 적어도 하나를 제어할 수 있다. 이 때, 타겟 차량은 충돌을 회피하기 위한 대상 차량을 의미한다.
구체적으로, 제어부(140)는 인접 차량의 합류 면적이 미리 정해진 기준값 이상인지 여부에 기초하여 타겟 차량을 결정할 수 있고, 타겟 차량의 속도에 기초하여 목표 가속도를 산출할 수 있다. 이를 위해, 제어부(140)는 레이더(102a)에 의해 획득된 레이더 데이터 또는 전방 카메라(110)에 의해 획득된 외부 영상 데이터 중 적어도 하나에 기초하여 타겟 차량의 속도(상대속도)를 산출할 수 있다.
제어부(140)는 타겟 차량의 속도에 기초하여 목표 가속도를 산출할 수 있고, 이러한 목표 가속도는 타겟 차량과의 충돌을 회피하기 위하여 필요한 가속도를 의미하며, 타겟 차량을 종방향(longitudinal) 회피하기 위하여 필요한 가속도를 의미할 수 있다.
제어부(140)는 목표 가속도에 기초하여 제동 시스템(32)으로 종방향 회피를 위한 제동 신호를 출력할 수 있다.
종방향 회피를 위한 제동 신호를 전송한 이후에도 타겟 차량과의 충돌이 예측되거나 종방향 회피가 불가한 경우, 제어부(140)는 횡방향(lateral) 회피를 위한 조향 신호를 조향 시스템(42)으로 출력할 수 있다.
한편, 인접 차량이 복수개인 경우, 제어부(140)는 복수개의 인접 차량 각각의 합류 면적을 산출할 수 있고, 이 중 합류 면적이 가장 큰 인접 차량을 타겟 차량으로 결정할 수 있다. 이하 설명은 전술한 바와 동일하다.
도 6은 일 실시예에 의한 운전자 보조 시스템의 제어방법을 나타낸 흐름도이다.
도 6을 참조하면, 일 실시예에 의한 운전자 보조 시스템(1)은 전방 카메라(110)로부터 감지 정보 및 차선 정보를 획득할 수 있다(311). 구체적으로, 운전자 보조 시스템(1)은 전방 카메라(110)로부터 획득한 외부 영상 데이터에 기초하여 감지 정보 및 차선 정보를 획득할 수 있다.
이 때, 이 때, 차선 정보는 차량(1)의 주행 차선에 관한 정보를 의미하며, 주행 차선의 위치, 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함할 수 있다. 다만, 이에 한정되지 않고, 차선 정보는 차량(1)의 주행 차선에 관한 다양한 정보를 포함할 수 있다.
또한, 감지 정보는 차량(1) 주변의 차량에 대한 정보를 의미하며, 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나를 포함할 수 있다. 이 때, 인접 차량의 꼭지점 좌표는 인접 차량의 각 모서리가 접하는 점을 의미한다. 이 외에도, 감지 정보는 차량(1) 주변의 인접 차량에 관한 다양한 정보를 포함할 수 있으며, 주행 차선과 인접 차량의 접점의 좌표 또는 인접 차량의 횡가속도를 더 포함할 수 있다.
이후, 운전자 보조 시스템(1)은 차선 정보 및 감지 정보에 기초하여 인접 차량을 결정할 수 있다(312). 이 때, 인접 차량은 차량(1)의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량을 의미한다.
인접 차량이 결정되면, 운전자 보조 시스템(1)은 차선 정보 및 감지 정보에 기초하여 인접 차량의 합류(cut-in)가 예상되는지 여부를 확인할 수 있다(313). 구체적으로, 운전자 보조 시스템(1)은 인접 차량의 횡가속도가 미리 정해진 제1조건을 만족하는지 여부에 기초하여 인접 차량의 합류가 예상되는지 여부를 결정할 수 있다. 또는, 운전자 보조 시스템(1)은 인접 차량의 주행 각도(heading angle)가 미리 정해진 제2조건을 만족하는지 여부에 기초하여 인접 차량의 합류가 예상되는지 여부를 결정할 수 있다.
인접 차량의 합류가 예상되는 것으로 확인되면(313의 예), 운전자 보조 시스템(1)은 인접 차량의 합류 면적을 산출할 수 있다(314).
구체적으로, 운전자 보조 시스템(1)은 외부 영상 데이터에 기초하여 획득된 차선 정보 및 인접 차량에 대한 감지 정보에 기초하여 인접 차량의 합류 면적을 산출할 수 있다.
운전자 보조 시스템(1)은 차선 정보 및 감지 정보에 기초하여 인접 차량이 주행 차선에 접하는 지점, 즉 인접 차량과 주행 차선의 접점의 좌표를 이용함으로써 인접 차량의 합류 면적을 산출할 수 있다.
운전자 보조 시스템(1)은 인접 차량과 주행 차선의 접점의 좌표 및 인접 차량의 꼭지점 좌표에 기초하여 인접 차량의 합류 면적을 산출할 수 있다. 이 때, 인접 차량의 꼭지점 좌표는 주행 차선 내에 위치한 꼭지점 중 주행 차선으로부터 최대 거리에 있는 꼭지점의 좌표를 의미할 수 있다. 또한, 인접 차량의 꼭지점 좌표는 주행 차선으로부터 종축 최대 좌표를 갖는 꼭지점의 좌표를 의미할 수 있다.
운전자 보조 시스템(1)은 인접 차량과 주행 차선의 접점의 좌표 및 인접 차량의 꼭지점 좌표뿐만 아니라 인접 차량의 주행 각도에 기초하여 인접 차량의 합류 면적을 산출할 수 있다.
이후, 운전자 보조 시스템(1)은 인접 차량의 합류 면적에 기초하여 타겟 차량을 결정할 수 있다(315). 이 때, 타겟 차량은 충돌을 회피하기 위한 대상 차량을 의미한다.
구체적으로, 운전자 보조 시스템(1)은 인접 차량의 합류 면적이 미리 정해진 기준값 이상인지 여부에 기초하여 타겟 차량을 결정할 수 있다. 이 때, 인접 차량이 복수개인 경우, 운전자 보조 시스템(1)은 복수개의 인접 차량 각각의 합류 면적을 산출할 수 있고, 이 중 합류 면적이 가장 큰 인접 차량을 타겟 차량으로 결정할 수 있다.
타겟 차량이 결정되면, 운전자 보조 시스템(1)은 타겟 차량의 속도를 감지할 수 있고(316), 타겟 차량의 속도에 기초하여 목표 가속도를 결정할 수 있다(317). 이 때, 목표 가속도는 타겟 차량과의 충돌을 회피하기 위하여 필요한 가속도를 의미하며, 타겟 차량을 종방향(longitudinal) 회피하기 위하여 필요한 가속도를 의미할 수 있다.
목표 가속도를 결정되면, 운전자 보조 시스템(1)은 목표 가속도에 기초하여 제동 시스템(32) 또는 조향 시스템(42) 중 적어도 하나를 제어할 수 있다(318).
구체적으로, 운전자 보조 시스템(1)은 목표 가속도에 기초하여 제동 시스템(32)으로 종방향 회피를 위한 제동 신호를 출력할 수 있다.
종방향 회피를 위한 제동 신호를 전송한 이후에도 타겟 차량과의 충돌이 예측되거나 종방향 회피가 불가한 경우, 운전자 보조 시스템(1)은 횡방향(lateral) 회피를 위한 조향 신호를 조향 시스템(42)으로 출력할 수 있다.
이를 통해, 근거리에서 주행 차선으로 합류하는 차량을 보다 빠르게 감지할 수 있으며, 이에 따라 충돌을 회피하는 동작이 수행될 수 있으므로, 운전자에게 보다 안전한 주행 환경을 제공할 수 있다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래시 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
1: 차량
100: 운전자 보조 시스템
110: 전방 카메라
102a: 레이더
120: 전방 레이더
130: 복수의 코너 레이더들
131: 제1 코너 레이더
132: 제2 코너 레이더
133: 제3 코너 레이더
134: 제4 코너 레이더
140: 제어부

Claims (20)

  1. 차량의 외부 시야를 갖도록 상기 차량에 배치되고, 외부 영상 데이터를 획득하는 카메라;
    상기 차량의 외부의 감지 시야를 갖도록 상기 차량에 배치되고, 레이더 데이터를 획득하는 레이더; 및
    상기 영상 데이터 및 상기 레이더 데이터를 처리하는 프로세서를 포함하는 제어부;를 포함하고,
    상기 제어부는,
    상기 카메라에 의해 획득된 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적을 산출하고, 상기 산출된 합류 면적에 기초하여 타겟 차량을 결정하고, 상기 타겟 차량과의 충돌을 회피하도록 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하며,
    상기 제어부는,
    상기 영상 데이터에 기초하여 상기 차량의 주행 차선과 관련된 차선 정보 및 상기 인접 차량에 관한 감지 정보를 획득하고,
    상기 차선 정보 및 상기 감지 정보를 기초로 상기 인접 차량의 합류 면적을 산출하며,
    상기 감지 정보는 상기 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나와, 상기 주행 차선과 상기 인접 차량의 접점의 좌표를 포함하고,
    상기 차선 정보는 상기 주행 차선의 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함하는 운전자 보조 시스템.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 제어부는,
    상기 차선 정보, 상기 접점의 좌표 및 상기 인접 차량의 꼭지점 좌표에 기초하여 상기 인접 차량의 합류 면적을 산출하는 운전자 보조 시스템.
  5. 제1항에 있어서,
    상기 제어부는,
    상기 영상 데이터에 기초하여 상기 인접 차량을 결정하고,
    상기 인접 차량은 상기 차량의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량인 운전자 보조 시스템.
  6. 제1항에 있어서,
    상기 제어부는,
    상기 영상 데이터에 기초하여 상기 인접 차량이 합류할 것인지 여부를 결정하고, 상기 인접 차량이 합류할 것으로 결정되면 상기 인접 차량의 합류 면적을 산출하는 운전자 보조 시스템.
  7. 제6항에 있어서,
    상기 제어부는,
    상기 영상 데이터에 기초하여 상기 인접 차량의 횡가속도를 산출하고, 상기 산출된 횡가속도가 미리 정해진 조건을 만족하면 상기 인접 차량이 합류할 것으로 결정하는 운전자 보조 시스템.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 산출된 합류 면적이 미리 정해진 기준값 이상인 인접 차량을 상기 타겟 차량으로 결정하는 운전자 보조 시스템.
  9. 제1항에 있어서,
    상기 제어부는,
    상기 레이더 데이터 또는 상기 영상 데이터 중 적어도 하나에 기초하여 상기 타겟 차량의 속도를 산출하고, 상기 타겟 차량의 속도에 기초하여 목표 가속도를 산출하고, 상기 목표 가속도에 기초하여 상기 제동 장치로 종방향 회피를 위한 제동 신호를 출력하는 운전자 보조 시스템.
  10. 제9항에 있어서,
    상기 제어부는,
    상기 종방향 회피가 불가능한 경우, 상기 조향 장치로 횡방향 회피를 위한 조향 신호를 출력하는 운전자 보조 시스템.
  11. 차량의 외부 영상 데이터를 획득하고;
    상기 차량의 외부에 대한 레이더 데이터를 획득하고;
    상기 영상 데이터 및 레이더 데이터를 처리하고;
    상기 획득된 영상 데이터에 기초하여 인접 차량의 합류(cut-in) 면적을 산출하고;
    상기 산출된 합류 면적에 기초하여 타겟 차량을 결정하고; 및
    상기 타겟 차량과의 충돌을 회피하도록 상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것;을 포함하며,
    상기 영상 데이터에 기초하여 상기 차량의 주행 차선과 관련된 차선 정보 및 상기 인접 차량에 관한 감지 정보를 획득하는 것을 더 포함하고,
    상기 인접 차량의 합류 면적을 산출하는 것은,
    상기 차선 정보 및 상기 감지 정보를 기초로 하며,
    상기 감지 정보는 상기 인접 차량의 꼭지점 좌표, 종방향(longitudinal) 최소 좌표, 횡방향(lateral) 최소 좌표, 종방향 최대 좌표, 횡방향 최소 좌표, 폭, 길이, 주행 각도(heading angle) 중 적어도 하나와, 상기 주행 차선과 상기 인접 차량의 접점의 좌표를 포함하고,
    상기 차선 정보는 상기 주행 차선의 좌표, 궤적, 폭, 각도, 간격 중 적어도 하나를 포함하는 운전자 보조 시스템의 제어방법.
  12. 삭제
  13. 삭제
  14. 제11항에 있어서,
    상기 인접 차량의 합류(cut-in) 면적을 산출하는 것은,
    상기 차선 정보, 상기 접점의 좌표 및 상기 인접 차량의 꼭지점 좌표에 기초하여 상기 인접 차량의 합류 면적을 산출하는 것;을 포함하는 운전자 보조 시스템의 제어방법.
  15. 제11항에 있어서,
    상기 영상 데이터에 기초하여 상기 인접 차량을 결정하는 것;을 더 포함하고,
    상기 인접 차량은 상기 차량의 주행 차선의 좌측 또는 우측 중 적어도 하나의 차선에 있는 차량인 운전자 보조 시스템의 제어방법.
  16. 제11항에 있어서,
    상기 인접 차량의 합류(cut-in) 면적을 산출하는 것은,
    상기 영상 데이터에 기초하여 상기 인접 차량이 합류할 것인지 여부를 결정하고; 및
    상기 인접 차량이 합류할 것으로 결정되면 상기 인접 차량의 합류 면적을 산출하는 것;을 포함하는 운전자 보조 시스템의 제어방법.
  17. 제16항에 있어서,
    상기 인접 차량이 합류할 것인지 여부를 결정하는 것은,
    상기 영상 데이터에 기초하여 상기 인접 차량의 횡가속도를 산출하고, 상기 산출된 횡가속도가 미리 정해진 조건을 만족하면 상기 인접 차량이 합류할 것으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어방법.
  18. 제11항에 있어서,
    상기 타겟 차량을 결정하는 것은,
    상기 산출된 합류 면적이 미리 정해진 기준값 이상인 인접 차량을 상기 타겟 차량으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어방법.
  19. 제11항에 있어서,
    상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것은,
    상기 레이더 데이터 또는 상기 영상 데이터 중 적어도 하나에 기초하여 상기 타겟 차량의 속도를 산출하고;
    상기 타겟 차량의 속도에 기초하여 목표 가속도를 산출하고; 및
    상기 목표 가속도에 기초하여 상기 제동 장치로 종방향 회피를 위한 제동 신호를 출력하는 것;을 포함하는 운전자 보조 시스템의 제어방법.
  20. 제19항에 있어서,
    상기 차량의 제동 장치 또는 조향 장치 중 적어도 하나를 제어하는 것은,
    상기 종방향 회피가 불가능한 경우, 상기 조향 장치로 횡방향 회피를 위한 조향 신호를 출력하는 것;을 더 포함하는 운전자 보조 시스템의 제어방법.
KR1020190011785A 2019-01-30 2019-01-30 운전자 보조 시스템 및 그 제어방법 KR102673147B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020190011785A KR102673147B1 (ko) 2019-01-30 2019-01-30 운전자 보조 시스템 및 그 제어방법
CN201911213041.8A CN111497833B (zh) 2019-01-30 2019-12-02 驾驶员辅助系统及其控制方法
US16/715,671 US11299147B2 (en) 2019-01-30 2019-12-16 Driver assistance system and control method thereof
EP19219610.3A EP3690481B1 (en) 2019-01-30 2019-12-24 Driver assistance system and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190011785A KR102673147B1 (ko) 2019-01-30 2019-01-30 운전자 보조 시스템 및 그 제어방법

Publications (2)

Publication Number Publication Date
KR20200094378A KR20200094378A (ko) 2020-08-07
KR102673147B1 true KR102673147B1 (ko) 2024-06-07

Family

ID=69024173

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190011785A KR102673147B1 (ko) 2019-01-30 2019-01-30 운전자 보조 시스템 및 그 제어방법

Country Status (4)

Country Link
US (1) US11299147B2 (ko)
EP (1) EP3690481B1 (ko)
KR (1) KR102673147B1 (ko)
CN (1) CN111497833B (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10460534B1 (en) * 2015-10-26 2019-10-29 Allstate Insurance Company Vehicle-to-vehicle accident detection
US10303166B2 (en) * 2016-05-23 2019-05-28 nuTonomy Inc. Supervisory control of vehicles
JP7261635B2 (ja) * 2019-03-28 2023-04-20 本田技研工業株式会社 車両制御装置
KR20210114689A (ko) * 2020-03-11 2021-09-24 주식회사 만도 차량 및 그 제어 방법
CN111950504B (zh) * 2020-08-21 2024-04-16 东软睿驰汽车技术(沈阳)有限公司 车辆检测方法、装置以及电子设备
CN112248986B (zh) * 2020-10-23 2021-11-05 厦门理工学院 一种车辆自动制动方法、装置、设备和存储介质
KR20220056922A (ko) * 2020-10-28 2022-05-09 현대자동차주식회사 자율주행 제어 장치 및 방법
CN112428989B (zh) * 2020-10-30 2022-03-11 惠州华阳通用电子有限公司 一种车辆控制方法
CN112863195B (zh) * 2021-03-18 2022-06-14 浙江大华技术股份有限公司 车辆状态的确定方法及装置
EP4130789A1 (en) 2021-08-03 2023-02-08 GM Cruise Holdings LLC Radar system that uses velocity labeled multiplexing for generating detections
CN115158306B (zh) * 2022-07-27 2024-06-04 广州小鹏自动驾驶科技有限公司 车辆避让方法、装置、终端设备以及存储介质
CN116653979B (zh) * 2023-05-31 2024-01-05 钧捷智能(深圳)有限公司 一种驾驶员视场范围光线追踪方法及dms系统
CN118651237A (zh) * 2024-08-19 2024-09-17 比亚迪股份有限公司 变道检测方法、电子设备、车辆和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007176290A (ja) * 2005-12-27 2007-07-12 Fuji Heavy Ind Ltd 運転支援装置
KR101519287B1 (ko) * 2014-02-14 2015-05-11 현대자동차주식회사 차량 충돌 방지 장치 및 그 방법
JP2018067102A (ja) * 2016-10-18 2018-04-26 株式会社デンソー 車両制御装置
US20180141545A1 (en) 2016-11-21 2018-05-24 NextEv USA, Inc. Systems and methods for automatically disengaging a braking function of a vehicle

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06265348A (ja) * 1993-03-12 1994-09-20 Mitsubishi Electric Corp 車間距離検出装置
US6894608B1 (en) * 1999-07-22 2005-05-17 Altra Technologies Incorporated System and method for warning of potential collisions
US6636148B2 (en) 2000-09-04 2003-10-21 Fujitsu Ten Limited Periphery monitoring system
JP2003123196A (ja) * 2001-10-10 2003-04-25 Denso Corp 車両の周辺監視装置及びプログラム
JP3868915B2 (ja) * 2003-03-12 2007-01-17 株式会社東芝 前方監視装置及びその方法
US7444241B2 (en) * 2005-12-09 2008-10-28 Gm Global Technology Operations, Inc. Method for detecting or predicting vehicle cut-ins
JP2008117073A (ja) * 2006-11-01 2008-05-22 Fuji Heavy Ind Ltd 割り込み車両検出装置
KR101293108B1 (ko) * 2009-05-29 2013-08-12 주식회사 만도 자동차의 제어방법
CN103832433B (zh) * 2012-11-21 2016-08-10 中国科学院沈阳计算技术研究所有限公司 车道偏离及前车防碰撞报警系统及其实现方法
JP5729416B2 (ja) * 2013-04-26 2015-06-03 株式会社デンソー 衝突判定装置、および衝突緩和装置
EP3141926B1 (en) 2015-09-10 2018-04-04 Continental Automotive GmbH Automated detection of hazardous drifting vehicles by vehicle sensors
EP3850548A1 (en) * 2018-09-11 2021-07-21 NVIDIA Corporation Future object trajectory predictions for autonomous machine applications
KR102572784B1 (ko) * 2018-10-25 2023-09-01 주식회사 에이치엘클레무브 운전자 보조 시스템 및 그 제어방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007176290A (ja) * 2005-12-27 2007-07-12 Fuji Heavy Ind Ltd 運転支援装置
KR101519287B1 (ko) * 2014-02-14 2015-05-11 현대자동차주식회사 차량 충돌 방지 장치 및 그 방법
JP2018067102A (ja) * 2016-10-18 2018-04-26 株式会社デンソー 車両制御装置
US20180141545A1 (en) 2016-11-21 2018-05-24 NextEv USA, Inc. Systems and methods for automatically disengaging a braking function of a vehicle

Also Published As

Publication number Publication date
US11299147B2 (en) 2022-04-12
CN111497833A (zh) 2020-08-07
US20200238982A1 (en) 2020-07-30
EP3690481A1 (en) 2020-08-05
CN111497833B (zh) 2024-08-02
EP3690481B1 (en) 2023-11-29
KR20200094378A (ko) 2020-08-07

Similar Documents

Publication Publication Date Title
KR102673147B1 (ko) 운전자 보조 시스템 및 그 제어방법
KR102715606B1 (ko) 운전자 보조 시스템, 그를 가지는 차량 및 그 제어 방법
EP3644090A1 (en) Driver assistance system and control method thereof
US11840223B2 (en) Driver assistant system and method of controlling the same
KR102695891B1 (ko) 운전자 보조 장치
KR102572785B1 (ko) 운전자 보조 시스템
US20200242941A1 (en) Driver assistance system, and control method the same
US11634120B2 (en) Driver assistance system and driver assistance method
KR102589617B1 (ko) 운전자 보조 시스템
US20210188259A1 (en) Driver assistance apparatus and driver assisting method
US12091000B2 (en) Driver assistance system and control method thereof
KR102440265B1 (ko) 운전자 보조 시스템
KR102700168B1 (ko) 운전자 보조 시스템
KR102618041B1 (ko) 운전자 보조 시스템 및 그 방법
KR20200094629A (ko) 운전자 보조 시스템 및 그 제어 방법
US12043310B2 (en) Driver assistance system and control method for the same
US11840220B2 (en) Driver assistance system and control method thereof
KR102413484B1 (ko) 운전자 보조 시스템 및 그 방법
US20220410879A1 (en) Vehicle and control method thereof
KR20220166119A (ko) 운전자 보조 시스템 및 그 제어 방법
KR20230118727A (ko) 운전자 보조 시스템 및 그의 방법
KR20220085084A (ko) 운전자 보조 시스템 및 그 제어 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant