[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR101816635B1 - System and Service Method for Driving Assist of Vehicle - Google Patents

System and Service Method for Driving Assist of Vehicle Download PDF

Info

Publication number
KR101816635B1
KR101816635B1 KR1020160087585A KR20160087585A KR101816635B1 KR 101816635 B1 KR101816635 B1 KR 101816635B1 KR 1020160087585 A KR1020160087585 A KR 1020160087585A KR 20160087585 A KR20160087585 A KR 20160087585A KR 101816635 B1 KR101816635 B1 KR 101816635B1
Authority
KR
South Korea
Prior art keywords
terminal
driver
vehicle
driving
intention
Prior art date
Application number
KR1020160087585A
Other languages
Korean (ko)
Inventor
이강
김우중
양홍민
황다니엘
Original Assignee
한동대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한동대학교 산학협력단 filed Critical 한동대학교 산학협력단
Priority to KR1020160087585A priority Critical patent/KR101816635B1/en
Application granted granted Critical
Publication of KR101816635B1 publication Critical patent/KR101816635B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • G06K9/00798
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • B60W2550/22
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/60Traffic rules, e.g. speed limits or right of way

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

Provided are a driving assistance system and service method for a vehicle. The driving assistance service method according to the present invention comprises the steps of: capturing an image of the driving state of a vehicle using a camera or a sensor of a first terminal for providing a vehicle driving assistance service, and inputting/storing the captured image; analyzing the input and stored image to analyze the driving state including lane information, traffic information, and surroundings information, and recognizing a road rule in accordance with the driving state; informing a driver of a recommendation on the driving state based on a result of the analysis and recognition; receiving the drivers intention for the first terminal and the drivers intention for a second terminal to provide vehicle driving assistance services for the driving state through touch recognition or voice recognition; and sharing the driving state to which the drivers intention of the first terminal and the intention of the driver of the second terminal are reflected, in real time between the first terminal and second terminal.

Description

차량의 운전 보조 시스템 및 서비스 방법{System and Service Method for Driving Assist of Vehicle}Technical Field [0001] The present invention relates to a driving assistance system for a vehicle,

본 발명은 차량의 운전 보조 시스템 및 서비스 방법에 관한 것으로, 신호의 변화와 표지판을 읽어 운전자의 주행 상태에 대한 권장사항을 운전자에게 통보하는 시스템 및 서비스 방법에 관한 것이다.The present invention relates to a driving assistance system and a service method for a vehicle, and more particularly, to a system and a service method for notifying a driver of a recommendation on a driving state of a driver by reading a sign and a signal change.

자동차 기술에 발전으로 카메라를 통해 차선이나 주변환경의 변화를 인식하고 운전을 보조하는 시스템에 대한 연구가 활발해지고 있다. 하지만 이러한 기능의 시스템은 일부 차량에만 장착되어있다. 그리고 종래의 카메라를 포함한 단말기들은 도로 환경의 변화를 인식하고, 이에 관한 정보를 운전자에게 제공하는 기능을 제공하지 못하고 있다. 따라서 차선이나 주변환경의 변화를 인식하고 운전을 보조하는 시스템을 이용하기 위해서는 고가의 비용을 지불해야 되는 어려움이 있다. As the automobile technology develops, there is an active research on a system that recognizes the change of the lane or the surrounding environment through the camera and assists the driving. However, systems with this function are only fitted in some vehicles. Conventional terminals including a camera do not provide a function of recognizing a change in the road environment and providing information about the change to the driver. Therefore, it is difficult to pay a high cost to use a system that recognizes the change of the lane or the surrounding environment and assists the driving.

본 발명이 이루고자 하는 기술적 과제는 사용자가 쉽게 접근할 수 있는 단말을 통해 사용자가 프로그램을 실행함에 따라 주행환경을 인식하고 그에 따른 적절한 알림을 제공 받기 위한 방법 및 시스템을 제공하는데 있다. 또한, 사용자의 설정에 따라 알림을 음성 또는 디스플레이 화면에 떠오르는 메시지로 전달받을 수 있고, 이에 응답하여 운전자들의 의사가 반영된 주행 상태를 공유할 수 있다. 또한, 사용자의 터치 신호에 반응해 실시간으로 영상을 녹화하여 후에 주행기록이 필요할 경우 녹화된 영상을 이용할 수도 있다.SUMMARY OF THE INVENTION The present invention provides a method and system for recognizing a driving environment according to a user's execution of a program through a terminal that can be easily accessed by a user and receiving appropriate notification. Also, according to the setting of the user, the notification can be received as a voice or a message rising on the display screen, and in response, the driving state in which the intention of the driver is reflected can be shared. In addition, it is also possible to record an image in real time in response to a user's touch signal, and to use the recorded image if the driving record is needed later.

일 측면에 있어서, 본 발명에서 제안하는 차량의 운전 보조 서비스 방법은 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장하는 단계, 상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식하는 단계, 상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알리는 단계, 상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 단계, 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 단계를 포함한다. According to an aspect of the present invention, there is provided a driving assistance service method for a vehicle, comprising: capturing a driving state of a vehicle using a camera or a sensor of a first terminal for providing a driving assistance service of the vehicle; Analyzing the input and stored images, analyzing the driving state including the traffic lights and signboard information, recognizing road rules according to the driving conditions, and analyzing the traffic lights and signboard information according to the analysis and recognition results, To provide a driving assistance service of the driver of the first terminal for providing the driving assistance service of the vehicle through touch recognition or voice recognition to the driving state, Receiving a driver's intention of the second terminal, respectively, The second terminal of the first driving condition of the driver is reflected in the doctor terminal and a step of sharing in real time between the second terminal.

상기 촬영된 영상 및 상기 분석 및 인식 결과는 운전자의 설정에 따라 미리 정해진 기간 동안 데이터베이스에 저장될 수 있고, 상기 제1 단말 및 상기 제2 단말 간에 공유된다. The photographed image and the analysis and recognition result may be stored in a database for a predetermined period according to a driver's setting, and are shared between the first terminal and the second terminal.

상기 분석 및 인식 결과에 따른 주행 상태에 대한 권장 사항을 운전자에게 알리는 단계는 신호대기중인 차량의 운전자가 신호 변화를 인지하지 못한 경우, 상기 신호 변화에 대한 권장 사항을 운전자에게 알리거나 또는 자율주행 차량인 경우 차량 주행 제어 장치에 상기 권장 사항에 대한 신호를 보내고, 운전자의 설정에 따라 상기 권장 사항에 대한 알림을 음성으로 전달하거나 또는 디스플레이 화면을 통해 팝업 메시지로 전달한다. The step of informing the driver of the recommendation of the driving state according to the analysis and recognition result may include notifying the driver of a recommendation for the signal change when the driver of the vehicle waiting in the signal is not aware of the signal change, , A signal is transmitted to the vehicle driving control device about the recommendation, and a notification of the recommendation is delivered by voice or a pop-up message on the display screen according to the driver's setting.

상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 단계는 상기 주행 상태에 대한 권장 사항에 응답하여 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사를 입력 받아 상기 권장 사항에 반영하는 단계를 포함한다. Receiving a driver's intention of the first terminal and a driver's intention of the second terminal for providing the driver's assistant service of the vehicle to provide driving assistance service of the vehicle through touch recognition or speech recognition to the running state, Includes a step of receiving a driver's intention of the first terminal and a driver's intention of the second terminal in response to a recommendation for the running state and reflecting the intention to the recommendation.

상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 단계는 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태에 대한 권장 사항을 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자에게 알리기 위해 공유하는 단계를 포함한다. Wherein the step of sharing in real time between the first terminal and the second terminal a traveling state reflecting a driver's intention of the first terminal and a driver's intention of the second terminal includes: And sharing a recommendation for the driving state of the terminal reflecting the intention of the driver to inform the driver of the first terminal and the driver of the second terminal.

또 다른 일 측면에 있어서, 본 발명에서 제안하는 차량의 운전 보조 시스템은 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 받고, 입력된 영상을 데이터베이스에 저장하도록 하는 카메라 및 센서부, 상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식하는 분석부, 상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알리는 알림부, 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 입력부, 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 통신부를 포함한다. According to another aspect of the present invention, there is provided a driving assistance system for a vehicle, comprising: a camera and a sensor unit for photographing a running state of a vehicle, receiving a photographed image and storing the input image in a database, An analysis unit for analyzing a stored image to analyze a running state including a traffic light and a signboard information and recognizing a road condition according to the running state, a recommendation for a running state including a traffic light and a signboard information according to the analysis and recognition result The driver's intention of the first terminal for providing the driving assistance service of the vehicle through the touch recognition or voice recognition, and the intention of the driver of the second terminal for providing the driving assistance service of the vehicle, An input receiving unit, a state in which the intention of the driver of the first terminal and the intention of the driver of the second terminal are reflected And a communication unit for sharing a line status between the first terminal and the second terminal in real time.

상기 데이터베이스에 저장된 촬영된 영상 및 상기 분석 및 인식 결과는 상기 통신부를 통해 상기 제1 단말 및 상기 제2 단말 간에 공유된다. The photographed image stored in the database and the analysis and recognition result are shared between the first terminal and the second terminal through the communication unit.

상기 알림부는 신호대기중인 차량의 운전자가 신호 변화를 인지하지 못한 경우, 상기 신호 변화에 대한 권장 사항을 운전자에게 알리거나 또는 자율주행 차량인 경우 차량 주행 제어 장치에 상기 권장 사항에 대한 신호를 보내고, 운전자의 설정에 따라 상기 권장 사항에 대한 알림을 음성으로 전달하거나 또는 디스플레이 화면을 통해 팝업 메시지로 전달한다. The notification unit informs the driver of a recommendation for the signal change if the driver of the vehicle waiting for the signal is not aware of the signal change, or sends a signal to the vehicle drive control device about the recommendation in the case of the autonomous vehicle, According to the setting of the driver, a notification of the recommendation is delivered by voice or a pop-up message is transmitted through a display screen.

상기 입력부는 상기 주행 상태에 대한 권장 사항에 응답하여 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사를 입력 받아 상기 권장 사항에 반영한다. The input unit receives the driver's intention of the first terminal and the driver's intention of the second terminal in response to the recommendation for the running state, and reflects the recommendation.

상기 통신부는 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태에 대한 권장 사항을 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자에게 알리기 위해 공유한다.The communication unit shares a recommendation for the driving state of the first terminal reflecting the driver's intention and the intention of the driver of the second terminal to inform the driver of the first terminal and the driver of the second terminal.

본 발명의 실시예들에 따르면 사용자가 쉽게 접근할 수 있는 단말을 통해 사용자가 프로그램을 실행함에 따라 주행환경을 인식하고 그에 따른 적절한 알림을 제공 받을 수 있다. 또한, 사용자의 설정에 따라 알림을 음성 또는 디스플레이 화면에 떠오르는 메시지로 전달받을 수 있고, 이에 응답하여 운전자들의 의사가 반영된 주행 상태를 공유할 수 있다. 또한, 사용자의 터치 신호에 반응해 실시간으로 영상을 녹화하여 후에 주행기록이 필요할 경우 녹화된 영상을 이용할 수도 있다. According to the embodiments of the present invention, the user can recognize the driving environment and receive appropriate notification according to the execution of the program through the terminal which can be easily accessed by the user. Also, according to the setting of the user, the notification can be received as a voice or a message rising on the display screen, and in response, the driving state in which the intention of the driver is reflected can be shared. In addition, it is also possible to record an image in real time in response to a user's touch signal, and to use the recorded image if the driving record is needed later.

도 1은 본 발명의 일 실시예에 따른 차량의 운전 보조 서비스 방법을 설명하기 위한 흐름도이다.
도 2는 본 발명의 일 실시예에 따른 차량의 운전 보조 시스템의 구성을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 주행 상태를 나타내는 예시도이다.
도 4는 본 발명의 일 실시예에 따른 주행 상태에 대한 권장 사항을 운전자에게 알리는 과정을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시예에 따른 운전자들 간에 주행 상태를 공유하는 과정을 설명하기 위한 예시도이다.
도 6은 본 발명의 일 실시예에 따른 운전자들 간에 공유된 주행 상태가 표시되는 디스플레이를 나타내는 도면이다.
1 is a flowchart illustrating a driving assistance service method of a vehicle according to an embodiment of the present invention.
2 is a diagram showing the configuration of a driving assistance system of a vehicle according to an embodiment of the present invention.
3 is an exemplary view showing a running state according to an embodiment of the present invention.
4 is a diagram illustrating a process of informing a driver of a recommendation for a running state according to an embodiment of the present invention.
5 is an exemplary diagram for explaining a process of sharing a driving state among drivers according to an embodiment of the present invention.
FIG. 6 is a view illustrating a display in which a running state shared among drivers is displayed according to an embodiment of the present invention. FIG.

이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 차량의 운전 보조 서비스 방법을 설명하기 위한 흐름도이다. 1 is a flowchart illustrating a driving assistance service method of a vehicle according to an embodiment of the present invention.

제안하는 차량의 운전 보조 서비스 방법은 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장하는 단계(110), 상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보, 차선 정보, 교통 정보 및 주변 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식하는 단계(120), 상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알리는 단계(130), 상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 단계(140), 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 단계(150)를 포함한다. The driving assistance service method of the present invention includes a step 110 of photographing a driving state of a vehicle using a camera or a sensor of a first terminal for providing a driving assistance service of a vehicle, inputting and storing the photographed image, Analyzing the inputted and stored images and analyzing the driving conditions including the traffic lights and signboard information, the lane information, the traffic information, and the surrounding information, and recognizing the road conditions according to the driving conditions (120) A step 130 of informing a driver of a recommendation for a driving state including a traffic light and signpost information, a step 130 of informing a driver of a driving state of the first terminal for providing a driving assistance service of the vehicle through touch recognition or voice recognition (140) for inputting a driver's intention of a second terminal for providing a driving assistance service of the vehicle, (150), in real time, between the first terminal and the second terminal, the running state reflecting the doctor's intention and the driver's intention of the second terminal.

단계(110)에서, 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장한다. 차량의 운전 보조 서비스를 제공하기 위한 단말은 카메라 및 센서를 포함할 수 있다. 단말은 차량에 부착되어 주행 중, 또는 정차 중인 차량의 주변 상태를 카메라를 통해 촬영하거나 센서를 통해 인식할 수 있다. 예를 들어, 단말이 부착된 차량의 운전자는 운전자가 원하는 방향에 위치시킨 카메라를 통해 주행 상태를 촬영하고, 촬영된 주행 상태를 표시하는 단말의 디스플레이를 통하여 주행 상태를 나타낼 수 있다. In step 110, the driving state of the vehicle is photographed using a camera or a sensor of the first terminal for providing driving assisting services of the vehicle, and the photographed image is input and stored. The terminal for providing the driving assistance service of the vehicle may include a camera and a sensor. The terminal can be photographed through the camera or recognized by the sensor when the vehicle is attached to the vehicle and is in a running state or in a stopped state. For example, a driver of a vehicle to which the terminal is attached can photograph the driving state through a camera positioned in a direction desired by the driver, and can display the driving state through the display of the terminal displaying the photographed driving state.

단계(120)에서, 상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보, 차선 정보, 교통 정보 및 주변 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식할 수 있다. 다시 말해, 카메라를 통해 촬영된 영상 또는 센서를 통해 인식된 주행 상태에 관한 정보를 분석할 수 있다. 주행 상태 분석 시, 미리 저장된 교통 정보, 도로 규정, 운전자의 목적지 등과 연관하여 분석할 수 있고, 또한 실시간 교통 정보 및 도로 교통 상황 등과 연관하여 분석할 수도 있다. In step 120, the input and stored images are analyzed to analyze the driving state including the traffic light and signboard information, the lane information, the traffic information, and the surrounding information, and recognize the road condition according to the driving state. In other words, it is possible to analyze the information about the traveling state recognized through the image taken by the camera or the sensor. In the analysis of the traveling state, it can be analyzed in association with previously stored traffic information, road regulations, and the driver's destination, and analysis can be performed in connection with real-time traffic information and road traffic conditions.

촬영된 영상 및 분석 및 인식 결과는 운전자의 설정에 따라 미리 정해진 기간 동안 데이터베이스에 저장될 수 있다. 그리고, 저장된 정보는 차량의 운전 보조 서비스를 제공하기 위한 제1 단말 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말 간에 공유될 수 있다. 여기에서, 제1 단말 및 제2 단말은 본 발명에서 제안하는 차량의 운전 보조 서비스를 제공하기 위한 단말이고, 제1 단말 및 제2 단말로 한정되지 않으며 더 많은 복수의 단말을 포함할 수 있다. 따라서, 데이터베이스에 저장된 정보는 차량의 운전 보조 서비스를 제공하기 위한 복수의 단말 간에 공유될 수 있다. The photographed image and the analysis and recognition result can be stored in the database for a predetermined period according to the driver's setting. The stored information may be shared between a first terminal for providing a driving assistance service of the vehicle and a second terminal for providing a driving assistance service of the vehicle. Here, the first terminal and the second terminal are terminals for providing the driving assistance service of the vehicle proposed by the present invention, and are not limited to the first terminal and the second terminal, and may include a plurality of terminals. Therefore, the information stored in the database can be shared among a plurality of terminals for providing driving assistance service of the vehicle.

단계(130)에서, 상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알릴 수 있다. 신호대기중인 차량의 운전자가 신호 변화를 인지하지 못한 경우, 상기 신호 변화에 대한 권장 사항을 운전자에게 알리거나 또는 자율주행 차량인 경우 차량 주행 제어 장치에 상기 권장 사항에 대한 신호를 보내고, 운전자의 설정에 따라 상기 권장 사항에 대한 알림을 음성으로 전달하거나 또는 디스플레이 화면을 통해 팝업 메시지로 전달한다. 예를 들어, 신호 대기로 인해 정차 중인 차량의 운전자가 신호가 출발 신호로 바뀌었음에도 이를 인식하지 못하는 경우가 있다. 이때, 차량의 운전 보조 서비스를 제공하기 위한 단말의 카메라를 통해 촬영된 영상에서 신호가 출발 신호로 바뀐 것을 분석 및 인식하고, 이를 단말의 스피커 또는 디스플레이를 통해 나타낼 수 있다. 경보음이나 음성으로 신호가 바뀐 것을 운전자에게 알림을 나타낼 수 있고, 또는 디스플레이에 메시지를 띄우거나 진동 등의 방법으로 알림을 나타낼 수도 있다. In step 130, the driver can be informed of the driving condition including the traffic light and signboard information according to the analysis and recognition result. If the driver of the vehicle waiting for the signal is not aware of the signal change, the driver is informed of the signal change recommendation, or if the vehicle is an autonomous driving vehicle, a signal is sent to the vehicle driving control device about the recommendation, The notification of the recommendation is delivered as a voice or a pop-up message is transmitted through a display screen. For example, a driver of a stationary vehicle may be unaware of the fact that the signal has changed to a departure signal due to signal waiting. At this time, it is possible to analyze and recognize the change of the signal into the start signal in the image photographed through the camera of the terminal for providing the driving assistance service of the vehicle, and to display it through the speaker or the display of the terminal. The driver can be notified that the signal has changed by an alarm sound or voice, or a message can be displayed on the display or a notification can be displayed by vibration or the like.

단계(140)에서, 상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받을 수 있다. 운전자가 전달 받은 분석 및 인식 결과에 따른 주행 상태에 대한 권장 사항을 만족하지 못할 경우, 이에 반응하여 원하는 사항을 입력할 수 있다. In step 140, a driver's request for the driver of the first terminal and a driver of the second terminal for providing the driving assistance service of the vehicle for providing the driving assistance service of the vehicle through touch recognition or voice recognition to the running state Each doctor can be entered. If the driver does not meet the recommendations for driving conditions according to the analysis and recognition results received, he / she can input the desired information in response to the recommendation.

주행 상태에 대한 권장 사항에 응답하여 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사를 입력 받아 상기 권장 사항에 반영할 수 있다. The driver's intention of the first terminal and the intention of the driver of the second terminal can be received and reflected in the recommendation in response to the recommendation for the driving condition.

예를 들어, 주행 중 운전자가 미리 입력한 목적지 정보에 대하여 제안하는 단말을 통해 빠른 경로를 안내 받을 수 있다. 하지만, 운전자가 안내 받은 경로에 대하여 만족하지 않고, 다른 경로를 원할 경우 원하는 경로에 대한 의사표현을 단말의 디스플레이의 터치인식 기능 또는 음성인식 기능 등을 통하여 입력할 수 있다. For example, during the driving, the driver can be informed of the destination information in advance through the proposed terminal. However, if the driver is not satisfied with the route guided, and if he or she desires another route, he / she can input a desired expression for the desired route through the touch recognition function or the voice recognition function of the display of the terminal.

또 다른 실시예에 따르면, 일행이 서로 다른 차량으로 같은 목적지로 향할 경우, 두 운전자는 단말을 통해 주행 상태에 관한 정보를 서로 공유하며 이동할 수도 있다. 두 운전자, 다시 말해, 제1 단말의 운전자 및 제2 단말의 운전자는 주행 상태에 대한 권장 사항에 응답하여 의사를 입력할 수 있다. 의사를 입력하는 방법으로는 단말의 디스플레이의 터치인식 기능 또는 음성인식 기능 등을 이용할 수 있고, 이외에도 다양한 입력 수단을 이용하여 운전자의 의사를 입력 받을 수 있다. According to another embodiment, when the parties are directed to the same destination by different vehicles, the two drivers may share the information on the running state with each other through the terminal. Both drivers, i. E. The driver of the first terminal and the driver of the second terminal, may enter a doctor in response to a recommendation for the running condition. As a method of inputting a doctor, a touch recognition function or a voice recognition function of a display of the terminal can be used. In addition, various input means can be used to input a driver's intention.

단계(150)에서, 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유할 수 있다. 제1 단말의 운전자 및 제2 단말의 운전자 간에 주행 상태를 실시간으로 공유함으로써 서로 다른 차량으로 이동하더라도 운전자들의 주행 상태에 대하여 빠르게 인식할 수 있다. In step 150, a running state reflecting a driver's intention of the first terminal and a driver's intention of the second terminal may be shared in real time between the first terminal and the second terminal. Even if the driver of the first terminal and the driver of the second terminal share the driving state in real time, the driver can quickly recognize the driving state of the driver.

예를 들어, 제1 단말의 운전자가 주행 중 제2 단말의 운전자에게 의사를 전달하기 위해 터치인식 또는 음성인식을 통해 원하는 의사를 입력하면, 제1 단말은 입력된 의사가 반영된 주행 상태를 제2 단말로 전달함으로써 제2 단말의 운전자가 이를 실시간으로 확인 할 수 있도록 한다. 따라서, 제1 단말의 운전자 및 제2 단말의 운전자가 편리하고 안전하게 의사를 전달하며 원하는 목적지까지 이동할 수 있다.
For example, when the driver of the first terminal inputs a desired intention through touch recognition or voice recognition to communicate the intention to the driver of the second terminal while driving, the first terminal transmits the second- So that the driver of the second terminal can confirm it in real time. Therefore, the driver of the first terminal and the driver of the second terminal can conveniently and safely communicate their intention and move to a desired destination.

도 2는 본 발명의 일 실시예에 따른 차량의 운전 보조 시스템의 구성을 나타내는 도면이다. 2 is a diagram showing the configuration of a driving assistance system of a vehicle according to an embodiment of the present invention.

본 실시예에 따른 차량의 운전 보조 시스템(200)은 프로세서(210), 버스(220), 네트워크 인터페이스(230), 메모리(240) 및 데이터베이스(250)를 포함할 수 있다. 메모리(240)는 운영체제(241) 및 운전 보조 서비스 루틴(242)을 포함할 수 있다. 프로세서(210)는 카메라 및 센서부(211), 분석부(212), 알림부(213), 입력부(214), 통신부(215)를 포함할 수 있다. 다른 실시예들에서 차량의 운전 보조 시스템(200)은 도 2의 구성요소들보다 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 차량의 운전 보조 시스템(200)은 디스플레이나 트랜시버(transceiver)와 같은 다른 구성요소들을 포함할 수도 있다.The driving assist system 200 of the vehicle according to the present embodiment may include a processor 210, a bus 220, a network interface 230, a memory 240, and a database 250. Memory 240 may include an operating system 241 and a driving assistance service routine 242. The processor 210 may include a camera and a sensor unit 211, an analysis unit 212, a notification unit 213, an input unit 214, and a communication unit 215. In other embodiments, the driving assistance system 200 of the vehicle may include more components than the components of FIG. However, there is no need to clearly illustrate most prior art components. For example, the driving assist system 200 of a vehicle may include other components such as a display or a transceiver.

메모리(240)는 컴퓨터에서 판독 가능한 기록 매체로서, RAM(random access memory), ROM(read only memory) 및 디스크 드라이브와 같은 비소멸성 대용량 기록장치(permanent mass storage device)를 포함할 수 있다. 또한, 메모리(240)에는 운영체제(241)와 운전 보조 서비스 루틴(242)을 위한 프로그램 코드가 저장될 수 있다. 이러한 소프트웨어 구성요소들은 드라이브 메커니즘(drive mechanism, 미도시)을 이용하여 메모리(240)와는 별도의 컴퓨터에서 판독 가능한 기록 매체로부터 로딩될 수 있다. 이러한 별도의 컴퓨터에서 판독 가능한 기록 매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록 매체(미도시)를 포함할 수 있다. 다른 실시예에서 소프트웨어 구성요소들은 컴퓨터에서 판독 가능한 기록 매체가 아닌 네트워크 인터페이스(230)를 통해 메모리(240)에 로딩될 수도 있다. The memory 240 may be a computer-readable recording medium and may include a permanent mass storage device such as a random access memory (RAM), a read only memory (ROM), and a disk drive. Also, the memory 240 may store program codes for the operating system 241 and the driving assistance service routine 242. These software components may be loaded from a computer readable recording medium separate from the memory 240 using a drive mechanism (not shown). Such a computer-readable recording medium may include a computer-readable recording medium (not shown) such as a floppy drive, a disk, a tape, a DVD / CD-ROM drive, or a memory card. In other embodiments, the software components may be loaded into the memory 240 via the network interface 230 rather than from a computer readable recording medium.

버스(220)는 차량의 운전 보조 시스템(200)의 구성요소들간의 통신 및 데이터 전송을 가능하게 할 수 있다. 버스(220)는 고속 시리얼 버스(high-speed serial bus), 병렬 버스(parallel bus), SAN(Storage Area Network) 및/또는 다른 적절한 통신 기술을 이용하여 구성될 수 있다.The bus 220 may enable communication and data transfer between components of the driving assistance system 200 of the vehicle. The bus 220 may be configured using a high-speed serial bus, a parallel bus, a Storage Area Network (SAN), and / or other suitable communication technology.

네트워크 인터페이스(230)는 차량의 운전 보조 시스템(200)을 컴퓨터 네트워크에 연결하기 위한 컴퓨터 하드웨어 구성요소일 수 있다. 네트워크 인터페이스(230)는 차량의 운전 보조 시스템(200)을 무선 또는 유선 커넥션을 통해 컴퓨터 네트워크에 연결시킬 수 있다.The network interface 230 may be a computer hardware component for connecting the driving assistance system 200 of the vehicle to a computer network. The network interface 230 may connect the driving assistance system 200 of the vehicle to the computer network via a wireless or wired connection.

데이터베이스(250)는 운전 보조 서비스를 위해 필요한 모든 정보를 저장 및 유지하는 역할을 할 수 있다. 확장된 글로벌 상품 분류 체계를 마스터데이터로서 저장한다. 도 2에서는 차량의 운전 보조 시스템(200)의 내부에 데이터베이스(250)를 구축하여 포함하는 것으로 도시하고 있으나, 이에 한정되는 것은 아니며 시스템 구현 방식이나 환경 등에 따라 생략될 수 있고 혹은 전체 또는 일부의 데이터베이스가 별개의 다른 시스템 상에 구축된 외부 데이터베이스로서 존재하는 것 또한 가능하다.The database 250 may serve to store and maintain all information necessary for the driving assistance service. And stores the extended global goods classification system as master data. In FIG. 2, the database 250 is included in the driving assistance system 200 of the vehicle. However, the present invention is not limited thereto and may be omitted depending on the system implementation method or environment. Alternatively, Is present as an external database built on a separate, separate system.

프로세서(210)는 기본적인 산술, 로직 및 차량의 운전 보조 시스템(200)의 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리(240) 또는 네트워크 인터페이스(230)에 의해, 그리고 버스(220)를 통해 프로세서(210)로 제공될 수 있다. 프로세서(210)는 카메라 및 센서부(211), 분석부(212), 알림부(213), 입력부(214), 통신부(215)를 위한 프로그램 코드를 실행하도록 구성될 수 있다. 이러한 프로그램 코드는 메모리(240)와 같은 기록 장치에 저장될 수 있다.The processor 210 may be configured to process instructions of a computer program by performing basic arithmetic, logic, and input / output operations of the driving assistance system 200 of the vehicle. The instructions may be provided by the memory 240 or the network interface 230 and to the processor 210 via the bus 220. The processor 210 may be configured to execute program codes for the camera and sensor unit 211, the analysis unit 212, the notification unit 213, the input unit 214, and the communication unit 215. [ Such program code may be stored in a recording device such as memory 240. [

카메라 및 센서부(211), 분석부(212), 알림부(213), 입력부(214), 통신부(215)는 도 1의 단계들(110~150)을 수행하기 위해 구성될 수 있다.The camera and sensor unit 211, the analysis unit 212, the notification unit 213, the input unit 214, and the communication unit 215 may be configured to perform the steps 110 to 150 of FIG.

차량의 운전 보조 시스템(200)은 카메라 및 센서부(211), 분석부(212), 알림부(213), 입력부(214), 통신부(215)를 포함할 수 있다.The driving assist system 200 of the vehicle may include a camera and a sensor unit 211, an analysis unit 212, a notification unit 213, an input unit 214, and a communication unit 215.

카메라 및 센서부(211)는 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 받고, 입력된 영상을 데이터베이스에 저장하도록 한다. 제안하는 운전 보조 시스템(200)은 차량에 부착되어 주행 중, 또는 정차 중인 차량의 주변 상태를 카메라를 통해 촬영하거나 센서를 통해 인식할 수 있다. 예를 들어, 단말이 부착된 차량의 운전자는 운전자가 원하는 방향에 위치시킨 카메라를 통해 주행 상태를 촬영하고, 촬영된 주행 상태를 표시하는 단말의 디스플레이를 통하여 주행 상태를 나타낼 수 있다.The camera and sensor unit 211 photographs the driving state of the vehicle, receives the photographed image, and stores the input image in a database. The driving assist system (200) proposed in the present invention can photograph the surrounding state of the vehicle while it is attached to the vehicle and is running or stopping through the camera or can recognize it through the sensor. For example, a driver of a vehicle to which the terminal is attached can photograph the driving state through a camera positioned in a direction desired by the driver, and can display the driving state through the display of the terminal displaying the photographed driving state.

분석부(212)는 상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보, 차선 정보, 교통 정보 및 주변 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식한다. The analysis unit 212 analyzes the input and stored images and analyzes the driving state including the traffic light and signboard information, the lane information, the traffic information, and the surrounding information, and recognizes the road condition according to the driving state.

다시 말해, 카메라를 통해 촬영된 영상 또는 센서를 통해 인식된 주행 상태에 관한 정보를 분석할 수 있다. 주행 상태 분석 시, 미리 저장된 교통 정보, 도로 규정, 운전자의 목적지 등과 연관하여 분석할 수 있고, 또한 실시간 교통 정보 및 도로 교통 상황 등과 연관하여 분석할 수도 있다. In other words, it is possible to analyze the information about the traveling state recognized through the image taken by the camera or the sensor. In the analysis of the traveling state, it can be analyzed in association with previously stored traffic information, road regulations, and the driver's destination, and analysis can be performed in connection with real-time traffic information and road traffic conditions.

촬영된 영상 및 분석 및 인식 결과는 운전자의 설정에 따라 미리 정해진 기간 동안 데이터베이스에 저장될 수 있다. 그리고, 저장된 정보는 차량의 운전 보조 서비스를 제공하기 위한 제1 단말 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말 간에 공유될 수 있다. 여기에서, 제1 단말 및 제2 단말은 본 발명에서 제안하는 차량의 운전 보조 서비스를 제공하기 위한 단말이고, 제1 단말 및 제2 단말로 한정되지 않으며 더 많은 복수의 단말을 포함할 수 있다. 따라서, 데이터베이스에 저장된 정보는 차량의 운전 보조 서비스를 제공하기 위한 복수의 단말 간에 공유될 수 있다.The photographed image and the analysis and recognition result can be stored in the database for a predetermined period according to the driver's setting. The stored information may be shared between a first terminal for providing a driving assistance service of the vehicle and a second terminal for providing a driving assistance service of the vehicle. Here, the first terminal and the second terminal are terminals for providing the driving assistance service of the vehicle proposed by the present invention, and are not limited to the first terminal and the second terminal, and may include a plurality of terminals. Therefore, the information stored in the database can be shared among a plurality of terminals for providing driving assistance service of the vehicle.

알림부(213)는 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알린다. The notification unit 213 informs the driver of the recommendation for the driving state including the traffic light and the sign information according to the analysis and recognition result.

신호대기중인 차량의 운전자가 신호 변화를 인지하지 못한 경우, 상기 신호 변화에 대한 권장 사항을 운전자에게 알리거나 또는 자율주행 차량인 경우 차량 주행 제어 장치에 상기 권장 사항에 대한 신호를 보내고, 운전자의 설정에 따라 상기 권장 사항에 대한 알림을 음성으로 전달하거나 또는 디스플레이 화면을 통해 팝업 메시지로 전달한다. 예를 들어, 신호 대기로 인해 정차 중인 차량의 운전자가 신호가 출발 신호로 바뀌었음에도 이를 인식하지 못하는 경우가 있다. 이때, 차량의 운전 보조 서비스를 제공하기 위한 단말의 카메라를 통해 촬영된 영상에서 신호가 출발 신호로 바뀐 것을 분석 및 인식하고, 이를 단말의 스피커 또는 디스플레이를 통해 나타낼 수 있다. 경보음이나 음성으로 신호가 바뀐 것을 운전자에게 알림을 나타낼 수 있고, 또는 디스플레이에 메시지를 띄우거나 진동 등의 방법으로 알림을 나타낼 수도 있다.If the driver of the vehicle waiting for the signal is not aware of the signal change, the driver is informed of the signal change recommendation, or if the vehicle is an autonomous driving vehicle, a signal is sent to the vehicle driving control device about the recommendation, The notification of the recommendation is delivered as a voice or a pop-up message is transmitted through a display screen. For example, a driver of a stationary vehicle may be unaware of the fact that the signal has changed to a departure signal due to signal waiting. At this time, it is possible to analyze and recognize the change of the signal into the start signal in the image photographed through the camera of the terminal for providing the driving assistance service of the vehicle, and to display it through the speaker or the display of the terminal. The driver can be notified that the signal has changed by an alarm sound or voice, or a message can be displayed on the display or a notification can be displayed by vibration or the like.

입력부(214)는 터치인식 또는 음성인식 등을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는다. The input unit 214 receives a driver's intention of the first terminal and a driver's intention of the second terminal for providing the driving assistance service of the vehicle for providing the driving assistance service of the vehicle through touch recognition or voice recognition .

운전자가 전달 받은 분석 및 인식 결과에 따른 주행 상태에 대한 권장 사항을 만족하지 못할 경우, 이에 반응하여 원하는 사항을 입력할 수 있다. If the driver does not meet the recommendations for driving conditions according to the analysis and recognition results received, he / she can input the desired information in response to the recommendation.

주행 상태에 대한 권장 사항에 응답하여 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사를 입력 받아 상기 권장 사항에 반영할 수 있다. The driver's intention of the first terminal and the intention of the driver of the second terminal can be received and reflected in the recommendation in response to the recommendation for the driving condition.

예를 들어, 주행 중 운전자가 미리 입력한 목적지 정보에 대하여 제안하는 단말을 통해 빠른 경로를 안내 받을 수 있다. 하지만, 운전자가 안내 받은 경로에 대하여 만족하지 않고, 다른 경로를 원할 경우 원하는 경로에 대한 의사표현을 단말의 디스플레이의 터치인식 기능 또는 음성인식 기능 등을 통하여 입력할 수 있다. For example, during the driving, the driver can be informed of the destination information in advance through the proposed terminal. However, if the driver is not satisfied with the route guided, and if he or she desires another route, he / she can input a desired expression for the desired route through the touch recognition function or the voice recognition function of the display of the terminal.

또 다른 실시예에 따르면, 일행이 서로 다른 차량으로 같은 목적지로 향할 경우, 두 운전자는 단말을 통해 주행 상태에 관한 정보를 서로 공유하며 이동할 수도 있다. 두 운전자, 다시 말해, 제1 단말의 운전자 및 제2 단말의 운전자는 주행 상태에 대한 권장 사항에 응답하여 의사를 입력할 수 있다. 의사를 입력하는 방법으로는 단말의 디스플레이의 터치인식 기능 또는 음성인식 기능 등을 이용할 수 있고, 이외에도 다양한 입력 수단을 이용하여 운전자의 의사를 입력 받을 수 있다.According to another embodiment, when the parties are directed to the same destination by different vehicles, the two drivers may share the information on the running state with each other through the terminal. Both drivers, i. E. The driver of the first terminal and the driver of the second terminal, may enter a doctor in response to a recommendation for the running condition. As a method of inputting a doctor, a touch recognition function or a voice recognition function of a display of the terminal can be used. In addition, various input means can be used to input a driver's intention.

통신부(215)는 상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유한다. The communication unit 215 shares a running state in which the driver's intention of the first terminal and the intention of the driver of the second terminal are reflected in real time between the first terminal and the second terminal.

제1 단말의 운전자 및 제2 단말의 운전자 간에 주행 상태를 실시간으로 공유함으로써 서로 다른 차량으로 이동하더라도 운전자들의 주행 상태에 대하여 빠르게 인식할 수 있다. Even if the driver of the first terminal and the driver of the second terminal share the driving state in real time, the driver can quickly recognize the driving state of the driver.

예를 들어, 제1 단말의 운전자가 주행 중 제2 단말의 운전자에게 의사를 전달하기 위해 터치인식 또는 음성인식을 통해 원하는 의사를 입력하면, 제1 단말은 입력된 의사가 반영된 주행 상태를 제2 단말로 전달함으로써 제2 단말의 운전자가 이를 실시간으로 확인 할 수 있도록 한다. 따라서, 제1 단말의 운전자 및 제2 단말의 운전자가 편리하고 안전하게 의사를 전달하며 원하는 목적지까지 이동할 수 있다.
For example, when the driver of the first terminal inputs a desired intention through touch recognition or voice recognition to communicate the intention to the driver of the second terminal while driving, the first terminal transmits the second- So that the driver of the second terminal can confirm it in real time. Therefore, the driver of the first terminal and the driver of the second terminal can conveniently and safely communicate their intention and move to a desired destination.

도 3은 본 발명의 일 실시예에 따른 주행 상태를 나타내는 예시도이다. 3 is an exemplary view showing a running state according to an embodiment of the present invention.

도 3에서 차량의 운전 보조 서비스를 제공하기 위한 단말이 부착된 차량의 주행 중 촬영된 영상(300)을 나타내었다. 차량의 운전 보조 서비스를 제공하기 위한 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장한다. FIG. 3 shows an image 300 taken during driving of a vehicle equipped with a terminal for providing driving assisting services of the vehicle. A driving state of the vehicle is photographed using a camera or a sensor of a terminal for providing a driving assisting service of the vehicle, and the photographed image is inputted and stored.

단말은 차량에 부착되어 주행 중, 또는 정차 중인 차량의 주변 상태를 카메라를 통해 촬영하거나 센서를 통해 인식할 수 있다. 예를 들어, 단말이 부착된 차량의 운전자는 운전자가 원하는 방향에 위치시킨 카메라를 통해 주행 상태를 촬영하고, 촬영된 주행 상태를 표시하는 단말의 디스플레이를 통하여 도 3과 같이 주행 상태를 나타낼 수 있다. The terminal can be photographed through the camera or recognized by the sensor when the vehicle is attached to the vehicle and is in a running state or in a stopped state. For example, a driver of a vehicle to which the terminal is attached may photograph a driving state through a camera positioned in a direction desired by the driver, and display the driving state as shown in FIG. 3 through a display of the terminal displaying the photographing state .

도 3을 참조하면, 카메라를 통해 촬영된 영상에는 신호등(310), 표지판(320), 차선 정보(330) 등을 포함하는 주행 상태가 나타날 수 있고, 이렇게 촬영된 영상을 분석 및 인식하여 분석 및 인식 결과에 따른 주행 상태에 대한 권장 사항을 운전자에게 알려 줄 수 있다. 또한, 녹화 버튼(340)을 통해 녹화하고 싶은 영상 구간을 저장하도록 할 수도 있다. Referring to FIG. 3, a traveling state including a traffic light 310, a sign 320, and lane information 330 may be displayed on an image photographed through a camera, and the captured image may be analyzed and recognized, The driver can be informed of the recommendation of the driving condition according to the recognition result. In addition, it is also possible to store the video section to be recorded through the record button 340. [

예를 들어, 속도가 50km로 제한된 도로를 주행 중이라고 가정한다. 카메라를 통해 촬영된 영상을 분석하여 현재 주행 중이 도로의 제한 속도를 인식할 수 있다. 운전자가 표지판을 발견하지 못하고 지나 쳤을 경우, 제안하는 단말을 통해 제한속도를 초과하였음을 알릴 수 있다. 예를 들어, 경보음 또는 음성안내를 통해 운전자가 즉각적으로 인식할 수 있도록 안내할 수 있다.
For example, suppose you are driving on a road with a speed limit of 50 km. By analyzing the images taken through the camera, it is possible to recognize the speed limit of the road that is currently running. If the driver fails to find the sign, he can notify the proposed terminal that the speed limit has been exceeded. For example, a warning sound or a voice guidance can guide the driver to recognize immediately.

도 4는 본 발명의 일 실시예에 따른 주행 상태에 대한 권장 사항을 운전자에게 알리는 과정을 설명하기 위한 도면이다.4 is a diagram illustrating a process of informing a driver of a recommendation for a running state according to an embodiment of the present invention.

예를 들어, 주행 중인 차량 또는 신호 대기로 인해 정차 중인 차량의 운전자가 신호등의 신호가 출발 신호 또는 좌회전 신호로 바뀌었음에도 이를 인식하지 못하는 경우를 가정한다. 먼저, 차량이 신호대기로 인해 정차 중이 차량인지 여부를 판별(410)한다. 차량이 신호대기로 인해 정차 중인 경우, 좌회전 대기 중인지 여부를 판별(420)한다. 이때, 차량의 운전 보조 서비스를 제공하기 위한 단말의 카메라를 통해 촬영된 영상에서 신호등을 검출할 수 있다. 차량이 좌회전 대기 중이 아닌 경우, 검출된 신호등이 녹색 신호등인지지 여부를 판별(421)한다. 신호등이 녹색 신호등인 경우, 운전자에게 신호변경 알림(423)을 전달 할 수 있다. 신호등이 녹색 신호등이 아닌 경우, 다시 시작단계로 이동한다. For example, it is assumed that a driver of a vehicle that is in a running vehicle or a vehicle that is being stopped due to a signal waiting condition does not recognize a signal of a traffic light even though the signal is changed to a start signal or a left turn signal. First, it is determined (410) whether the vehicle is in a stopping state due to signal waiting. If the vehicle is stationary due to signal waiting, it is determined (420) whether the vehicle is waiting for a left turn. At this time, the signal lamp can be detected from the image photographed through the camera of the terminal for providing the driving assistance service of the vehicle. If the vehicle is not waiting for a left turn, it is discriminated 421 whether or not the detected signal is a green traffic light. If the traffic light is a green traffic light, the traffic change notification 423 can be transmitted to the driver. If the traffic light is not a green traffic light, go to the start step again.

단계(420)의 판별 결과에서 차량이 좌회전 대기 중인 경우, 검출된 신호등이 좌회전 신호등인지지 여부를 판별(422)한다. 신호등이 좌회전 신호등인 경우, 운전자에게 신호변경 알림(423)을 전달 할 수 있다. 신호등이 좌회전 신호등이 아닌 경우, 다시 시작단계로 이동한다.If it is determined in step 420 that the vehicle is waiting for a left turn, it is determined whether the detected signal is a left-turn signal or not (step 422). When the signal lamp is a left turn signal lamp, the signal change notification 423 can be transmitted to the driver. If the signal lamp is not a left turn signal lamp, it moves to the start step again.

단계(410)의 판별 결과에서 차량이 신호대기로 인해 정차 중이 아닌 경우, 차량의 운전 보조 서비스를 제공하기 위한 단말의 카메라를 통해 촬영된 영상에서 표지판을 검출(430)할 수 있다. 표지판이 검출되지 않은 경우, 다시 시작단계로 이동한다.If it is determined that the vehicle is not in a stop due to a signal waiting in the determination result of step 410, the sign may be detected 430 in an image photographed through a camera of the terminal for providing driving assistance service of the vehicle. If the sign is not detected, it moves to the start step again.

표지판이 검출된 경우, 검출된 표지판이 제한 속도 표지판인지 여부를 판별(431)한다. 검출된 표지판이 제한 속도 표지판인 경우, 주행 중이 차량이 제한 속도 표지판에 표시된 제한 속도를 위반하였는지 여부를 판별(432)한다. If a sign is detected, it is determined whether the detected sign is a speed limit sign (431). If the detected sign is a speed limit sign, it is determined (432) whether the vehicle in motion violates the speed limit indicated on the speed limit sign.

주행 중이 차량이 제한 속도 표지판에 표시된 제한 속도를 위반했을 경우, 운전자에게 과속 경보(433)를 전달 할 수 있다. 주행 중이 차량이 제한 속도 표지판에 표시된 제한 속도를 위반하지 않았을 경우, 다시 시작단계로 이동한다.If the vehicle in transit violates the speed limit indicated on the speed limit sign, the overspeed alarm (433) can be delivered to the driver. If the vehicle in motion does not violate the speed limit indicated on the speed limit sign, proceed to the restart phase.

단계(431)의 판별 결과에서 검출된 표지판이 제한 속도 표지판이 아닌 경우, 운전자에게 검출된 표지판의 내용에 대한 알림(434)을 전달 할 수 있다.If the sign detected in the determination result of step 431 is not the speed limit sign, the driver can be informed of the contents of the detected sign 434.

이와 같이, 주행 중인 차량 또는 신호 대기로 인해 정차 중인 차량의 운전자가 신호등의 신호가 출발 신호 또는 좌회전 신호로 바뀌었음에도 이를 인식하지 못하는 경우, 이에 대한 권장 사항을 운전자에게 알리는 것뿐만 아니라, 예를 들어 자율주행 차량인 경우 차량 주행 제어 장치로 권장 사항에 대한 신호를 보낼 수도 있다.
In this way, if the driver of the vehicle being driven or the vehicle being stopped due to signal waiting is unable to recognize the signal of the traffic light even if it is changed to the start signal or the left turn signal, it not only informs the driver of the recommendation, If the vehicle is an autonomous vehicle, it may signal the recommendation to the vehicle drive control unit.

도 5는 본 발명의 일 실시예에 따른 운전자들 간에 주행 상태를 공유하는 과정을 설명하기 위한 예시도이다.5 is an exemplary diagram for explaining a process of sharing a driving state among drivers according to an embodiment of the present invention.

예를 들어, 단체 관광객들이 대형버스를 이용하여 여러 차량으로 나누어 탑승한 뒤 같은 목적지로 이동하는 경우를 가정한다. 이러한 경우 대열운행으로 이동하는 경우가 많다. 대열운행 금지 및 단속법 등이 강화되고 있지만, 잘 실천되지 않고, 대열운행으로 인한 사고가 빈번히 발생하고 있다.For example, suppose that a group of tourists use a large bus to divide into several vehicles and then move to the same destination. In such a case, it is often the case that it moves to the rushing train. The prohibition of rowing and the enforcement of laws have been strengthened, but they are not practiced well, and accidents caused by rowing frequently occur.

하지만 제안하는 운전 보조 시스템을 이용하는 경우, 대열운행을 하지 않더라도 주행 중인 운전자들 간에 주행 상태를 실시간으로 공유할 수 있고, 주행 상태에 운전자들의 의사도 반영할 수 있어 편리하고 안전하게 정보를 공유하며 원하는 목적지까지 이동할 수 잇다. However, if the proposed driving assistance system is used, it is possible to share the driving status among the driving drivers in real time without performing the riding operation and to reflect the opinions of the drivers in the driving state, .

도 5를 참조하면, 대형버스1(510), 대형버스2(520), 대형버스3(530) 등이 같은 목적지로 이동하기 위해 고속도로를 주행하고 있다. 대형버스1(510) 및 대형버스2(520) 사이에는 승용차1(541), 승용차2(542)가 주행 중이고, 대형버스3(530) 앞에는 승용차3(543), 승용차4(544)이 주행 중 충돌이 일어난 상황이다. Referring to FIG. 5, the large bus 1 510, the large bus 2 520, the large bus 3 530, and the like are traveling on the expressway to move to the same destination. Passenger car 1 541 and passenger car 2 542 are running between the large bus 1 510 and the large bus 2 520. Passenger cars 3 543 and passenger cars 4 544 run in front of the large bus 3 530 It is a situation that collision occurred.

제안하는 운전 보조 시스템을 이용하지 않는 경우, 도 5와 같이 대형버스3(530)은 승용차3(543)과 승용차4(544)의 충돌로 인해 이동이 지체될 수 있다. 따라서 단체 관광객의 이동 경로에서 이탈하게 되어 문제가 될 수 있다. In the case where the proposed driving assist system is not used, as shown in FIG. 5, the large bus 3 530 may be delayed in movement due to a collision between the passenger car 3 (543) and the passenger car 4 (544). Therefore, it may become a problem because it deviates from the route of the group tourists.

하지만, 제안하는 운전 보조 시스템을 이용할 경우, 도 6과 같이 대형버스1(510), 대형버스2(520), 대형버스3(530) 등의 운전자들 간에 주행 상태를 실시간으로 공유함으로써 현재 상황을 확인할 수 있다.
However, when the proposed driving assistance system is used, the current situation is shared by the drivers such as the large bus 1 (510), the large bus 2 (520), and the large bus 3 (530) Can be confirmed.

도 6은 본 발명의 일 실시예에 따른 운전자들 간에 공유된 주행 상태가 표시되는 디스플레이를 나타내는 도면이다. FIG. 6 is a view illustrating a display in which a running state shared among drivers is displayed according to an embodiment of the present invention. FIG.

도 6과 같이, 버스1의 주행상태(610), 버스2의 주행상태(620), 버스3의 주행상태(630), 버스4의 주행상태(640)를 제안하는 운전 보조 시스템의 디스플레이를 통해 동시에 나타낼 수 있다. 6, through the display of the driving assist system suggesting the running state 610 of the bus 1, the running state 620 of the bus 2, the running state 630 of the bus 3, and the running state 640 of the bus 4 Can be displayed at the same time.

버스1의 주행상태(610)에는 버스1의 주행 경로에서 보여지는 교통 상황(611)을 실시간으로 모니터링하도록 나타낼 수 있다. 또한, 버스1의 속도, 교통상황 등의 주행 상태에 관한 정보들(612)을 표시할 수도 있다. The running state 610 of the bus 1 can be displayed to monitor the traffic situation 611 shown in the traveling path of the bus 1 in real time. It may also display information 612 relating to the running state of the bus 1, such as the speed and traffic conditions.

버스2의 주행상태(620)에도 버스2의 주행 경로에서 보여지는 교통 상황(621)을 실시간으로 모니터링하도록 나타낼 수 있다. 또한, 버스2의 속도, 교통상황 등의 주행 상태에 관한 정보들(622)을 표시할 수도 있다.The running state 620 of the bus 2 can be displayed to monitor the traffic situation 621 shown in the traveling route of the bus 2 in real time. It may also display information 622 about the running state of the bus 2, such as the speed and traffic conditions.

이때, 버스2의 앞 차량들 간에 충돌이 발생하였을 경우, 모니터링 화면(622)에 충돌 상황을 나타낼 수 있고, 함께 이동 중의 버스1, 버스3, 버스4의 운전자들은 운전 보조 시스템의 디스플레이에 나타난 화면을 통해 이를 실시간으로 확인할 수 있다. 이와 같이 운전자들 간에 주행 상태에 관한 정보를 서로 공유하며 이동할 수 있다.At this time, when a collision occurs between the preceding vehicles of the bus 2, a collision situation can be displayed on the monitoring screen 622. Drivers of the bus 1, bus 3, So that it can be confirmed in real time. Thus, information on the driving state among the drivers can be shared with each other.

버스2의 앞 차량들 간에 충돌로 인해 버스2의 이동이 지체될 수 있다. 따라서 단체 관광객의 이동 경로에서 이탈하게 되어 문제가 될 수 있다. The movement of the bus 2 may be delayed due to a collision between the front vehicles of the bus 2. [ Therefore, it may become a problem because it deviates from the route of the group tourists.

운전 보조 시스템은 이러한 주행 상태에 대한 권장 사항을 제안할 수 있다. 제안된 권장 사항에 응답하여 운전자들의 의사를 입력할 수 있다. 의사를 입력하는 방법으로는 단말의 디스플레이의 터치인식 기능 또는 음성인식 기능 등을 이용할 수 있고, 이외에도 다양한 입력 수단을 이용하여 운전자의 의사를 입력 받을 수 있다. The driving assistance system can suggest recommendations for these driving conditions. You can enter the driver's intention in response to the suggested recommendation. As a method of inputting a doctor, a touch recognition function or a voice recognition function of a display of the terminal can be used. In addition, various input means can be used to input a driver's intention.

예를 들어, 운전 보조 시스템은 앞 차량들 간에 충돌에 대하여 버스1, 버스2, 버스3, 버스4의 운전자들에게 충돌이 발생하였음을 알리고, '갓길에 대기' 또는 '다음 휴게소에 대기' 등을 제안할 수 있다. 운전자들을 이에 응답하여 의사를 반영하고, 운전자들의 의사가 반영된 권장 사항을 운전자들 간에 공유함으로써 버스2가 대열에서 이탈하는 것을 방지할 수 있다. For example, the driver assistance system notifies the drivers of bus 1, bus 2, bus 3, and bus 4 of a collision between the preceding vehicles that a collision has occurred, and a "standby on the shoulder" . ≪ / RTI > In response, the driver can reflect his / her intention and share the recommendations that are reflected in the driver's intent between the drivers, thereby preventing bus 2 from leaving the ranks.

이와 같이, 운전자들의 의사가 반영된 주행 상태를 버스1, 버스2, 버스3, 버스4의 운전 보조 시스템 간에 실시간으로 공유할 수 있다. 운전자들 간에 주행 상태를 실시간으로 공유함으로써 서로 다른 차량으로 이동하더라도 운전자들의 주행 상태에 대하여 빠르게 인식할 수 있다. 따라서, 버스1, 버스2, 버스3, 버스4의 운전자들이 편리하고 안전하게 의사를 전달하며 원하는 목적지까지 이동할 수 있다.
In this manner, the driving state reflecting the driver's intention can be shared in real time between the driving assistance systems of Bus 1, Bus 2, Bus 3, and Bus 4. By sharing the driving status among the drivers in real time, it is possible to quickly recognize the driver's driving situation even if they move to different vehicles. Therefore, drivers of bus 1, bus 2, bus 3, and bus 4 can conveniently and safely communicate to the desired destinations.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다.  또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다.  이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다.  예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다.  또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA) A programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다.  소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다.  소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다.  상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.  상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.  컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.  프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.  상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다.  예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (10)

차량의 운전 보조 서비스 방법에 있어서,
차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장하는 단계;
상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식하는 단계; 및
상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알리는 단계를 포함하되,
상기 차량의 운전 보조 서비스 방법은
상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 단계; 및
상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 단계
를 더 포함하는 차량의 운전 보조 서비스 방법.
A driving assistance service method for a vehicle,
A step of photographing a driving state of a vehicle using a camera or a sensor of a first terminal for providing a driving assisting service of the vehicle, inputting and storing the photographed image;
Analyzing the input and stored images, analyzing the driving state including the traffic lights and signboard information, and recognizing the road conditions according to the driving state; And
And informing the driver of a recommendation on the driving condition including the signal lamp and signboard information according to the analysis and recognition result,
The driving assistance service method of the vehicle
Receiving a driver's intention of the first terminal and a driver's intention of the second terminal for providing the driver's assistant service of the vehicle to provide driving assistance service of the vehicle through touch recognition or speech recognition to the running state, ; And
A step of real-time sharing between the first terminal and the second terminal a traveling state in which a driver's intention of the first terminal and a driver's intention of the second terminal are reflected
Further comprising the steps of:
삭제delete [청구항 3은(는) 설정등록료 납부시 포기되었습니다.][Claim 3 is abandoned upon payment of the registration fee.] 차량의 운전 보조 서비스 방법에 있어서,
차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 카메라 또는 센서를 이용하여 차량의 주행 상태를 촬영하고, 촬영된 영상을 입력 및 저장하는 단계;
상기 입력 및 저장된 영상을 분석하여 신호등 및 표지판 정보를 포함하는 주행 상태를 분석하고, 주행 상태에 따른 도로 규정을 인식하는 단계;
상기 분석 및 인식 결과에 따른 신호등 및 표지판 정보를 포함하는 주행 상태에 대한 권장 사항을 운전자에게 알리는 단계;
상기 주행 상태에 대하여 터치인식 또는 음성인식을 통해 차량의 운전 보조 서비스를 제공하기 위한 제1 단말의 운전자의 의사 및 차량의 운전 보조 서비스를 제공하기 위한 제2 단말의 운전자의 의사를 각각 입력 받는 단계; 및
상기 제1 단말의 운전자의 의사 및 상기 제2 단말의 운전자의 의사가 반영된 주행 상태를 상기 제1 단말 및 상기 제2 단말 간에 실시간으로 공유하는 단계
를 더 포함하고,
상기 촬영된 영상 및 상기 분석 및 인식 결과는 운전자의 설정에 따라 미리 정해진 기간 동안 데이터베이스에 저장될 수 있고, 상기 제1 단말 및 상기 제2 단말 간에 공유되는
차량의 운전 보조 서비스 방법.
A driving assistance service method for a vehicle,
A step of photographing a driving state of a vehicle using a camera or a sensor of a first terminal for providing a driving assisting service of the vehicle, inputting and storing the photographed image;
Analyzing the input and stored images, analyzing the driving state including the traffic lights and signboard information, and recognizing the road conditions according to the driving state;
Informing a driver of a recommendation for a driving state including a traffic light and signboard information according to the analysis and recognition result;
Receiving a driver's intention of the first terminal and a driver's intention of the second terminal for providing the driver's assistant service of the vehicle to provide driving assistance service of the vehicle through touch recognition or speech recognition to the running state, ; And
A step of real-time sharing between the first terminal and the second terminal a traveling state in which a driver's intention of the first terminal and a driver's intention of the second terminal are reflected
Further comprising:
The photographed image and the analysis and recognition result may be stored in a database for a predetermined period according to the setting of the driver and may be shared among the first terminal and the second terminal
A method of driving assistance service of a vehicle.
삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020160087585A 2016-07-11 2016-07-11 System and Service Method for Driving Assist of Vehicle KR101816635B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160087585A KR101816635B1 (en) 2016-07-11 2016-07-11 System and Service Method for Driving Assist of Vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160087585A KR101816635B1 (en) 2016-07-11 2016-07-11 System and Service Method for Driving Assist of Vehicle

Publications (1)

Publication Number Publication Date
KR101816635B1 true KR101816635B1 (en) 2018-01-09

Family

ID=61000425

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160087585A KR101816635B1 (en) 2016-07-11 2016-07-11 System and Service Method for Driving Assist of Vehicle

Country Status (1)

Country Link
KR (1) KR101816635B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112519787A (en) * 2019-08-30 2021-03-19 南京领行科技股份有限公司 Vehicle control system and vehicle
CN114312797A (en) * 2020-10-09 2022-04-12 丰田自动车株式会社 Agent device, agent method, and recording medium

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101404658B1 (en) * 2014-03-18 2014-06-09 (주)에이치아이디솔루션 Device and method for analizing video image of vehicle considering correction value of the obtained video image

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101404658B1 (en) * 2014-03-18 2014-06-09 (주)에이치아이디솔루션 Device and method for analizing video image of vehicle considering correction value of the obtained video image

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112519787A (en) * 2019-08-30 2021-03-19 南京领行科技股份有限公司 Vehicle control system and vehicle
CN114312797A (en) * 2020-10-09 2022-04-12 丰田自动车株式会社 Agent device, agent method, and recording medium

Similar Documents

Publication Publication Date Title
RU2719101C2 (en) Method and vehicle to assist drivers when changing lanes on a carriageway
JP6503218B2 (en) Driving support system, driving support device and driving support method
CN109398357B (en) Vehicle control device, vehicle control method, and storage medium
CN110192233B (en) Boarding and alighting passengers at an airport using autonomous vehicles
JP2018180987A (en) Automatic driving vehicle, stopping method/program of automatic driving vehicle
WO2018062477A1 (en) Vehicle-mounted device, control method, and program
US20230322221A1 (en) Vehicle controller, vehicle, and vehicle control method
US20210122389A1 (en) Dynamic route information interface
JP2018522355A (en) Method and apparatus for warning other traffic participants when a vehicle is running backwards
US11180082B2 (en) Warning output device, warning output method, and warning output system
US11042154B2 (en) Transportation equipment and traveling control method therefor
WO2020057406A1 (en) Driving aid method and system
JP7176098B2 (en) Detect and respond to matrices for autonomous vehicles
CN113205088B (en) Obstacle image presentation method, electronic device, and computer-readable medium
JP2020167551A (en) Control device, control method, and program
KR20220040569A (en) Augmented reality-based vehicle infotainment system and vehicle infotainment system operation method
KR101816635B1 (en) System and Service Method for Driving Assist of Vehicle
JP7180364B2 (en) VEHICLE CONTROL DEVICE, VEHICLE, AND VEHICLE CONTROL METHOD
CN113401071B (en) Display control device, display control method, and computer-readable storage medium
CN115112138A (en) Trajectory planning information generation method and device, electronic equipment and storage medium
US20210291736A1 (en) Display control apparatus, display control method, and computer-readable storage medium storing program
CN114333339A (en) Method for removing repetition of deep neural network functional module
JP2019074862A (en) Recommendable driving output device, recommendable driving output system, and recommendable driving output method
US10614720B2 (en) Information presentation method and information presentation device
CN113108801A (en) Green wave road navigation method and device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant