[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

WO2018045577A1 - 显示无人飞行器的障碍检测的方法和系统 - Google Patents

显示无人飞行器的障碍检测的方法和系统 Download PDF

Info

Publication number
WO2018045577A1
WO2018045577A1 PCT/CN2016/098618 CN2016098618W WO2018045577A1 WO 2018045577 A1 WO2018045577 A1 WO 2018045577A1 CN 2016098618 W CN2016098618 W CN 2016098618W WO 2018045577 A1 WO2018045577 A1 WO 2018045577A1
Authority
WO
WIPO (PCT)
Prior art keywords
obstacle
information
unmanned aerial
aerial vehicle
warning
Prior art date
Application number
PCT/CN2016/098618
Other languages
English (en)
French (fr)
Inventor
陈一
郭灼
张洁明
Original Assignee
深圳市大疆创新科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 深圳市大疆创新科技有限公司 filed Critical 深圳市大疆创新科技有限公司
Priority to CN201680002321.2A priority Critical patent/CN107077145A/zh
Priority to PCT/CN2016/098618 priority patent/WO2018045577A1/zh
Publication of WO2018045577A1 publication Critical patent/WO2018045577A1/zh
Priority to US16/296,740 priority patent/US11145213B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/0004—Transmission of traffic-related information to or from an aircraft
    • G08G5/0013—Transmission of traffic-related information to or from an aircraft with a ground station
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/13—Satellite images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/17—Terrestrial scenes taken from planes or by drones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/0047—Navigation or guidance aids for a single aircraft
    • G08G5/0069—Navigation or guidance aids for a single aircraft specially adapted for an unmanned aircraft
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/04—Anti-collision systems
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/04—Anti-collision systems
    • G08G5/045—Navigation or guidance aids, e.g. determination of anti-collision manoeuvers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00—UAVs specially adapted for particular uses or applications
    • B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2201/00—UAVs characterised by their flight controls
    • B64U2201/20—Remote controls

Definitions

  • the invention belongs to the field of remote control technology, and in particular relates to a method and system for displaying obstacle detection of an unmanned aerial vehicle.
  • unmanned aerial vehicles With the ever-expanding field of UAV applications, the use of unmanned aerial vehicles has become more diverse. In many cases, unmanned aerial vehicles are required to fly in complex spaces, such as between urban buildings and mountain peaks. In this case, real-time detection and display of obstacles around the UAV for the operator is safe and smooth. The flight is especially important.
  • the current UAV obstacle detection system cannot provide an intuitive and accurate display of obstacles on the flight path to the user who controls the drone, which causes great inconvenience to the operation of the UAV.
  • One aspect of the present invention provides a method of displaying an obstacle detection of an unmanned aerial vehicle, comprising: receiving obstacle information located in at least one direction of the unmanned aerial vehicle, the obstacle information being installed by the pair An analysis of the sensing signals of at least one sensor on the unmanned aerial vehicle; and displaying the obstacle information.
  • Another aspect of the present invention provides a system for displaying obstacle detection of an unmanned aerial vehicle, comprising: a receiver that receives obstacle information located in at least one direction of the unmanned aerial vehicle, the obstacle information being passed through An analysis of a sensing signal of at least one sensor mounted on the unmanned aerial vehicle; a processor; and a memory storing machine readable instructions, the processor executing the instruction to control display of the obstacle information .
  • Another aspect of the present invention provides a system for displaying an obstacle detection of an unmanned aerial vehicle, comprising: a receiving module that receives obstacle information located in at least one direction of the unmanned aerial vehicle, the obstacle information being passed through A sensing signal analysis of at least one sensor mounted on the unmanned aerial vehicle; and a display control module that controls display of the obstacle information.
  • FIG. 1 schematically shows an application scenario according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the structure of a system for displaying obstacle detection of an unmanned aerial vehicle according to an embodiment of the present invention.
  • FIG. 3 schematically illustrates a display interface on a display screen in accordance with an embodiment of the present invention.
  • Figure 4 schematically illustrates another display interface on a display screen in accordance with an embodiment of the present invention.
  • FIG. 5 schematically illustrates another display interface on a display screen in accordance with an embodiment of the present invention.
  • Figure 6 schematically illustrates another display interface on a display screen in accordance with an embodiment of the present invention.
  • Figure 7 schematically illustrates another display interface on a display screen in accordance with an embodiment of the present invention.
  • FIG. 8 is a block diagram schematically showing a structure of a system for displaying obstacle detection of an unmanned aerial vehicle according to an embodiment of the present invention.
  • FIG. 1 schematically shows an application scenario according to an embodiment of the present invention.
  • the user terminal 100 monitors the flight state of the UAV 200.
  • the unmanned aerial vehicle 200 is mounted with a sensor module 210, including at least one sensor for receiving a sensing signal from at least one direction of the unmanned aerial vehicle 200, by which the obstacle information in the corresponding direction can be analyzed.
  • the obstacle information can be displayed on the display screen 110 of the user terminal 100 so that the user can monitor the flight state of the unmanned aerial vehicle 200 in real time, and maneuver the unmanned aerial vehicle 200 to avoid obstacles on the flight path.
  • the user terminal 100 may be a mobile terminal such as a mobile phone, a tablet computer, or the like, on which a monitoring application runs, receives obstacle information from the unmanned aerial vehicle 200, and displays it on the display screen 110.
  • the electronic device 100 may also be a universal remote control or a dedicated remote control for the UAV 200 in which hardware modules or circuits for receiving obstacle information from the UAV 200 and displaying on the display screen 110 are provided.
  • the sensor module 210 may include at least one sensor for receiving a sensing signal from at least one direction of the UAV 200.
  • the sensor module 210 can include a sensor for detecting a forward obstacle of the UAV 200.
  • the sensor module 210 can include two sensors for detecting forward and backward obstacles of the UAV 200, respectively.
  • the sensor module 210 can include four sensors for detecting obstacles on the forward, backward, left, and right sides of the UAV 200, respectively.
  • the sensor module 210 can include five sensors for detecting obstacles in the forward, backward, left, right, and upper directions of the UAV 200, respectively.
  • the sensor module 210 may include seven sensors for detecting obstacles in the forward, backward, left side, right side, upper side, left front, and right front of the UAV 200, respectively.
  • the individual sensors in the sensor module 210 can be implemented separately or integrated.
  • the detection direction of the sensor can be set according to specific needs to detect obstacles in various directions or directions, and is not limited to the above-described form disclosed in the present invention.
  • each sensor in the sensor module 210 may employ, for example, an image sensor, a distance sensor, and/or a radar.
  • obstacle information in the corresponding direction can be obtained.
  • the obstacle information comprises at least one of: information derived from an image sensor; information derived from a distance sensor; and/or information derived from a radar.
  • the obstacle information includes at least one of the following: presence information of the obstacle, the obstacle The distance between the obstacle and the unmanned aerial vehicle 200, and/or the relative orientation information of the obstacle and the unmanned aerial vehicle 200.
  • system 300 is a block diagram showing the structure of a system 300 for displaying obstacle detection of an unmanned aerial vehicle in accordance with an embodiment of the present invention.
  • the system 300 can be implemented, for example, in the user terminal 100.
  • system 300 includes a receiver 310, a processor 320, a memory 330, and a display screen 340.
  • the receiver 310 receives obstacle information in at least one direction of the unmanned aerial vehicle 200, the obstacle information being a sensing signal through the sensor module 210 mounted on the unmanned aerial vehicle 200
  • the sensor module 210 includes at least one sensor.
  • Memory 320 stores machine readable instructions.
  • the processor 320 executes the instructions to control display of the obstacle information on the display screen 340.
  • the at least one direction comprises a forward and/or a backward direction of the UAV 200.
  • the at least one direction comprises directions in the forward and backward directions of the UAV 200, such as lateral, side forward, side rear, upper, and the like.
  • obstacle information in one or more directions can be detected and displayed, so that the controller can understand the situation around the UAV 200 in an intuitive and real-time manner, and adjust the flight speed or route in time to achieve safe and smooth operation. flight.
  • FIG. 3 schematically illustrates a display interface on display screen 340 in accordance with an embodiment of the present invention.
  • obstacle information in the front, rear, left, and right directions and above of the UAV 200 is displayed in a radial form.
  • the display interface displays distance and relative orientation information of each obstacle from the UAV 200.
  • the number on the screen indicates the distance between the obstacle and the unmanned aerial vehicle
  • the arrow indicates the orientation of the obstacle.
  • any one of the following or a combination of several obstacle information may be displayed: the presence of the obstacle, the distance of the obstacle from the UAV 200, or the obstacle and Relative orientation information of the UAV 200.
  • the actual space environment in which the UAV 200 is located can be visually simulated, giving the controller an intuitive feeling.
  • the controller By displaying the distance and relative orientation of the obstacle from the UAV 200 on the screen, it is convenient for the controller to make a more accurate judgment and optimally control the flight path of the UAV 200.
  • a plurality of icons in the direction may be displayed, as shown in FIG.
  • the corresponding icon or combination of icons can be highlighted. For example, when the distance of the UAV 200 to the obstacle is less than a preset threshold (eg, 1.5 meters), the green icon may be highlighted, and as the distance between the UAV 200 and the obstacle is getting closer, a yellow icon may be displayed. . When the distance gets closer, a red icon can be displayed.
  • a preset threshold eg, 1.5 meters
  • an icon may be highlighted, and as the distance between the UAV 200 and the obstacle is closer, two Icons. When the distance gets closer, three icons can be displayed.
  • the current flight direction of the UAV 200 can be indicated by the change of the highlighted icon. For example, when the highlight icon of the current party changes, it means that the UAV 200 is flying forward, and the other directions are also the same.
  • FIG. 4 schematically illustrates another display interface on display screen 340 in accordance with an embodiment of the present invention.
  • the obstacle information received by the receiver 310 may include an offset of the obstacle relative to the particular direction.
  • one or more partitions may be displayed on display screen 340, the one or more partitions being displayed differently depending on the offset of the obstacle relative to the centerline of the particular direction. For example, as shown in FIG. 4, there are obstacles on the right side of the front side of the UAV 200, and three partitions are displayed in the four partitions in front of the UAV 200. This makes it easier for the operator to locate obstacles.
  • FIG. 5 schematically illustrates another display interface on display screen 340 in accordance with an embodiment of the present invention.
  • the receiver 310 may receive warning or error information from the unmanned aerial vehicle, the warning or error information including at least one of the following: the environment of the unmanned aerial vehicle is too dark; One side of the aircraft is occluded or too close to the obstacle; the obstacle detection system for acquiring obstacle information needs to be calibrated; or other error information of the unmanned aerial vehicle or obstacle detection system.
  • the warning or error message can be displayed on the display screen 340.
  • the left side of the screen shows "The binocular difference is too large and needs to be calibrated", and the bottom of the screen shows "The environment is too dark and the obstacle avoidance system has failed.”
  • the post-trigger warning or error message is prioritized and the previous warning or error message is automatically collapsed.
  • the user wants to view the previous warning or error message, they can click the icon "i" to display the warning or error message that has been collapsed. This way, warnings or error messages are not used to occupy too much display area, which affects the display of other information.
  • FIG. 6 schematically illustrates another display interface on display screen 340 in accordance with an embodiment of the present invention.
  • the warning or error information when warning or error information of a plurality of directions is the same, the warning or error information is displayed only in one of the directions. For example, as shown in Figure 6, the warning or error message on the left and bottom of the screen is the same, only the warning or error message below is displayed.
  • the warning or error information is no longer displayed when the abnormal state corresponding to the warning or error information is eliminated.
  • FIG. 7 schematically illustrates another display interface on display screen 340 in accordance with an embodiment of the present invention.
  • the obstacle information may be superimposed and displayed on a real-time image in a corresponding direction.
  • the controller can view the actual environment in which the UAV 200 is located, easily determine the exact position and size of the obstacle, and adjust the flight route reasonably.
  • FIG. 8 is a block diagram showing the structure of a system 400 for displaying obstacle detection of an unmanned aerial vehicle according to an embodiment of the present invention.
  • the system 400 can be implemented, for example, in the user terminal 100.
  • system 400 includes a receiving module 410, a display control module 420, and a display module 430.
  • the receiving module 410 receives obstacle information located on at least one side of the unmanned aerial vehicle 200, the obstacle information being sensed by at least one sensor mounted on the unmanned aerial vehicle Signal analysis.
  • the display control module 420 can control display of the obstacle information on the display module 430, as explained above with reference to Figures 3-7.
  • receiving module 410 can include a communication device, such as a transceiver or receiver, and the like.
  • the display control module 420 can be implemented, for example, by a processor executing instructions, or by hardware or firmware (eg, a programmable gate array, an application specific integrated circuit, etc.).
  • Display module 430 can be, for example, a display screen.
  • the at least one direction comprises a direction other than forward and backward of the UAV 200.
  • the at least one direction comprises lateral and/or upward of the UAV 200.
  • the at least one direction comprises a forward and/or a backward direction of the UAV 200, according to an embodiment of the invention, the at least one direction comprising a plurality of directions.
  • displaying the obstacle information includes displaying the obstacle information in the plurality of directions of the unmanned aerial vehicle 200 in a radial form.
  • the obstacle information includes at least a distance of the obstacle from the unmanned aerial vehicle 200 and relative orientation information of the obstacle and the unmanned aerial vehicle 200.
  • the display control module 420 can include a distance unit 421 that controls the distance between the display obstacle and the unmanned aerial vehicle 200.
  • the display control module 420 can include an orientation unit 422 that controls display of relative orientation information of the obstacle and the UAV 200, as described above with respect to FIG.
  • the orientation unit 422 can display an arrow on the screen to indicate relative orientation information of the obstacle to the UAV 200.
  • the distance unit 421 may control display of a plurality of icons in a specific direction, wherein according to the distance, a corresponding icon or icon combination of the plurality of icons is highlighted when the unmanned aerial vehicle The icon is highlighted when the distance from the obstacle to the obstacle is less than a predetermined threshold, as described above with reference to FIG.
  • the display control module 420 may include a moving unit 423 that controls display of the flight direction of the unmanned aerial vehicle 200.
  • the mobile unit 423 can control to change a plurality of icons in a particular direction to indicate that the UAV 200 is flying in that direction, as described above with respect to FIG.
  • the display control module 420 may include a presence unit 424 that controls display of presence information of the obstacle.
  • the presence unit 424 controls the display of an "UP" icon indicating that there is an obstacle at the top of the 200.
  • the obstacle information may include an offset of the obstacle relative to the specific direction
  • the display control module includes an offset unit 425 to display one or more partitions on the display screen, wherein The one or more partitions are displayed differently depending on the offset of the obstacle relative to the centerline of the particular direction.
  • the receiving module 410 may receive warning or error information from the UAV 200, the warning or error information including at least one of the following: the environment around the UAV 200 is too dark; One side of the UAV 200 is occluded or too close to the obstacle; the obstacle detection system for acquiring obstacle information needs to be calibrated; or other error information of the UAV 200 or the obstacle detection system.
  • the display control module 420 can include an alarm unit 426 that controls the display of the warning or error information.
  • the alarm unit 426 controls to display warning or error information related to a particular one of the at least one direction
  • the post-triggered warning or error information is preferentially displayed, before The warning or error message is automatically collapsed.
  • a warning or error message that has been collapsed is displayed.
  • the warning or error information of the plurality of directions is the same, the warning or error information is displayed only in one of the directions.
  • the warning or error information is no longer displayed when the abnormal state corresponding to the warning or error information is eliminated.
  • the display control module 420 may include a real-time image unit 427 that controls displaying a real-time image having a direction of the obstacle information, the obstacle information being superimposedly displayed on the real-time image, as above
  • a real-time image unit 427 that controls displaying a real-time image having a direction of the obstacle information, the obstacle information being superimposedly displayed on the real-time image, as above
  • a non-transitory machine readable medium having stored thereon machine readable instructions that, when executed by a processor, implement a method in accordance with an embodiment of the present invention as described above.
  • the flight process of the UAV can be made safer, obstacles in multiple directions can be detected, the obstacle information is clearer and more intuitive, and the obstacle avoidance information is displayed in a perspective manner on the main camera interface. Distinguish the direction.
  • the arrow indicates the position of the current obstacle, and the number shows the distance between the two, which is convenient for the user to control the aircraft, adjust the angle, and easily circumvent the obstacle.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Astronomy & Astrophysics (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

一种显示无人飞行器（200）的障碍检测的方法和系统，方法包括：接收位于无人飞行器（200）的至少一个方向上的障碍物信息，障碍物信息是通过对安装在无人飞行器（200）上的至少一个传感器（210）的感测信号分析得到的；以及显示障碍物信息。

Description

显示无人飞行器的障碍检测的方法和系统
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者专利披露。
技术领域
本发明属于遥控技术领域，具体涉及显示无人飞行器的障碍检测的方法和系统。
背景技术
随着无人飞行器应用领域的日益扩展，使用无人飞行器的场合也变得越来越多样化。很多情况下，需要无人飞行器在复杂的空间中飞行，例如在城市楼宇之间、山区峰峦之间穿梭，此时，实时检测并向操控者显示无人飞行器周围的障碍物，对于实现安全顺利的飞行，就显得尤为重要。
但是，目前的无人飞行器障碍检测系统无法直观、准确地向操控无人机的用户提供飞行路线上的障碍物的显示，给无人飞行器的操控造成了极大不便。
发明内容
本发明的一个方面提供了一种显示无人飞行器的障碍检测的方法，包括：接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；以及显示所述障碍物信息。
本发明的另一个方面提供了一种显示无人飞行器的障碍检测的系统，包括：接收器，接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；处理器；以及存储器，存储有机器可读指令，所述处理器执行所述指令，以控制显示所述障碍物信息。
本发明的另一个方面提供了一种显示无人飞行器的障碍检测的系统，包括：接收模块，接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；以及显示控制模块，控制显示所述障碍物信息。
附图说明
为了更完整地理解本发明及其优势，现在将参考结合附图的以下描述，其中：
图1示意性示出了根据本发明实施例的一种应用场景。
图2示意性示出了根据本发明实施例的显示无人飞行器的障碍检测的系统的结构框图。
图3示意性示出了根据本发明实施例在显示屏幕上的显示界面。
图4示意性示出了根据本发明实施例在显示屏幕上的另一显示界面。
图5示意性示出了根据本发明实施例在显示屏幕上的另一显示界面。
图6示意性示出了根据本发明实施例在显示屏幕上的另一显示界面。
图7示意性示出了根据本发明实施例在显示屏幕上的另一显示界面。
图8示意性示出了根据本发明实施例的显示无人飞行器的障碍检测的系统的结构框图。
具体实施方式
根据结合附图对本发明示例性实施例的以下详细描述，本发明的其它方面、优势和突出特征对于本领域技术人员将变得显而易见。
在本发明中，术语“包括”和“含有”及其派生词意为包括而非限制；术语“或”是包含性的，意为和/或。
在本说明书中，下述用于描述本发明原理的各种实施例只是说明，不应该以任何方式解释为限制发明的范围。参照附图的下述描述用于帮助全面理解由权利要求及其等同物限定的本发明的示例性实施例。下述描述包括多种具体细节来帮助理解，但这些细节应认为仅仅是示例性的。因此，本领域普通技术人员应认识到，在不背离本发明的范围和精神的情况下，可以对本文中描述的实施例进行多种改变和修改。 此外，为了清楚和简洁起见，省略了公知功能和结构的描述。此外，贯穿附图，相同附图标记用于相同或相似的功能和操作。
图1示意性示出了根据本发明实施例的一种应用场景。如图1所示，用户终端100对无人飞行器200的飞行状态进行监控。无人飞行器200上安装有传感器模块210，包括至少一个传感器，用于接收来自无人飞行器200的至少一个方向上的感测信号，通过该感测信号可以分析得到相应方向上的障碍物信息。该障碍物信息可以显示在用户终端100的显示屏幕110上，以便用户能够实时监控无人飞行器200的飞行状态、操控无人飞行器200避开飞行路线上的障碍物。
根据本发明的实施例，用户终端100可以是例如手机、平板电脑等移动终端，其上运行有监控应用程序，接收来自无人飞行器200的障碍物信息并在显示屏幕110上显示。可替换地，电子设备100也可以是通用遥控器或无人飞行器200的专用遥控器，其中设置有用于接收来自无人飞行器200的障碍物信息并在显示屏幕110上显示的硬件模块或电路。
根据本发明的实施例，传感器模块210可以包括至少一个传感器，用于接收来自无人飞行器200的至少一个方向上的感测信号。例如，传感器模块210可以包括一个传感器，用于检测无人飞行器200的前向的障碍物。例如，传感器模块210可以包括两个传感器，分别用于检测无人飞行器200的前向和后向的障碍物。例如，传感器模块210可以包括四个传感器，分别用于检测无人飞行器200的前向、后向、左侧、右侧的障碍物。例如，传感器模块210可以包括五个传感器，分别用于检测无人飞行器200的前向、后向、左侧、右侧、上方的障碍物。例如，传感器模块210可以包括七个传感器，分别用于检测无人飞行器200的前向、后向、左侧、右侧、上方、左前方、右前方的障碍物。传感器模块210中的各个传感器可以是分离实现的，也可以是集成实现的。传感器的检测方向可以根据具体需要进行设置，以检测各种方向或方向组合的障碍物，而不仅限于本发明公开的上述形式。
根据本发明的实施例，传感器模块210中的各个传感器例如可以采用图像传感器、距离传感器、和/或雷达。通过分析传感器模块210接收到的感测信号，可以获得相应方向上的障碍物信息。相应地，所述障碍物信息包括以下至少一种：来源于图像传感器的信息；来源于距离传感器的信息；和/或来源于雷达的信息。根据本发明的实施例，所述障碍物信息包括以下至少一种：所述障碍物的存在信息、所述障 碍物与所述无人飞行器200之间的距离、和/或所述障碍物与所述无人飞行器200的相对方位信息。
图2示意性示出了根据本发明实施例的显示无人飞行器的障碍检测的系统300的结构框图。该系统300例如可以实现在用户终端100中。如图2所示，系统300包括接收器310、处理器320、存储器330、以及显示屏幕340。
根据本发明的实施例，接收器310接收位于无人飞行器200的至少一个方向上的障碍物信息，该障碍物信息是通过对安装在所述无人飞行器200上的传感器模块210的感测信号分析得到的，传感器模块210包括至少一个传感器。存储器320存储有机器可读指令。处理器320执行所述指令，以控制在显示屏幕340上显示所述障碍物信息。
根据本发明的实施例，所述至少一个方向包括所述无人飞行器200的前向和/或后向。根据本发明的实施例，所述至少一个方向包括所述无人飞行器200的前向和后向之外的方向，例如侧向、侧前方、侧后方、上方等。根据本发明的实施例，可以检测并显示一个或多个方向上的障碍物信息，使得操控者可以直观、实时地了解无人飞行器200周围的情况，及时调整飞行速度或路线，实现安全顺利的飞行。
图3示意性示出了根据本发明实施例在显示屏幕340上的显示界面。如图3所示，以辐射状的形式显示无人飞行器200的前、后、左、右方向和上方的障碍物信息。该显示界面显示了各障碍物与无人飞行器200的距离和相对方位信息。具体地，屏幕上的数字表示障碍物与无人飞行器之间的距离，箭头表示障碍物的方位。如图3所示，在无人飞行器200的前向1.2米处、后方1.2米处、左侧3.0米处、右侧5.1米处，均存在障碍物。在无人飞行器上方也存在障碍物。可以理解，虽然图中示出了五个方向，但也可以根据需要获取并显示、或显示更多、更少、或其他方向或方向组合。根据本发明的实施例，在所显示的方向中，可以显示以下中的任意一种或几种障碍物信息的组合：障碍物的存在、障碍物与无人飞行器200的距离、或障碍物与无人飞行器200的相对方位信息。
通过以辐射状进行显示，可以形象地模拟无人飞行器200所处的实际空间环境，给操控者以直观感受。通过在屏幕上显示障碍物与无人飞行器200的距离和相对方位，可以方便操控者更准确地做出判断，最优地控制无人飞行器200的飞行路线。通过可选地设置各种方向或方向组合，可以根据实际需要和地形环境，灵活高效地 利用已有硬件资源，获得最佳监控效果。
另外，根据本发明的实施例，在无人飞行器200的特定方向(例如前方和/或后方，但不限于此)，可以显示该方向上的多个图标，如图3所示。根据无人飞行器200与障碍物之间的距离，可以突出显示相应的图标或图标组合。例如，当无人飞行器200到障碍物的距离小于预设阈值(例如，1.5米)时，可以突出显示绿色图标，随着无人飞行器200与障碍物的距离越来越近，可以显示黄色图标。当该距离变得更近时，可以显示红色图标。又例如，当无人飞行器200到障碍物的距离小于预设阈值(例如，1.5米)时，可以突出显示一个图标，随着无人飞行器200与障碍物的距离越来越近，可以显示两个图标。当该距离变得更近时，可以显示三个图标。通过以图标指示无人飞行器200与障碍物的距离，比用文字提示更加方便直观，易于辨认，并且在该距离较近时，更容易引起操控者的注意。同时，通过突出显示的图标的改变，可以指示无人飞行器200的当前飞行方向。例如，当前方的突出显示图标发生改变时，表示无人飞行器200正在向前方飞行，其他方向亦然。
图4示意性示出了根据本发明实施例在显示屏幕340上的另一显示界面。根据本发明的实施例，对于无人飞行器200的特定方向(例如前方，但不限于此)，接收器310接收的障碍物信息可以包括该障碍物相对于该特定方向的偏移。此时，可以在显示屏幕340上显示一个或多个分区，根据障碍物相对于该特定方向的中心线的偏移，不同地显示所述一个或多个分区。例如，如图4所示，在无人飞行器200前方偏右侧有障碍物，则无人飞行器200前方的四个分区中显示三个分区。这样，使得操控者更容易定位到障碍物。
图5示意性示出了根据本发明实施例在显示屏幕340上的另一显示界面。根据本发明的实施例，接收器310可以接收来自无人飞行器的警告或错误信息，所述警告或错误信息包括以下中的至少一种：所述无人飞行器周围环境太暗；所述无人飞行器的一侧被遮挡或距离障碍物太近；用于获取障碍物信息的障碍检测系统需要校准；或者所述无人飞行器或障碍检测系统的其他错误信息。可以在显示屏幕340上显示所述警告或错误信息。例如，如图5所示，屏幕左侧显示“双目差异过大，需要校准”，屏幕下方显示“环境过暗，避障系统已失效”。根据本发明的实施例，后触发的警告或错误信息优先显示，之前的警告或错误信息自动收起。当用户想要查看之前的警告或错误信息时，可以点击图标“i”，显示已收起的警告或错误信息。 这样，不会使警告或错误信息占用过多显示面积，影响其他信息的显示。
图6示意性示出了根据本发明实施例在显示屏幕340上的另一显示界面。根据本发明的实施例，当多个方向的警告或错误信息相同，则仅在其中的一个方向上显示所述警告或错误信息。例如，如图6所示，屏幕左侧和下方的警告或错误信息相同，则只显示下方的警告或错误信息。这样，当多个方向的警告或错误信息相同时，用户就不必阅读多条信息才能确定这一点。根据本发明的实施例，当所述警告或错误信息所对应的异常状态消除后，不再显示所述警告或错误信息。
图7示意性示出了根据本发明实施例在显示屏幕340上的另一显示界面。根据本发明的实施例，可以将所述障碍物信息叠加显示在相应方向的实时图像上。这样，在显示障碍物信息的同时，操控者可以观看到无人飞行器200所处的实际环境，容易确定障碍物的准确位置、大小，并合理调整飞行路线。
图8示意性示出了根据本发明实施例的显示无人飞行器的障碍检测的系统400的结构框图。该系统400例如可以实现在用户终端100中。如图8所示，系统400包括接收模块410、显示控制模块420、和显示模块430。
根据本发明的实施例，接收模块410接收位于无人飞行器200的至少一个方响上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的。显示控制模块420可以控制在显示模块430上显示所述障碍物信息，如上文参考图3～7说明的那样。
接收模块410、显示控制模块420、和显示模块430可以通过本领域技术人员能够想到的各种方式来实现。例如，根据本发明的实施例，接收模块410可以包括通信装置，例如收发器或接收器等。显示控制模块420例如可以通过处理器执行指令来实现，也可以通过硬件或固件(例如可编程门阵列、专用集成电路等)来实现。显示模块430例如可以是显示屏幕。
根据本发明的实施例，所述至少一个方向包括所述无人飞行器200的前向和后向之外的方向。根据本发明的实施例，所述至少一个方向包括所述无人飞行器200的侧向和/或上方。根据本发明的实施例，所述至少一个方向包括所述无人飞行器200的前向和/或后向根据本发明的实施例，所述至少一个方向包括多个方向。根据本发明的实施例，显示所述障碍物信息包括以辐射状的形式显示所述无人飞行器200多个方向上的障碍物信息。
根据本发明的实施例，障碍物信息至少包括障碍物与所述无人飞行器200的距离以及障碍物与所述无人飞行器200的相对方位信息。如图8所示，显示控制模块420可以包括距离单元421，控制显示障碍物与所述无人飞行器200的距离。显示控制模块420可以包括方位单元422，控制显示障碍物与所述无人飞行器200的相对方位信息，如上文参考图3所述。例如，方位单元422可以在屏幕上显示箭头，以指示障碍物与所述无人飞行器200的相对方位信息。
根据本发明的实施例，距离单元421可以控制显示特定方向上的多个图标，其中，根据所述距离，所述多个图标中相应的图标或图标组合被突出显示，当所述无人飞行器200到该障碍物的距离小于预设阈值时，突出显示所述图标，如上文参考图3所述。
根据本发明的实施例，显示控制模块420可以包括移动单元423，控制显示无人飞行器200的飞行方向。例如，移动单元423可以控制改变特定方向上的多个图标，以指示无人飞行器200正在向该方向飞行，如上文参考图3所述。
根据本发明的实施例，显示控制模块420可以包括存在性单元424，控制显示所述障碍物的存在信息。例如，如图3所示，存在性单元424控制显示“UP”图标，表示200顶部存在障碍物。
根据本发明的实施例，所述障碍物信息可以包括该障碍物相对于该特定方向的偏移，所述显示控制模块包括偏移单元425，在显示屏幕上显示一个或多个分区，其中，根据障碍物相对于该特定方向的中心线的偏移，不同地显示所述一个或多个分区。如上文参考图4所述。
根据本发明的实施例，接收模块410可以接收来自无人飞行器200的警告或错误信息，所述警告或错误信息包括以下中的至少一种：所述无人飞行器200周围环境太暗；所述无人飞行器200的一侧被遮挡或距离障碍物太近；用于获取障碍物信息的障碍检测系统需要校准；或者所述无人飞行器200或障碍检测系统的其他错误信息。显示控制模块420可以包括报警单元426，控制显示所述警告或错误信息。
根据本发明的实施例，如上文参考图5所述，当报警单元426控制显示与所述至少一个方向中的特定方向有关的警告或错误信息时，后触发的警告或错误信息优先显示，之前的警告或错误信息自动收起。当接收到用户指令时，显示已收起的警告或错误信息。
根据本发明的实施例，如上文参考图6所述，如果多个方向的警告或错误信息相同，则仅在其中的一个方向上显示所述警告或错误信息。
根据本发明的实施例，当所述警告或错误信息所对应的异常状态消除后，不再显示所述警告或错误信息。
根据本发明的实施例，所述显示控制模块420可以包括实时图像单元427，控制显示具有所述障碍物信息的方向的实时图像，所述障碍物信息被叠加显示在所述实时图像上，如上文参考图7所述。
根据本发明的实施例，一种非易失性机器可读介质，上面存储有机器可读指令，该指令被处理器执行时，可以实现根据上文所描述的根据本发明实施例的方法。
根据本发明的实施例，可以使无人飞行器的飞行过程更安全，可以检测到多个方向的障碍物，障碍物信息表示更清晰直观，在主相机界面以透视的方式展示避障信息，便于分清方向。箭头指示当前障碍物的位置，数字显示两者之间的距离信息，便于用户控制飞机，调整角度，轻松绕开障碍。
尽管已经参照本发明的特定示例性实施例示出并描述了本发明，但是本领域技术人员应该理解，在不背离所附权利要求及其等同物限定的本发明的精神和范围的情况下，可以对本发明进行形式和细节上的多种改变。因此，本发明的范围不应该限于上述实施例，而是应该不仅由所附权利要求来进行确定，还由所附权利要求的等同物来进行限定。

Claims (59)

  1. 一种显示无人飞行器的障碍检测的方法，包括：
    接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；以及
    显示所述障碍物信息。
  2. 根据权利要求1所述的方法，其中，所述至少一个方向包括所述无人飞行器的前向和后向之外的方向。
  3. 根据权利要求1所述的方法，其中，所述至少一个方向包括所述无人飞行器的侧向和/或上方。
  4. 根据权利要求1所述的方法，其中，所述至少一个方向包括所述无人飞行器的前向和/或后向。
  5. 根据权利要求1所述的方法，其中，所述至少一个方向包括多个方向。
  6. 根据权利要求5所述的方法，其中，所述无人飞行器的至少一个方向上的障碍物信息包括所述无人飞行器的多个方向上的障碍物信息，所述障碍物信息至少包括障碍物与所述无人飞行器的距离以及障碍物与所述无人飞行器的相对方位信息。
  7. 根据权利要求6所述的方法，其中，显示所述障碍物信息包括以辐射状的形式显示所述无人飞行器多个方向上的障碍物信息。
  8. 根据权利要求1所述的方法，其中，所述障碍物信息包括所述障碍物的存在信息和/或所述障碍物与所述无人飞行器之间的距离。
  9. 根据权利要求1所述的方法，其中，所述障碍物信息是通过所述无人飞行器上的传感器获取的，所述障碍物信息包括以下至少一种：
    来源于图像传感器的信息；
    来源于距离传感器的信息；和/或
    来源于雷达的信息。
  10. 根据权利要求1所述的方法，其中，对于所述至少一个方向中的特定方向：
    所述障碍物信息包括无人飞行器到该障碍物的距离；以及
    显示所述障碍物信息包括显示该方向上的多个图标，其中，根据所述距离，所述多个图标中相应的图标或图标组合被突出显示。
  11. 根据权利要求10所述的方法，还包括：
    当所述无人飞行器到该障碍物的距离小于预设阈值时，突出显示所述图标。
  12. 根据权利要求1所述的方法，还包括：
    接收来自无人飞行器的警告或错误信息，所述警告或错误信息包括以下中的至少一种：
    所述无人飞行器周围环境太暗；
    所述无人飞行器的一侧被遮挡或距离障碍物太近；
    用于获取障碍物信息的障碍检测系统需要校准；或者
    所述无人飞行器或障碍检测系统的其他错误信息；以及
    显示所述警告或错误信息。
  13. 根据权利要求12所述的方法，其中，当显示与所述至少一个方向中的特定方向有关的警告或错误信息时：
    后触发的警告或错误信息优先显示，之前的警告或错误信息自动收起；以及
    根据用户指令，显示已收起的警告或错误信息。
  14. 根据权利要求12所述的方法，其中，如果多个方向的警告或错误信息相同，则仅在其中的一个方向上显示所述警告或错误信息。
  15. 根据权利要求12所述的方法，还包括：当所述警告或错误信息所对应的异常状态消除后，不再显示所述警告或错误信息。
  16. 根据权利要求1所述的方法，其中：对于所述至少一个方向中的特定方向，
    所述障碍物信息包括该障碍物相对于该特定方向的偏移；以及
    显示所述障碍物信息包括：
    在显示屏幕上显示一个或多个分区；以及
    根据障碍物相对于该特定方向的中心线的偏移，不同地显示所述一个或多个分区。
  17. 根据权利要求1所述的方法，还包括显示所述无人飞行器的移动方向。
  18. 根据权利要求1所述的方法，显示所述障碍物信息包括将所述障碍物信息叠加显示在相应方向的实时图像上。
  19. 根据权利要求1所述的方法，还包括显示箭头，以指示障碍物相对于无人飞行器的方位。
  20. 一种显示无人飞行器的障碍检测的系统，包括：
    接收器，接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；
    处理器；以及
    存储器，存储有机器可读指令，所述处理器执行所述指令，以控制显示所述障碍物信息。
  21. 根据权利要求20所述的系统，其中，所述至少一个方向包括所述无人飞行器的前向和后向之外的方向。
  22. 根据权利要求20所述的系统，其中，所述至少一个方向包括所述无人飞行器的侧向和/或上方。
  23. 根据权利要求20所述的系统，其中，所述至少一个方向包括所述无人飞行器的前向和/或后向。
  24. 根据权利要求20所述的系统，其中，所述至少一个方向包括多个方向。
  25. 根据权利要求24所述的系统，其中，所述无人飞行器的至少一个方向上的障碍物信息包括所述无人飞行器的多个方向上的障碍物信息，所述障碍物信息至少包括障碍物与所述无人飞行器的距离以及障碍物与所述无人飞行器的相对方位信息。
  26. 根据权利要求25所述的系统，其中，显示所述障碍物信息包括以辐射状的形式显示所述无人飞行器多个方向上的障碍物信息。
  27. 根据权利要求20所述的系统，其中，所述障碍物信息包括所述障碍物的存在信息和/或所述障碍物与所述无人飞行器之间的距离。
  28. 根据权利要求20所述的系统，其中，所述障碍物信息包括以下至少一种：
    来源于图像传感器的信息；
    来源于距离传感器的信息；和/或
    来源于雷达的信息。
  29. 根据权利要求20所述的系统，其中，对于所述至少一个方向中的特定方向：
    所述障碍物信息包括无人飞行器到该障碍物的距离；以及
    显示所述障碍物信息包括显示该方向上的多个图标，其中，根据所述距离，所述多个图标中相应的图标或图标组合被突出显示。
  30. 根据权利要求29所述的系统，还包括：
    当所述无人飞行器到该障碍物的距离小于预设阈值时，突出显示所述图标。
  31. 根据权利要求20所述的系统，其中：
    所述接收器还接收来自无人飞行器的警告或错误信息，所述警告或错误信息包括以下中的至少一种：
    所述无人飞行器周围环境太暗；
    所述无人飞行器的一侧被遮挡或距离障碍物太近；
    用于获取障碍物信息的障碍检测系统需要校准；或者
    所述无人飞行器或障碍检测系统的其他错误信息；以及
    所述处理器还执行指令以控制显示所述警告或错误信息。
  32. 根据权利要求31所述的系统，其中，当显示与所述至少一个方向中的特定方向有关的警告或错误信息时：
    后触发的警告或错误信息优先显示，之前的警告或错误信息自动收起；以及
    根据用户指令，显示已收起的警告或错误信息。
  33. 根据权利要求31所述的系统，其中，如果多个方向的警告或错误信息相同，则仅在其中的一个方向上显示所述警告或错误信息。
  34. 根据权利要求31所述的系统，还包括：当所述警告或错误信息所对应的异常状态消除后，不再显示所述警告或错误信息。
  35. 根据权利要求20所述的系统，其中：对于所述至少一个方向中的特定方向，
    所述障碍物信息包括该障碍物相对于该特定方向的偏移；以及
    显示所述障碍物信息包括：
    在显示屏幕上显示一个或多个分区；以及
    根据障碍物相对于该特定方向的中心线的偏移，不同地显示所述一个或多个分区。
  36. 根据权利要求20所述的系统，其中，所述处理器还执行指令以控制显示所述无人飞行器的移动方向。
  37. 根据权利要求20所述的系统，其中，所述处理器还执行指令以将所述障碍物信息叠加显示在相应方向的实时图像上。
  38. 根据权利要求20所述的系统，其中，所述处理器还执行指令以控制显示箭头，以指示障碍物相对于无人飞行器的方位。
  39. 根据权利要求37所述的系统，还包括：
    显示屏幕，显示所述障碍物信息。
  40. 一种显示无人飞行器的障碍检测的系统，包括：
    接收模块，接收位于所述无人飞行器的至少一个方向上的障碍物信息，所述障碍物信息是通过对安装在所述无人飞行器上的至少一个传感器的感测信号分析得到的；以及
    显示控制模块，控制显示所述障碍物信息。
  41. 根据权利要求40所述的系统，其中，所述至少一个方向包括所述无人飞行器的前向和后向之外的方向。
  42. 根据权利要求40所述的系统，其中，所述至少一个方向包括所述无人飞行器的侧向和/或上方。
  43. 根据权利要求40所述的系统，其中，所述至少一个方向包括所述无人飞行器的前向和/或后向。
  44. 根据权利要求40所述的系统，其中，所述至少一个方向包括多个方向。
  45. 根据权利要求44所述的系统，其中：
    所述无人飞行器的至少一个方向上的障碍物信息包括所述无人飞行器的多个方向上的障碍物信息；
    所述障碍物信息至少包括障碍物与所述无人飞行器的距离以及障碍物与所述无人飞行器的相对方位信息；以及
    所述显示控制模块包括：
    距离单元，控制显示障碍物与所述无人飞行器的距离；以及
    方位单元，控制显示障碍物与所述无人飞行器的相对方位信息。
  46. 根据权利要求45所述的系统，其中，显示所述障碍物信息包括以辐射状的形式显示所述无人飞行器多个方向上的障碍物信息。
  47. 根据权利要求40所述的系统，其中：
    所述障碍物信息包括所述障碍物的存在信息和/或所述障碍物与所述无人飞行器之间的距离；以及
    所述显示控制模块包括：
    存在性单元，控制显示所述障碍物的存在信息；以及/或者
    距离单元，控制显示所述障碍物与所述无人飞行器之间的距离。
  48. 根据权利要求40所述的系统，其中，所述障碍物信息包括以下至少一种：
    来源于图像传感器的信息；
    来源于距离传感器的信息；和/或
    来源于雷达的信息。
  49. 根据权利要求40所述的系统，其中，对于所述至少一个方向中的特定方向：
    所述障碍物信息包括无人飞行器到该障碍物的距离；以及
    所述距离单元控制显示该方向上的多个图标，其中，根据所述距离，所述多个图标中相应的图标或图标组合被突出显示。
  50. 根据权利要求49所述的系统，还包括：
    当所述无人飞行器到该障碍物的距离小于预设阈值时，突出显示所述图标。
  51. 根据权利要求40所述的系统，其中：
    所述接收模块还接收来自无人飞行器的警告或错误信息，所述警告或错误信息包括以下中的至少一种：
    所述无人飞行器周围环境太暗；
    所述无人飞行器的一侧被遮挡或距离障碍物太近；
    用于获取障碍物信息的障碍检测系统需要校准；或者
    所述无人飞行器或障碍检测系统的其他错误信息；以及
    所述显示控制模块还包括报警单元，控制显示所述警告或错误信息。
  52. 根据权利要求51所述的系统，其中，当报警单元控制显示与所述至少一个方向中的特定方向有关的警告或错误信息时：
    后触发的警告或错误信息优先显示，之前的警告或错误信息自动收起；以及
    根据用户指令，显示已收起的警告或错误信息。
  53. 根据权利要求51所述的系统，其中，如果多个方向的警告或错误信息相同，则仅在其中的一个方向上显示所述警告或错误信息。
  54. 根据权利要求51所述的系统，还包括：当所述警告或错误信息所对应的异常状态消除后，不再显示所述警告或错误信息。
  55. 根据权利要求47所述的系统，其中：对于所述至少一个方向中的特定方向，
    所述障碍物信息包括该障碍物相对于该特定方向的偏移；以及
    所述显示控制模块包括偏移单元，在显示屏幕上显示一个或多个分区，其中，根据障碍物相对于该特定方向的中心线的偏移，不同地显示所述一个或多个分区。
  56. 根据权利要求47所述的系统，其中，所述显示控制模块包括移动单元，控制显示所述无人飞行器的移动方向。
  57. 根据权利要求47所述的系统，其中，所述显示控制模块包括实时图像单元，控制显示具有所述障碍物信息的方向的实时图像，所述障碍物信息被叠加显示在所述实时图像上。
  58. 根据权利要求45所述的系统，其中，所述方位单元控制显示箭头，以指示障碍物相对于无人飞行器的方位。
  59. 根据权利要求57所述的系统，还包括：
    显示模块，显示所述障碍物信息。
PCT/CN2016/098618 2016-09-09 2016-09-09 显示无人飞行器的障碍检测的方法和系统 WO2018045577A1 (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201680002321.2A CN107077145A (zh) 2016-09-09 2016-09-09 显示无人飞行器的障碍检测的方法和系统
PCT/CN2016/098618 WO2018045577A1 (zh) 2016-09-09 2016-09-09 显示无人飞行器的障碍检测的方法和系统
US16/296,740 US11145213B2 (en) 2016-09-09 2019-03-08 Method and system for displaying obstacle detection

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/098618 WO2018045577A1 (zh) 2016-09-09 2016-09-09 显示无人飞行器的障碍检测的方法和系统

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/296,740 Continuation US11145213B2 (en) 2016-09-09 2019-03-08 Method and system for displaying obstacle detection

Publications (1)

Publication Number Publication Date
WO2018045577A1 true WO2018045577A1 (zh) 2018-03-15

Family

ID=59623415

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/098618 WO2018045577A1 (zh) 2016-09-09 2016-09-09 显示无人飞行器的障碍检测的方法和系统

Country Status (3)

Country Link
US (1) US11145213B2 (zh)
CN (1) CN107077145A (zh)
WO (1) WO2018045577A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115631660A (zh) * 2022-12-07 2023-01-20 南通翔昇人工智能科技有限公司 一种基于云计算的无人机安防监管系统

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105867361A (zh) * 2016-04-18 2016-08-17 深圳市道通智能航空技术有限公司 一种飞行方向控制方法、装置及其无人机
CN108521808B (zh) * 2017-10-31 2021-12-07 深圳市大疆创新科技有限公司 一种障碍信息显示方法、显示装置、无人机及系统
CN108521809A (zh) * 2017-12-18 2018-09-11 深圳市大疆创新科技有限公司 障碍物信息提示方法、系统、设备、装置及记录介质
WO2019127302A1 (zh) * 2017-12-29 2019-07-04 深圳市大疆创新科技有限公司 一种无人机、控制终端的控制方法及相关设备
CN110313170B (zh) 2018-01-19 2021-08-31 深圳市大疆创新科技有限公司 视觉模组集成模块与无人机
CN108319295B (zh) * 2018-01-22 2021-05-28 深圳市大疆创新科技有限公司 避障控制方法、设备及计算机可读存储介质
CN111918821B (zh) * 2018-03-19 2024-07-02 本田技研工业株式会社 飞行器以及飞行器的控制方法
CN110291481B (zh) * 2018-06-30 2022-08-05 深圳市大疆创新科技有限公司 一种信息提示方法及控制终端
CN108910064A (zh) * 2018-07-19 2018-11-30 上海小蚁科技有限公司 无人机避障提示方法及装置、存储介质、终端
CN110869872A (zh) * 2018-11-30 2020-03-06 深圳市大疆创新科技有限公司 障碍物的精准确定方法、设备及计算机可读存储介质
CN109583384A (zh) * 2018-11-30 2019-04-05 百度在线网络技术（北京）有限公司 用于无人驾驶车的避障方法和装置
CN109828559A (zh) * 2019-01-11 2019-05-31 丰疆智慧农业股份有限公司 用于智能农机的障碍检测方法及其系统
CN110244760A (zh) * 2019-06-06 2019-09-17 深圳市道通智能航空技术有限公司 一种避障方法、装置和电子设备
WO2021212519A1 (zh) * 2020-04-24 2021-10-28 深圳市大疆创新科技有限公司 飞行指引方法、装置、系统、遥控终端及可读存储介质
WO2021212518A1 (zh) * 2020-04-24 2021-10-28 深圳市大疆创新科技有限公司 飞行指引方法、装置、系统、控制终端及可读存储介质
CN112771464A (zh) * 2020-04-27 2021-05-07 深圳市大疆创新科技有限公司 飞行提示方法、装置、控制终端、系统及存储介质
CN112357100B (zh) * 2020-10-27 2022-06-28 苏州臻迪智能科技有限公司 一种显示障碍物信息的方法、装置和计算机可读存储介质
EP4087236A1 (en) * 2021-05-03 2022-11-09 Honeywell International Inc. Video surveillance system with vantage point transformation

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130009894A (ko) * 2013-01-05 2013-01-23 이상윤 공간정보기술을 이용한 근거리 정밀타격 무인항공기시스템
CN103984357A (zh) * 2014-05-30 2014-08-13 中国人民解放军理工大学 一种基于全景立体成像设备的无人机自动避障飞行系统
CN105138002A (zh) * 2015-09-10 2015-12-09 华南农业大学 基于激光与双目视觉的无人机避险探测系统及方法
CN204946369U (zh) * 2015-08-24 2016-01-06 深圳市诺亚星辰科技开发有限公司 一种无人直升机自动预警系统
CN105517666A (zh) * 2014-09-05 2016-04-20 深圳市大疆创新科技有限公司 基于情景的飞行模式选择

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7215256B2 (en) * 2004-03-12 2007-05-08 Honeywell International Inc. Method and apparatus for displaying attitude, heading, and terrain data
JP2006341641A (ja) * 2005-06-07 2006-12-21 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
US20100250022A1 (en) * 2006-12-29 2010-09-30 Air Recon, Inc. Useful unmanned aerial vehicle
FR2935792B1 (fr) * 2008-09-05 2010-09-03 Thales Sa Dispositif de visualisation pour aeronef comprenant des moyens d'affichage de balises de radionavigation et procede associe
JP2011205513A (ja) * 2010-03-26 2011-10-13 Aisin Seiki Co Ltd 車両周辺監視装置
CN201681466U (zh) * 2010-05-07 2010-12-22 深圳市飞瑞斯科技有限公司 一种有取景障碍报警设置的监控装置
DE102011010679A1 (de) * 2011-02-08 2012-08-09 Eads Deutschland Gmbh Unbemanntes Luftfahrzeug mit eingebautem Kollisionswarnsystem
JP5587499B2 (ja) * 2011-06-07 2014-09-10 株式会社小松製作所 作業車両の周辺監視装置
US9091762B2 (en) * 2011-10-27 2015-07-28 Gulfstream Aerospace Corporation Methods and systems for avoiding a collision between an aircraft on a ground surface and an obstacle
EP2672289B1 (en) * 2012-06-06 2014-09-10 AIRBUS HELICOPTERS DEUTSCHLAND GmbH Obstacle information system of a helicopter
FR2996671B1 (fr) * 2012-10-05 2014-12-26 Dassault Aviat Systeme de visualisation pour un aeronef en approche d'une piste d'atterrissage et procede de visualisation associe
US10302759B1 (en) * 2013-03-05 2019-05-28 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Automatic dependent surveillance broadcast (ADS-B) system with radar for ownship and traffic situational awareness
US20150321758A1 (en) * 2013-08-31 2015-11-12 II Peter Christopher Sarna UAV deployment and control system
KR101573576B1 (ko) * 2013-10-08 2015-12-01 현대자동차주식회사 Avm 시스템의 이미지 처리 방법
CN103675827A (zh) * 2013-11-18 2014-03-26 法雷奥汽车内部控制（深圳）有限公司 车载雷达探测虚拟全景系统
US9472109B2 (en) * 2014-01-07 2016-10-18 Honeywell International Inc. Obstacle detection system providing context awareness
JP6134668B2 (ja) * 2014-02-18 2017-05-24 日立建機株式会社 作業車両の障害物検知装置
US20150298017A1 (en) * 2014-04-18 2015-10-22 Toy Labs, Inc. Hand-launched, solar-powered aircraft
CN104007441B (zh) * 2014-05-12 2016-06-22 格利尔数码科技股份有限公司 一种车载全景雷达监测方法
CN203888640U (zh) * 2014-06-05 2014-10-22 展德企业社 抬头显示器
US9817396B1 (en) * 2014-06-09 2017-11-14 X Development Llc Supervisory control of an unmanned aerial vehicle
KR20160058471A (ko) * 2014-11-17 2016-05-25 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US10831186B2 (en) * 2015-04-14 2020-11-10 Vantage Robotics, Llc System for authoring, executing, and distributing unmanned aerial vehicle flight-behavior profiles
CN104743128A (zh) * 2015-04-23 2015-07-01 沈阳飞羽航空科技有限公司 通用飞机机组综合警告系统
CN104932524A (zh) * 2015-05-27 2015-09-23 深圳市高巨创新科技开发有限公司 一种无人飞行器及全向蔽障的方法
CN105203084B (zh) * 2015-07-02 2017-12-22 汤一平 一种无人机3d全景视觉装置
US9752893B2 (en) * 2015-07-30 2017-09-05 Honeywell International Inc. Onboard aircraft systems and methods to identify moving landing platforms
CN105159297B (zh) * 2015-09-11 2018-02-13 南方电网科学研究院有限责任公司 输电线路无人机巡检避障系统与方法
CN105242276A (zh) * 2015-09-15 2016-01-13 清华大学苏州汽车研究院（吴江） 一种基于超声波传感器的泊车辅助系统
US9779629B2 (en) * 2015-10-30 2017-10-03 Honeywell International Inc. Obstacle advisory system
US20170242429A1 (en) * 2016-02-24 2017-08-24 Dronomy Ltd. Scale factors for gesture-based control of an unmanned aerial vehicle
US20170263138A1 (en) * 2016-03-09 2017-09-14 United States Of America As Represented By The Secretary Of The Navy Method for Providing a Collision Avoidance System for an Ownship

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130009894A (ko) * 2013-01-05 2013-01-23 이상윤 공간정보기술을 이용한 근거리 정밀타격 무인항공기시스템
CN103984357A (zh) * 2014-05-30 2014-08-13 中国人民解放军理工大学 一种基于全景立体成像设备的无人机自动避障飞行系统
CN105517666A (zh) * 2014-09-05 2016-04-20 深圳市大疆创新科技有限公司 基于情景的飞行模式选择
CN204946369U (zh) * 2015-08-24 2016-01-06 深圳市诺亚星辰科技开发有限公司 一种无人直升机自动预警系统
CN105138002A (zh) * 2015-09-10 2015-12-09 华南农业大学 基于激光与双目视觉的无人机避险探测系统及方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115631660A (zh) * 2022-12-07 2023-01-20 南通翔昇人工智能科技有限公司 一种基于云计算的无人机安防监管系统

Also Published As

Publication number Publication date
US20190206269A1 (en) 2019-07-04
CN107077145A (zh) 2017-08-18
US11145213B2 (en) 2021-10-12

Similar Documents

Publication Publication Date Title
WO2018045577A1 (zh) 显示无人飞行器的障碍检测的方法和系统
US20200302804A1 (en) Method and device for setting a flight route
US20210223794A1 (en) Aerial vehicle video and telemetric data synchronization
US11797028B2 (en) Unmanned aerial vehicle control method and device and obstacle notification method and device
EP3871936B1 (en) Safe distance warning method for automatic parking, and vehicle-mounted terminal
US9652990B2 (en) Systems and methods for monitoring unmanned aerial vehicles
WO2018068647A1 (zh) 一种汽车与无人机之间的通信方法、装置、设备和操作系统
US9881482B2 (en) Method and device for displaying information of a system
US20200141755A1 (en) Navigation processing method, apparatus, and control device
EP3121763A1 (en) Helo bumper system using a camera for obstacle detection
WO2018207303A1 (ja) 車載用監視カメラ装置
EP2682925B1 (en) Vehicle monitoring method and system
WO2017192666A1 (en) Autonomous aerial vehicle
JP6747537B2 (ja) 監視システム、監視方法および監視プログラム
KR20150129387A (ko) 비히클 및 그 제어 방법
CN102981606A (zh) 信息处理装置、信息处理方法和程序
US11080561B2 (en) Training and verification of learning models using high-definition map information and positioning information
US20150341981A1 (en) Time chart for sensor based detection system
US10565887B2 (en) Flight initiation proximity warning system
CN113240939A (zh) 一种车辆预警方法、装置、设备及存储介质
WO2019061224A1 (zh) 一种控制终端的控制方法及控制终端
US11091100B2 (en) Work vehicle multi-camera vision systems
CN112771464A (zh) 飞行提示方法、装置、控制终端、系统及存储介质
KR20180119344A (ko) 영역 감시 장치 및 이에 의한 영역 감시 방법
KR101680886B1 (ko) 선박용 센싱 통합 인터페이스 기반 대시보드 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16915511

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16915511

Country of ref document: EP

Kind code of ref document: A1