JP2015188150A - 空撮映像配信システムおよび空撮映像配信方法 - Google Patents
空撮映像配信システムおよび空撮映像配信方法 Download PDFInfo
- Publication number
- JP2015188150A JP2015188150A JP2014064640A JP2014064640A JP2015188150A JP 2015188150 A JP2015188150 A JP 2015188150A JP 2014064640 A JP2014064640 A JP 2014064640A JP 2014064640 A JP2014064640 A JP 2014064640A JP 2015188150 A JP2015188150 A JP 2015188150A
- Authority
- JP
- Japan
- Prior art keywords
- aerial
- ground station
- video
- unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 13
- 238000000034 method Methods 0.000 title claims description 15
- 238000004891 communication Methods 0.000 claims abstract description 140
- 238000005259 measurement Methods 0.000 claims abstract description 42
- 230000005540 biological transmission Effects 0.000 claims description 29
- 238000012937 correction Methods 0.000 claims description 20
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims description 13
- 230000010365 information processing Effects 0.000 claims description 5
- 238000002716 delivery method Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 5
- 230000005855 radiation Effects 0.000 description 4
- 239000002341 toxic gas Substances 0.000 description 4
- 229910000831 Steel Inorganic materials 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 239000007789 gas Substances 0.000 description 2
- 239000010959 steel Substances 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 238000001931 thermography Methods 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 239000005433 ionosphere Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【課題】無人航空機と地上局との距離にかかわらず、無人航空機によって撮影された空撮画像データをリアルタイム配信する。【解決手段】空撮映像配信システムは、無人航空機と地上局とから構成され、無人航空機から撮影された映像を配信する。無人航空機は、衛星通信を介して地上局と通信を行う通信部と、撮影を行って空撮画像データを取得するカメラと、空撮画像データを、通信部により地上局へ送信する送信部とを有する。地上局は、衛星通信を介して無人航空機と通信を行う通信部と、空撮画像データを、通信部により無人航空機から受信する受信部と、空撮画像データを含む映像データを生成する映像生成部とを有する。無人航空機から位置情報を地上局に送信し、地上局において補正した上で空撮画像とともに表示する。無人航空機は空撮画像以外に各種センサによる計測データも地上局に送信し、地上局は計測データも表示することが好ましい。【選択図】図1
Description
本発明は、無人航空機から撮影した映像を配信する技術に関する。
近年、カメラの高分解能化や無線通信技術の普及に伴い、航空機を用いて上空から画像を撮影したりセンサによる計測を行ったりして情報収集を行うことが検討されている。特に、無人航空機(以下、無人機やUAV(Unmanned Aerial Vehicle)とも称する)を用
いた情報収集は、有人機では到達しにくい災害地域や事故現場などにおいても、安全にかつ効率よく情報を取得できる手段として注目されている(特許文献1)。無人機によって取得した空撮画像や計測データを、無線通信によって即座に地上局などに送信すれば、地上局ではリアルタイムな情報収集が可能となる。
いた情報収集は、有人機では到達しにくい災害地域や事故現場などにおいても、安全にかつ効率よく情報を取得できる手段として注目されている(特許文献1)。無人機によって取得した空撮画像や計測データを、無線通信によって即座に地上局などに送信すれば、地上局ではリアルタイムな情報収集が可能となる。
無人機が収集したデータを無線通信により地上局に送信する場合、無人機は地上局と無線通信可能な範囲内にいなければ、収集データをリアルタイムに送信することはできない。無人機を複数配置し、これらの無人機の間でアドホックネットワークを形成してデータを中継して地上局まで送信することで、より広範囲な情報収集が可能となるが、そのためには複数の無人機を利用する必要があり、実現するためのコストが高いという問題がある。
本発明は、上記実情に鑑みてなされたものであり、その目的は、無人航空機によって撮影された空撮画像データをリアルタイム配信することにある。
本発明は、無人航空機と地上局とから構成され、無人航空機から撮影された映像を配信する空撮映像配信システムである。本発明において、無人航空機は、衛星通信を介して前記地上局と通信を行う通信部と、撮影を行って空撮画像データを取得するカメラと、前記空撮画像データを、前記通信部により前記地上局へ送信する送信部と、を有する。また、地上局は、衛星通信を介して前記無人航空機と通信を行う通信部と、前記空撮画像データを、前記通信部により前記無人航空機から受信する受信部と、前記空撮画像データを含む映像データを生成する映像生成部と、を有する。
このような構成によれば、無人航空機によって撮影された映像を、衛星通信を介して地上局に配信できる。なお、地上局において生成した映像は、地上局がその他の装置に配信してもよいし、地上局の内部で表示されてもよい。また、衛星通信は地上を広範囲にカバーできるので、衛星通信を行うための通信装置を無人航空機に搭載するだけで、無人航空機による情報収集範囲を広げることが可能となる。本発明の構成によれば、通信範囲という観点からは、無人航空機と地上局との間の距離に関する制限は原則的になくなる。
本発明における無人航空機には、人間が搭乗していない飛行体であれば任意の飛行体が含まれる。例えば、本発明における無人航空機には、固定翼機、回転翼機、飛行船、気球
などが含まれる。また、本発明における衛星通信は、人工衛星による中継を介した通信であれば、その形態は特に限定されない。例えば、本発明における衛星通信には、静止衛星を用いた通信、準天頂衛星を用いた通信、非静止衛星(長円軌道、中高度軌道、低高度軌道)を用いた通信が含まれる。また、本発明における地上局は、地上および海上を含む地球表面に位置する通信設備であり、固定設備以外に、車両や船舶等に搭載された移動設備も含まれる。
などが含まれる。また、本発明における衛星通信は、人工衛星による中継を介した通信であれば、その形態は特に限定されない。例えば、本発明における衛星通信には、静止衛星を用いた通信、準天頂衛星を用いた通信、非静止衛星(長円軌道、中高度軌道、低高度軌道)を用いた通信が含まれる。また、本発明における地上局は、地上および海上を含む地球表面に位置する通信設備であり、固定設備以外に、車両や船舶等に搭載された移動設備も含まれる。
本発明において、前記無人航空機は、位置情報を取得する位置情報取得部を更に有し、前記送信部は、前記空撮画像データとともに、当該空撮画像データを取得した際の位置情報を送信し、前記映像生成部は、前記空撮画像データとともに前記位置情報含む映像データを生成する、ことも好ましい。位置情報取得部は、例えば、GPS、ガリレオ、北斗などの衛星測位システムを用いた装置とすることができる。衛星測位システムによって、緯度・経度・高度を取得することができる。なお、高度については高度計(気圧高度計および電波高度計を含む)を用いて取得してもよい。
このような構成によれば、無人航空機の位置を常時監視可能になる。無人航空機において、飛行経路を予め設定して地上局から遠くまで自動飛行させると、地上局では飛行中の位置が不明になり、空撮画像の取得位置を正確に知ることは困難となる場合がある。また、空撮画像の取得位置が分からないと、空撮画像を十分に活用できない。上記の構成によれば、衛星通信を介して位置情報を送信することで、地上局および映像データの配信先において無人航空機の位置、すなわち空撮画像の撮影位置が正確に把握できる。したがって、無人航空機から送信される空撮画像を有効に活用することができる。
また、本発明において、前記地上局は、地理情報を格納する地理情報記憶部を更に有し、前記映像生成部は、地図画像上での前記無人航空機の位置を表す映像データを生成する、ことが好ましい。地図画像上で無人航空機の位置を表すことで、無人航空機の位置を容易に把握可能となる。
また、本発明において、前記映像生成部は、前記無人機の位置を表す映像データに、前記地上局と前記無人航空機との間の直線距離または高度差の少なくともいずれかを表示する、ことも好ましい。また、無人航空機の飛行経路や目的地が設定されている場合は、目的地と無人航空機の間の直線距離や高度差や、目的地までの到達予想時間などもあわせて表示することも好ましい。また、無人航空機と地上局の位置情報において、無人航空機が地上局まで帰還可能であること(燃料等にどの程度の余裕があるかを含む)を表示することも好ましい。
また、本発明において、前記地上局は、位置情報を取得する位置情報取得部と、前記地上局が前記位置情報取得部によって取得した位置情報と前記地上局の実際の位置情報とに基づいて、前記無人航空機の位置情報を補正する位置情報補正部と、を更に有することも好ましい。位置情報には誤差が含まれることも考えられるが、位置情報取得部によって取得される位置情報には地上局および無人航空機の両方に同様の誤差が含まれる場合には、地上局が位置情報取得部によって取得した位置情報と地上局の実際の位置情報の差に基づいて、無人航空機の位置情報を補正することができる。特に、地上局が固定局でありその実際の位置情報が正確に把握可能である場合には、精度良い補正が可能である。
また、本発明において、前記地上局は、基準地物の映像を含む地理情報を格納する地理情報記憶部と、前記空撮画像データと基準地物との比較により、前記無人航空機の位置情報を補正する位置情報補正部と、を更に有することも好ましい。地理情報記憶部に、特定の位置から基準地物を撮影したときの映像を格納し、空撮画像データに基準地物が含まれているかや、空撮画像データのどの位置に基準地物が含まれているかに基づいて、無人航
空機の位置情報を精度良く推定可能である。なお、基準地物とは、基準となる地物(地上に存在する物)であれば任意の物体であってよく、例えば、道路、建設物、鉄塔、山、河などが含まれる。
空機の位置情報を精度良く推定可能である。なお、基準地物とは、基準となる地物(地上に存在する物)であれば任意の物体であってよく、例えば、道路、建設物、鉄塔、山、河などが含まれる。
また、本発明において、前記無人航空機は、時刻情報を取得する時刻情報取得部を更に有し、前記送信部は、前記空撮画像データとともに、当該空撮画像データを取得した際の時刻情報を送信し、前記映像生成部は、前記空撮画像データとともに前記時刻情報を含む映像データを生成する、ことも好ましい。衛星通信を介して空撮画像データなどを送信する場合、通信の遅延が生じて地上局において映像データを生成した時刻と当該映像の元となる空撮画像が撮影された時刻の間にずれが生じる場合がある。映像データに時刻情報を含めることで、いつの時点で撮影された空撮画像であるかが把握可能となる。前記映像生成部は、前記空撮画像データが取得された時刻と、前記映像データ生成時のあいだの時間差を含む映像データを生成する、ことも好ましい。これにより、例えば何秒前に撮影された空撮画像であるかが把握可能となる。空撮画像に基づいて無人航空機を制御する場合などには、地上局などで見ている空撮画像がいつの時点で撮影されたか(特に、現在時刻からどれだけ前に撮影されたか)という情報は有益な情報である。
また、本発明において、前記無人航空機は、当該無人航空機外部の計測データを取得するセンサを更に有し、前記送信部は、前記空撮画像データとともに前記計測データも前記地上局へ送信し、前記地上局は、前記空撮画像データと前記計測データを含む映像データを生成する、ことも好ましい。センサは、対象物の物理的・化学的な性質を信号やデータに変換して出力する任意の装置であり、例えば、赤外線センサ、赤外線サーモグラフィ、マイクロ波レーダ、ミリ波レーダ、超音波レーダ、集音装置、放射線センサ、ガスセンサ、有毒ガス検知器、大気測定装置、磁気センサ、イオンセンサ、気圧センサ、温度・湿度センサ、人命探査装置などが含まれるが、これらには限定されない。このように、センサを搭載して、飛行中にセンサから得られる計測データを衛星通信を介して地上局に送信することで、地上において計測データをリアルタイムに観察可能となる。無人航空機を用いた計測は、特に、放射線濃度が高い場所や、有毒ガス濃度の高い火山や事故現場など、有人機では接近が難しい場所でのリアルタイム観測に適する。
また、本発明において、前記無人航空機は、前記センサによる計測データが所定の基準を満たすか否か判断し、当該基準を満たす場合に、前記カメラによる撮影および、前記送信部による送信を開始する、ことも好ましい。このようにすれば、条件に適合する場合に空撮画像を送信することができる。
また、本発明において、前記地上局は、前記映像データを配信する映像配信部を更に有することも好ましい。この映像配信部は、データ通信網を経由して前記映像データを他の情報処理装置へ送信する、ことも好ましい。例えば、通信網は任意のデータ通信網であってよく、例えば、WAN(Wide Area Network)、典型的にはインターネットを用いて映像データを配信すれば、遠距離の拠点に対して映像データの配信が可能となる。WAN以外にも、LAN(Local Area Network)やMAN(Metropolitan Area Network)などのデータ通信網を用いてもよい。また、専用線で接続されたデータ通信網を用いてもよい。もっとも、データ通信網を使わずに、放送によって映像データを配信するようにしても構わない。
また、本発明において、前記地上局は、前記無人航空機のカメラを制御するカメラ制御コマンドを前記通信部により前記無人航空機に対して送信するカメラ操作部を更に有し、前記無人航空機は、前記地上局から、前記カメラ制御コマンドを受信する受信部と、前記カメラ制御コマンドにしたがって、前記カメラの撮影方向または撮影倍率の少なくともいずれかを制御するカメラ制御部と、を更に有することも好ましい。
また、本発明において、前記地上局は、前記無人航空機を制御する飛行制御コマンドを前記通信部により前記無人航空機に対して送信する機体操作部を更に有し、前記無人航空機は、前記地上局から、前記飛行制御コマンドを受信する受信部と、前記飛行制御コマンドにしたがって、前記無人機の飛行を制御する機体制御部と、を更に有することも好ましい。
このように、地上局からカメラ制御コマンドや飛行制御コマンドを無人航空機に対して衛星通信経由で送信することで、地上局からリアルタイムな操作が可能となる。無人航空機からリアルタイム送信される空撮画像などを見ながら操作が可能となるので、利便性が高い。特に、空撮画像とともに位置情報や時刻情報が同時に表示される場合には、地上局からより高度な制御が可能となる。
また、本発明は、上記手段の少なくとも一部を含む空撮映像配信システムや無人航空機や地上局として捉えることができる。また、本発明は、上記処理の少なくとも一部を含む空撮映像配信方法、または、かかる方法をコンピュータに実行させるためのプログラムやそのプログラムを非一時的に記憶したコンピュータ読取可能な記録媒体として捉えることもできる。上記構成および処理の各々は技術的な矛盾が生じない限り互いに組み合わせて本発明を構成することができる。
本発明によれば、無人航空機と地上局との距離にかかわらず、無人航空機によって撮影された空撮画像データをリアルタイム配信することができる。
以下に図面を参照して、この発明を実施するための形態を、実施例に基づいて例示的に詳しく説明する。ただし、この実施例に記載されている構成部品の寸法、材質、形状、その相対配置などは、特に記載がない限りは、この発明の範囲をそれらのみに限定する趣旨のものではない。
(第1の実施形態)
<システム概要>
本発明の第1の実施形態は、無人航空機(以下では、UAV:Unmanned Aerial Vehicle、または無人機と称する)が空撮によって撮影した画像を、リアルタイムに配信する空
撮映像配信システムである。図1は、本実施形態にかかる空撮映像配信システムの概要を示す図である。
<システム概要>
本発明の第1の実施形態は、無人航空機(以下では、UAV:Unmanned Aerial Vehicle、または無人機と称する)が空撮によって撮影した画像を、リアルタイムに配信する空
撮映像配信システムである。図1は、本実施形態にかかる空撮映像配信システムの概要を示す図である。
空撮映像配信システムは、無人機1、通信衛星2、地上局3、およびエンドユーザ設備4からなる。無人機1によって空撮された画像は、衛星通信によって地上局3に送信され、地上局からエンドユーザ設備4に配信される。衛星通信を介して空撮画像を送信するため、無人機1が地上局3から遠くに離れていてもリアルタイムに空撮画像を送信できる。また、衛星通信を行うためには無人機1に衛星通信用のアンテナおよび通信機を設置すればよいだけなので、空撮画像のリアルタイム配信が低コストで実現できる。
また、本実施形態にかかる空撮映像配信システムでは、無人機1は、空撮画像とともに位置情報や時刻情報を、衛星通信を介して地上局3へ送信する。位置情報の送信により、地上局3において無人機1の位置を常時監視可能となる。また、時刻情報をあわせて送信することで、衛星通信による遅延が生じた場合であっても、無人機1から送信されている空撮画像がいつ(例えば、何秒前に)撮影されたものであるかも把握可能となる。
また、本実施形態にかかる空撮映像配信システムでは、地上局3から衛星通信を介して無人機1に対して、飛行制御の指示や空撮カメラの制御指示を送信可能とする。これにより、緊急回避や飛行経路の変更が必要になったときや、空撮の撮影方向や撮影倍率などを変更したいときに、対処が可能となる。
<構成>
以下、本実施形態にかかる空撮映像配信システムの構成について、図2を参照してより詳細に説明する。図2は、無人機1および地上局3の機能ブロックを示す図である。
以下、本実施形態にかかる空撮映像配信システムの構成について、図2を参照してより詳細に説明する。図2は、無人機1および地上局3の機能ブロックを示す図である。
[無人機1]
無人機1は、人間が搭乗することなく自律飛行が可能な任意の飛行体である。無人機1には、固定翼機、回転翼機、飛行船、気球などが含まれる。また、以下で説明する機能を提供する装置を搭載可能であれば、その大きさや種類などは特に限定されない。例えば、無人機1として、主翼幅約3m、約90ccのガソリンエンジンを動力として装備した固定翼の小型無人機が採用できる。
無人機1は、人間が搭乗することなく自律飛行が可能な任意の飛行体である。無人機1には、固定翼機、回転翼機、飛行船、気球などが含まれる。また、以下で説明する機能を提供する装置を搭載可能であれば、その大きさや種類などは特に限定されない。例えば、無人機1として、主翼幅約3m、約90ccのガソリンエンジンを動力として装備した固定翼の小型無人機が採用できる。
無人機1は、図2に示すように、衛星通信用アンテナ101、衛星通信装置102、データ送信部103、データ受信部104、カメラ105、カメラ制御部106、機体制御部107、計測器108、GPS用アンテナ109、GPS装置110などを有する。
衛星通信装置102は、衛星通信用アンテナ101を介して通信衛星2との間で通信を行う装置である。衛星通信装置102は、データ送信部103から送信データを受け取り、符号化処理や変調処理などを施して無線信号として通信衛星2に対して送信する。また、衛星通信装置102は、通信衛星2から無線信号を受信し、復調処理や復号処理などを施して受信データとしてデータ受信部104へ出力する。なお、通信衛星2は中継局であり、無人機1は通信衛星2を介して地上局3との間で無線通信を行う。
データ送信部103は、カメラ105が取得した空撮画像データや、GPS装置110が取得した位置情報や時刻情報、計測器108が取得した各種データなどを、地上局3に対して送信する機能部である。データ送信部103は、衛星通信装置102に送信データを出力して衛星通信を介して地上局3に対してデータを送信する。
データ受信部104は、地上局3から送信されるデータを受信する機能部である。データ受信部104は、地上局3から衛星通信を介して送信されるデータを、衛星通信装置102から取得する。地上局3から送信されるデータには、無人機1の制御を行う飛行制御コマンド、カメラ105の制御を行うカメラ制御コマンドなどが含まれる。
カメラ105は、無人機1から地表等を撮影(空撮)する撮像装置である。カメラ105は、可視光線を撮影する可視光カメラであってもよいし、赤外線を撮影する赤外線カメラであってもよい。また、カメラ105は、静止画像を撮影してもよいし、動画像を撮影してもよい。静止画像を撮影する場合は、定期的あるいは非定期的に繰り返し撮影を行ってもよいし、特定の条件が満たされた場合のみ撮影を行ってもよい。カメラ105は、その撮影方向、撮影倍率、画像品質などを変更可能である。カメラ105によって取得された画像データは、データ送信部103から地上局3に対して送信される。カメラ105によって取得された画像データは、無人機1内の記憶装置(不図示)に格納することも好ましい。また、地上局3への送信や記憶装置への格納の前に、画像データに対して圧縮処理などを施すことも好ましい。
カメラ制御部106は、あらかじめ入力された飛行計画(飛行プログラム)や、地上局3から送信されるカメラ制御コマンドにしたがって、カメラ105による撮影の実行を制御したり、撮影時の撮影方向、撮影倍率、画像品質などの設定を変更したりする。飛行計画は、無人機1の飛行経路やどの位置でどのような空撮画像を取得するかなどを定義した設定データであり、記憶装置(不図示)にあらかじめ格納される。カメラ制御部106は記憶装置から飛行計画を取得して、カメラ105を制御する。また、地上局3から送信されたカメラ制御コマンドをデータ受信部104から受け取った場合にも、カメラ制御コマンドにしたがってカメラ105を制御する。
機体制御部107は、予め入力された飛行計画や、地上局から送信される飛行制御コマンドにしたがって、無人機1の推進システムや操舵システム(いずれも不図示)を制御する。例えば、機体制御部107は、飛行計画に規定される飛行経路や、GPS装置110によって取得される位置情報、計測器108から取得される各種の機体情報などに基づいて、指定された高度・座標を飛行できるように推進システムや操舵システムを制御する。
計測器108は、無人機1の状態を取得する装置である。無人機1は複数種類の計測器108を有している。計測器108には、例えば、エンジン回転数、姿勢センサ、高度計(気圧高度計や電波高度計)、加速度センサ、対気速度計、方位計(磁気コンパスやジャイロコンパス)などが含まれる。
GPS装置110は、グローバル・ポジショニング・システム(Global Positioning System)を用いて、位置情報および時刻情報を取得する装置である。GPS装置110は
、GPS用アンテナ109を介してGPS衛星から送信される電波に基づいて位置情報(緯度・経度・高度)および時刻情報を取得する。したがって、GPS装置110は、位置情報取得部および時刻情報取得部を兼ねる。なお、位置情報が取得可能であれば、GPS以外の衛星測位システム(例えば、ガリレオや北斗など)を利用しても構わない。また、位置情報と時刻情報は異なる装置によって取得しても構わない。例えば、電波時計を用いて時刻情報を取得するようにしても構わない。
、GPS用アンテナ109を介してGPS衛星から送信される電波に基づいて位置情報(緯度・経度・高度)および時刻情報を取得する。したがって、GPS装置110は、位置情報取得部および時刻情報取得部を兼ねる。なお、位置情報が取得可能であれば、GPS以外の衛星測位システム(例えば、ガリレオや北斗など)を利用しても構わない。また、位置情報と時刻情報は異なる装置によって取得しても構わない。例えば、電波時計を用いて時刻情報を取得するようにしても構わない。
無人機1は、ここで説明したもの以外の機能部を有していても構わない。例えば、無人機1は地上局3との間で直接無線通信を行う無線通信装置を有していてもよい。この無線通信装置では見通し内距離でしか無線通信を行うことができないが、見通し内距離にある場合には衛星通信よりも少ない遅延での通信が実現できる。
無人機1の機能部の一部または全部は、マイクロプロセッサと記憶装置を含み記憶装置に格納されたコンピュータプログラムを実行するコンピュータ(情報処理装置)によって実現されてもよい。また、無人機1の機能部の一部または全部は、専用のハードウェア回路などによって実現されてもよいし、専用のハードウェア回路とコンピュータの組合せに
よって実現されてもよい。
よって実現されてもよい。
[通信衛星2]
通信衛星2は、無線通信を中継するために宇宙空間を飛翔する通信装置である。通信衛星2は、無人機1と地上局3との間の通信を中継可能であれば、任意の通信衛星を採用することができる。通信衛星2は、典型的には静止軌道を公転する静止衛星を用いることができるが、準天頂衛星や非静止衛星などを用いてもよい。
通信衛星2は、無線通信を中継するために宇宙空間を飛翔する通信装置である。通信衛星2は、無人機1と地上局3との間の通信を中継可能であれば、任意の通信衛星を採用することができる。通信衛星2は、典型的には静止軌道を公転する静止衛星を用いることができるが、準天頂衛星や非静止衛星などを用いてもよい。
[地上局]
地上局3は、地上に設置され、通信衛星2と無線通信を行う衛星通信装置や無人機1から得られる空撮画像データをエンドユーザ設備4に配信する配信装置などを有する設備である。地上局3は、地表面に設置されるのが典型であるが、地表面から離れた位置に設置されもよいし、海上に設置されてもよい。また、地上局3は地理的に固定された固定設備であってもよいし、車両や船舶などに搭載された移動設備であってもよい。
地上局3は、地上に設置され、通信衛星2と無線通信を行う衛星通信装置や無人機1から得られる空撮画像データをエンドユーザ設備4に配信する配信装置などを有する設備である。地上局3は、地表面に設置されるのが典型であるが、地表面から離れた位置に設置されもよいし、海上に設置されてもよい。また、地上局3は地理的に固定された固定設備であってもよいし、車両や船舶などに搭載された移動設備であってもよい。
地上局3は、図2に示すように、衛星通信用アンテナ301、衛星通信装置302、データ送信部303、データ受信部304、UAV機体操作部305、UAVカメラ操作部306、GPS用アンテナ307、GPS装置308、データ補正部309、地理情報記憶部310、配信映像生成部311、映像配信部312、表示装置313などを有する。
衛星通信装置302は、衛星通信用アンテナ301を介して通信衛星2との間で通信を行う装置である。衛星通信装置302は、データ送信部303から送信データを受け取り、符号化処理や変調処理などを施して無線信号として通信衛星2に対して送信する。また、衛星通信装置302は、通信衛星2から無線信号を受信し、復調処理や復号処理などを施して受信データとしてデータ受信部304へ出力する。なお、通信衛星2は中継局であり、地上局3は通信衛星2を介して無人機1との間で無線通信を行う。
データ送信部303は、飛行制御コマンドやカメラ制御コマンドなどを、無人機1に対して送信する機能部である。データ送信部303は、UAV機体操作部305やUAVカメラ操作部306から無人機1に対する制御指示を受け取り、衛星通信装置302に送信データを出力して衛星通信を介して無人機1に対してデータを送信する。
データ受信部304は、無人機1から送信されるデータを受信する機能部である。データ受信部304は、無人機1から衛星通信を介して送信されるデータを、衛星通信装置302から取得する。無人機1から送信されるデータには、無人機1のカメラ105が撮影した空撮画像データ、無人機1の位置情報、時刻情報、状態情報などが含まれる。
UAV機体操作部305は、無人機1に対する飛行制御コマンドを発行する機能部である。地上局3のオペレータはUAV機体操作部305を用いて、無人機1に対して、例えば、飛行経路の変更や緊急回避、着陸復行などを指示することができる。また、UAV機体操作部305から、無人機1の推進システムや操舵システムに対する指示を発行可能として、オペレータが無人機1を遠隔操縦できるようにしてもよい。UAV機体操作部305によって発行された制御コマンドは、データ送信部303に出力され、衛星通信により無人機1へ送信される。
UAVカメラ操作部306は、無人機1のカメラ105に対するカメラ制御コマンドを発行する機能部である。地上局3のオペレータはUAVカメラ操作部306を用いて、無人機1に対して、例えば、カメラのパン・チルト・ズームイン・ズームアウトや、画像品質の変更などを指示することができる。UAVカメラ操作部306によって発行された制御コマンドは、データ送信部303に出力され、衛星通信により無人機1へ送信される。
GPS装置308はGPS用アンテナ307からGPS衛星信号を受信して、位置情報および時刻情報を取得する。
データ補正部309は、無人機1から受信した位置情報の補正を行う機能部である。無人機1が取得する位置情報には誤差が含まれる場合がある。GPS衛星信号から位置情報を取得する場合には、GPSシステムに起因する誤差(GPS衛星から送信される軌道情報の誤差や、GPS衛星の時刻同期誤差)や、大気圏伝播に起因する誤差(電離圏遅延や対流圏遅延)や、受信機に起因する誤差が生じる。システムに起因する誤差と大気圏伝播に起因する誤差は、無人機1と地上局3の位置情報に共通して含まれる。地上局3の位置はあらかじめ分かるので、GPS装置308から得られる位置情報と、地上局3の実際の位置から上記の誤差を把握できる。この誤差を無人機1から送信される位置情報から除去することで、無人機1のより正確な位置を取得できる。なお、高度計を用いて高度を取得する場合にも、地上局3において高度計から取得される高度および地上局3の実際の高度用いて、無人機1の高度を補正できる。
データ補正部309は、上記とは異なる方法により無人機1から受信した位置情報を補正することもできる。すなわち、地上のチェックポイントとなる基準地物をあらかじめ地理情報として地理情報記憶部310に記憶しておき、無人機1から送信される空撮画像データに写るチェックポイントに基づいて、無人機1の位置情報を補正することもできる。ここで、チェックポイントとは、画像による識別が可能な地物であれば任意の物体であってよく、例えば、道路、建設物、鉄塔、山、河などが含まれる。無人機1の位置、移動方向(撮影方向)が分かると、空撮画像に含まれるチェックポイントや、当該チェックポイントの空撮画像内での位置も推定できる。逆に、推定された位置にチェックポイントがなければ、その位置のずれから無人機1の位置を算出することができる。したがって、データ補正部309は、無人機1から受信する空撮画像データと地理情報記憶部310に格納されている地理情報から、無人機1の位置情報を補正できる。
データ補正部309は、上記2つの位置補正方法のいずれを採用してもよいし、両方を採用してもよい。両方を採用する場合には、両方の方法によって得られる位置情報の平均を補正後の無人機1の位置情報とすることができる。また、データ補正部309が補正した無人機1の位置情報は、衛星通信を介して無人機1へ送信することも好ましい。
地理情報記憶部310には、種々の地理情報(地理空間情報、空間情報などとも呼ばれる)が格納される。地理情報には、地図情報や、地図情報と関連して記憶される地物についての情報が含まれる。また、地理情報には、空撮映像からチェックポイントとなる地物を特定するために当該地物の映像を記憶しておくことも好ましい。
配信映像生成部311は、無人機1から送信される空撮画像等に基づいて、エンドユーザ設備4に対して配信する映像データを生成する機能部である。配信映像データには、少なくとも無人機1から送信される空撮画像が含まれ、その他に空撮画像に付随する情報や、無人機1の状態に関する情報などが含まれる。例えば、配信映像生成部311は、空撮画像が撮影された時刻に関する情報を含む映像を生成する。無人機1からは空撮画像が撮影された時刻が送信されるので、配信映像生成部311は、空撮画像が撮影された時刻と、撮影時刻が現時刻(配信映像データ生成時刻)からどれだけ前であるかという撮影時刻と現時刻の間の時刻差に関する情報を含めた映像データを生成する。また、配信映像生成部311は、無人機1の位置情報や姿勢情報などと地理情報(地図情報)に基づいて、無人機1の位置や飛行方向を地図画像上で表す映像も生成する。また、配信画像には、無人機1と地上局3の直線距離や高度差を含めたり、無人機1が地上局3まで帰還可能であるかどうかや航続可能距離などの情報を含めたりすることも好ましい。この地図画像上では
、カメラ105の撮影方向や撮影倍率などの情報に基づいて、空撮画像の撮影範囲を表すことも好ましい。配信画像の例については後述する。
、カメラ105の撮影方向や撮影倍率などの情報に基づいて、空撮画像の撮影範囲を表すことも好ましい。配信画像の例については後述する。
映像配信部312は、配信映像生成部311によって生成された映像データをエンドユーザ設備4に対して配信する機能部である。映像配信部312による映像データの配信方法は任意であって構わず、例えば、インターネットなどのWANを介したデータ通信網を用いて配信することができる。あるいは、映像配信部312は、放送によって映像を配信することもできる。映像配信の際に、ユーザの認証処理や課金処理などを施すようにしてもよい。
表示装置313は、配信映像生成部311が生成した映像データを受け取って表示するディスプレイ装置である。表示装置313によって、無人機1の状態情報や空撮画像を確認することができるので、無人機1の機体操作やカメラ操作の際に参考にできる。
なお、ここでは上記の情報を全て映像として配信する例を説明したが、空撮画像や地図画像などの画像以外のデータは配信映像には含めず別データとしてエンドユーザ設備4に送信するようにしてもよい。この場合は、エンドユーザ設備4において、それぞれのデータを取得してまとめて表示することが好ましい。
地上局3の機能部の一部または全部は、マイクロプロセッサと記憶装置を含み記憶装置に格納されたコンピュータプログラムを実行するコンピュータ(情報処理装置)によって実現されてもよい。また、地上局3の機能部の一部または全部は、専用のハードウェア回路などによって実現されてもよいし、専用のハードウェア回路とコンピュータの組合せによって実現されてもよい。
[エンドユーザ設備4]
エンドユーザ設備4は、地上局3から配信される映像を取得し表示するための装置を含む。映像がデータ通信により送信される形態では、エンドユーザ設備4は、マイクロプロセッサ、記憶装置、表示装置、通信インタフェースなどを備えるコンピュータ(情報処理装置)として構成できる。また、映像が放送により送信される形態では、エンドユーザ設備4は、放送電波を受信し表示する映像表示装置として構成できる。
エンドユーザ設備4は、地上局3から配信される映像を取得し表示するための装置を含む。映像がデータ通信により送信される形態では、エンドユーザ設備4は、マイクロプロセッサ、記憶装置、表示装置、通信インタフェースなどを備えるコンピュータ(情報処理装置)として構成できる。また、映像が放送により送信される形態では、エンドユーザ設備4は、放送電波を受信し表示する映像表示装置として構成できる。
<処理>
次に、本実施形態にかかる空撮映像配信システムにおける空撮映像配信処理の流れを、図3のフローチャートを参照しつつ説明する。
次に、本実施形態にかかる空撮映像配信システムにおける空撮映像配信処理の流れを、図3のフローチャートを参照しつつ説明する。
まず、無人機1の飛行開始の前に、地上局3において無人機1の飛行計画を作成して無人機1に格納する(S1およびS2)。飛行計画(飛行プログラム)は、無人機1による飛行経路を指定するものである。本実施形態では、飛行計画は、無人機1が通過すべき地点(ウェイポイント)を3次元(緯度・経度・高度)座標で指定したものである。飛行計画には、空撮映像の撮影地点や撮影方向などが含まれてもよい。例えば、飛行計画は、空撮の開始位置と終了位置とを含む。ただし、飛行中は常に空撮を行うように設定してもよい。
飛行計画が格納されると、無人機1は、飛行計画に従って自動飛行(自律飛行)する(S3)。ここでは、空撮の実行は指定された箇所(一点であってもよいし経路であってもよい)でのみ行うものとして説明する。空撮開始地点に到達するまでは、カメラ105による撮影や空撮画像の送信などは行わない。ただし、カメラ105による撮影を行って撮影データを記録するが、地上局3への送信は行わないという運用を行ってもよい。また、空撮を実行していない間も、位置情報や計測器108などから得られる無人機1の状態に
関する情報などは、衛星通信を介して地上局3へ送信する。
関する情報などは、衛星通信を介して地上局3へ送信する。
無人機1は、GPS装置から取得される位置情報に基づいて自機の位置を把握しており、空撮開始地点に到達しているかどうかを確認しつつ飛行を行う。無人機1が、空撮開始地点に到達したと判断すると(S4)、カメラ105による空撮を開始し、空撮画像データ、位置情報、時刻情報などを、衛星通信を介して地上局3へ送信する(S5)。これらのデータは、無人機1の衛星通信装置102から通信衛星2へ送信され、通信衛星2によって中継されて地上局3の衛星通信装置302が受信する(S6)。地上局3は、空撮画像データ、位置情報、時刻情報などを受信すると、まず無人機1の位置情報の補正を行う(S7)。補正処理では、地上局3のGPS位置情報と地上局3の実際の位置情報の間の差分に基づいた補正と、空撮画像に含まれる基準地物(チェックポイント)と地理情報との比較に基づいた補正の両方を行い、その平均を用いて無人機1の位置情報を補正する。次に、地上局3は、空撮画像、位置情報、および時刻情報を含む配信映像を生成する(S8)。生成される配信映像には、空撮画像の他、無人機1の位置や進行方向や空撮映像の撮影方向などを表した地図画像、空撮画像の取得時刻(絶対時刻と配信映像生成時刻との差)や、無人機1と地上局3との間の直線距離や高度差、無人機1が帰還可能か否かなどを表す情報が含まれる。生成された映像は、地上局3からエンドユーザ設備4に対してネットワーク経由で送信され(S9)、エンドユーザは地上局3から離れた任意の拠点において無人機1の空撮画像等を確認できる。
なお、無人機1が空撮を行うように指定されている期間内は、空撮画像の撮影や地上局への送信、地上局における映像の生成および配信が継続的に実行される。また、地上局3における無人機1の位置情報の補正処理は、継続的に実行されてもよいし、無人機1がチェックポイントを通過するタイミングで実行されてもよい。
また、図3のフローチャートには記載していないが、地上局3から無人機1に対して飛行制御コマンドやカメラ制御コマンドを発行して、無人機1やカメラ105を制御もできる。
<配信映像の例>
図4を参照して、地上局3が生成する配信映像の例について説明する。配信映像には、地図画像40、空撮画像50、参照情報欄60が含まれる。
図4を参照して、地上局3が生成する配信映像の例について説明する。配信映像には、地図画像40、空撮画像50、参照情報欄60が含まれる。
地図画像40には、無人機1の位置41と地上局3の位置42が重畳されて表示される。また、無人機1の飛行方向(進行方向)43と空撮の撮影範囲44も、地図画像に重畳して表示される。空撮画像50は、無人機1から送信される空撮画像を表示する。空撮画像50には、この画像が撮影された時刻と現在時刻(配信映像生成時刻)との差を表す時刻情報51が重畳される。また、参照情報欄60には、無人機1や空撮画像等に関する種々の情報が表示される。例えば、参照情報欄60には、無人機1の位置情報(緯度・経度・高度)や、無人機1と地上局3の間の直線距離(3次元的距離)や水平距離や高度差や、無人機1が地上局3へ帰還可能であるか否かや航続可能距離の情報、無人機1の飛行経路、無人機1の搭載機材に関する情報などが含まれる。
なお、図4に示した配信映像は一例に過ぎず、これらの情報を具体的にどのような映像として生成するかは任意であって構わない。例えば、時刻情報51を配信画像に重畳せずに、参照情報欄60に表示してもよいし、無人機1の位置座標を地図画像40に重畳して表示してもよい。また、地図画像や空撮画像を一つの映像として配信せず、それぞれ異なる映像として配信してもよいし、エンドユーザ設備4からの要求に応じて地図画像と空撮画像を選択して配信するようにしてもよい。
<本実施形態の効果>
本実施形態にかかる空撮映像配信システムによれば、無人機1から衛星通信を介してリアルタイムに空撮画像を地上局3において受信して、エンドユーザ設備4に即座に配信できる。ここで、無人機1と地上局3との間の通信に衛星通信を用いているので、無人機1の運用範囲を広くすることができ、通信に関する限りは運用範囲の制限が無くなる。従来であれば、無人機1と地上局3とが直接通信を行う場合にはその通信範囲内でしか運用ができず、アドホックネットワークを形成して中継を行う場合には中継用の無人機等が必要になるなどの問題があった。しかしながら、本実施形態であれば、無人機1に衛星通信装置を搭載するだけで、空撮画像を取得可能な範囲を拡大できる。
本実施形態にかかる空撮映像配信システムによれば、無人機1から衛星通信を介してリアルタイムに空撮画像を地上局3において受信して、エンドユーザ設備4に即座に配信できる。ここで、無人機1と地上局3との間の通信に衛星通信を用いているので、無人機1の運用範囲を広くすることができ、通信に関する限りは運用範囲の制限が無くなる。従来であれば、無人機1と地上局3とが直接通信を行う場合にはその通信範囲内でしか運用ができず、アドホックネットワークを形成して中継を行う場合には中継用の無人機等が必要になるなどの問題があった。しかしながら、本実施形態であれば、無人機1に衛星通信装置を搭載するだけで、空撮画像を取得可能な範囲を拡大できる。
また、無人機1を自動飛行させた場合、地上局3では飛行中の位置が不明となることがあったが、衛星通信を介して無人機1から位置情報を取得することで、地上局3において無人機1の位置を把握することが可能となる。また、無人機1の位置情報に対して補正処理を施すことで、無人機1の位置情報を精度良く把握することができる。
また、衛星通信を介して無人機1から地上局3に対して空撮画像やその他の情報を送信した場合、通信遅延によるタイムラグが生じることがある。地上局3では、無人機1から送信される時刻情報に基づいて、受信情報がいつの時点の情報であるかを把握できるので、無人機1から送信される情報を有効活用である。なお、地上局3とエンドユーザ設備4の間の配信における遅延は無視できる。
また、地上局3において無人機1の位置情報や機体情報や空撮画像をリアルタイムに取得でき、かつ、地上局3から無人機1の制御が可能であるので、オペレータは上記の情報に基づいて無人機1に対して適切な制御を行うことも可能である。この際、上述のように無人機1から送信される情報がいつの時点の情報であるかを把握可能に表示することで、オペレータは表示されている無人機1の位置情報や空撮画像に基づいてより適切な判断が下せるようになる。
また、地上局3からエンドユーザ設備4に対して映像を配信することで、無人機1が取得する空撮画像を、任意の地点で見ることができる。
(第2の実施形態)
第1の実施形態では無人機1から空撮画像を送信しているが、本実施形態では無人機1から空撮画像に加えてセンサによる計測データもあわせて送信する。以下の説明では、本実施形態の構成や処理のうち、第1の実施形態と同様の部分については説明を省略し、第1の実施形態と異なる部分について主に説明する。
第1の実施形態では無人機1から空撮画像を送信しているが、本実施形態では無人機1から空撮画像に加えてセンサによる計測データもあわせて送信する。以下の説明では、本実施形態の構成や処理のうち、第1の実施形態と同様の部分については説明を省略し、第1の実施形態と異なる部分について主に説明する。
図5は、本実施形態にかかる無人機1および地上局3の機能構成を示す図である。本実施形態では、無人機1にセンサ111が設けられている点が第1の実施形態と異なる点である。センサ111は、無人機1の外部の環境に関する情報を取得するものである。センサ111は、対象物の物理的・化学的な性質を信号やデータに変換して出力する装置であれば任意の装置であってよい。例えば、センサ111として、赤外線センサ、赤外線サーモグラフィ、マイクロ波レーダ、ミリ波レーダ、超音波レーダ、集音装置、放射線センサ、ガスセンサ、有毒ガス検知器、大気測定装置、磁気センサ、イオンセンサ、気圧センサ、温度・湿度センサ、人命探査装置などが含まれる。センサ111によって取得された計測データは、無人機1内の記憶装置(不図示)に測定時の位置情報や時刻情報などと関連付けて記憶されるとともに、衛星通信装置302を介して地上局3へ送信可能である。
本実施形態では、空撮画像とともにセンサ111による計測データを無人機1から地上局3に送信して、地上局3での表示やエンドユーザ設備4への配信などを可能とする。こ
こで、センサ111による計測を行う期間を、空撮画像を行う期間と一致させることができる。例えば、飛行中常に空撮画像および計測データ(およびその他の情報)を取得して地上局3へ送信するようにしてもよいし、空撮画像および計測データを取得する箇所をあらかじめ設定しておきその箇所で空撮画像および計測データの取得および送信を行うようにしてもよい。あるいは、センサ111による計測を飛行中常に行って、計測データが所定の条件を満たした場合に自動的に空撮画像の撮影および地上局への送信を行うようにしてもよい。所定の条件とは、例えば、放射線量や有毒ガスなどの検出量が所定値を超えた場合や、人命探査装置によって人物が検出された場合などが想定されるが、これらに限定されず任意の条件を採用することができる。
こで、センサ111による計測を行う期間を、空撮画像を行う期間と一致させることができる。例えば、飛行中常に空撮画像および計測データ(およびその他の情報)を取得して地上局3へ送信するようにしてもよいし、空撮画像および計測データを取得する箇所をあらかじめ設定しておきその箇所で空撮画像および計測データの取得および送信を行うようにしてもよい。あるいは、センサ111による計測を飛行中常に行って、計測データが所定の条件を満たした場合に自動的に空撮画像の撮影および地上局への送信を行うようにしてもよい。所定の条件とは、例えば、放射線量や有毒ガスなどの検出量が所定値を超えた場合や、人命探査装置によって人物が検出された場合などが想定されるが、これらに限定されず任意の条件を採用することができる。
図6は、本実施形態にかかる空撮映像配信システムにおける処理の流れを示す図である。まず、無人機1の飛行開始前に、地上局3において無人機1の飛行計画を作成して無人機1に格納する(S11およびS12)。飛行計画は、無人機1による飛行経路を指定するものである。本実施形態では、さらに、空撮映像の撮影および送信を開始するための条件も,飛行計画に含められる。空撮映像の撮影および送信の開始条件として、上述のようにセンサ111による計測データが所定の条件を満たした場合とすることができる。
飛行計画が格納されると、無人機1は、飛行計画に従って自動飛行する(S13)。自動飛行中、無人機1はセンサ111による計測を行う。センサ111による計測データは、無人機1の位置情報やその他の情報と共に、無人機1内の記憶装置に格納されてもよいし、衛星通信を介して地上局3に送られてもよい。センサ111による計測データが取得されると、無人機1は、この計測データが空撮開始の条件を満たすか否かを判定する(S15)。
計測データが空撮開始の条件を満たした場合は、無人機1は空撮を開始して、空撮画像データを衛星通信を介して地上局3へ送信する(S16)。空撮を開始した後の処理S16〜S21は、センサ111の計測データがともに送信される点と配信映像に計測データが含まれる点をのぞけば第1の実施形態と同様であるため、詳しい説明は省略する。
図7は、本実施形態において地上局3が生成する配信映像の例である。ここでは、第1の実施形態とは異なり、図7(A)および図7(B)に示す2種類の映像を切り替えて配信する例を説明するが、これらの情報を1つの映像として生成しても構わない。
図7(A)に示す配信映像には、無人機1の位置を含む地図画像40、センサの計測データ表示欄70、および参照情報欄60が含まれる。地図画像40および参照情報欄60に表示される情報は第1の実施形態と同様である。計測データ表示欄70には、無人機1のセンサによって計測された計測データが表示される。なお、この例ではセンサの計測データを文字情報のみで表示しているが、地図情報と重畳させてグラフィカルに表示するようにしてもよい。
図7(B)に示す配信映像には、無人機1の位置を含む地図画像40、無人機1が撮影した空撮画像50、および参照情報欄60が含まれる。これらの情報は第1の実施形態と同様である。なお、図7(A)と図7(B)の表示は、地上局3あるいはエンドユーザ設備4からの指示により切り替え可能とすることができる。また、無人機1がセンサによる計測のみを行い空撮を行っていない期間は図7(A)の映像のみを生成し、空撮が開始されたら図7(B)の映像に自動的に切り替え、その後はユーザが任意に表示を切り替えられるようにしてもよい。
本実施形態によれば、無人機1によって広範囲にわたってセンサによる計測データのリアルタイム伝送が可能となる。無人機による情報収集なので、有人では飛行が難しい事故
現場や災害現場などでも情報収集が可能となる。
現場や災害現場などでも情報収集が可能となる。
本実施形態を用いて、例えば、事故現場や災害現場における生存者探索システムとして構成することができる。無人機として回転翼機(ヘリコプター)を採用して、空撮用カメラ以外に、人命探査装置を搭載する。人命探査装置は電磁波式・音響式・熱センサ式など種々のものがあるが、これらのセンサによって、夜間でも探査でき、また建物内にいる生存者も探査できる。無人機は、人命探査装置による人物の検出をトリガとして、空撮を開始する。すなわち、無人機によって生存者が発見されたら、空撮画像が計測データや位置情報などと共に地上局へ送信される。これに伴い、地上局では生存者発見の可能性を知ることができる。なお、空撮画像は昼間であれば可視画像、夜間であれば赤外画像とすることが好ましい。地上局は空撮画像等を含む映像を生成して、救援センタに配信する。救援センタでは、空撮画像を確認して人命探査装置による生存者の発見が誤検出でないかを確認する。この際、必要に応じて無人機やそのカメラを制御して、現場についての情報をより詳細に取得することもできる。このようにして、人命探査装置による生存者発見が誤検出でないことを確認してから、救援車両や有人機などを現場へ派遣することができる。このようなシステムであれば、危険な現場や夜間などであっても生存者探査が安全に実施でき、人命探査装置による検出が誤りでないことを確認してから救援車両等を現場で派遣できる。なお、ここでは事故現場等における生存者探査システムを例に説明したが、同様の構成により、上空からの逃走者探査などを行うこともできる。もっとも、人物探査システムは本実施形態が適用可能な一具体例に過ぎず、任意のシステムに本実施形態は適用可能である。
(その他の変形例)
上述した実施形態の構成は本発明の一具体例を示したものにすぎず、本発明の範囲を限定する趣旨のものではない。本発明はその技術思想を逸脱しない範囲において、種々の具体的構成を採り得るものである。
上述した実施形態の構成は本発明の一具体例を示したものにすぎず、本発明の範囲を限定する趣旨のものではない。本発明はその技術思想を逸脱しない範囲において、種々の具体的構成を採り得るものである。
例えば上記実施形態では、地上局において生成した映像をエンドユーザ設備に配信しているが、エンドユーザ設備に配信することなく地上局において表示するだけであっても構わない。
また、無人機の制御は地上局からのみ行うようにし、エンドユーザ設備からは無人機の制御は行わないようにしているが、エンドユーザ設備から無人機を制御可能としてもよい。また、地上局として固定設備の代わりに、上述した機能を搭載した車両を採用することも好ましい。
また、位置情報の補正を地上局において行っているが、位置情報の補正を無人機内で行ってもよい。すなわち、地上局がGPS装置を用いて測定した位置情報を無人機に送信して、無人機が、地上局のGPS位置情報と地上局の実際の位置情報に基づいて、無人機によって取得したGPS位置情報を補正してもよい。また、無人機が空撮画像とチェックポイントの画像とに基づいて、自機の位置情報を補正してもよい。
1:無人航空機(無人機、UAV) 2:通信衛星 3:地上局 4:エンドユーザ設備101:衛星通信用アンテナ 102:衛星通信装置 103:データ送信部
104:データ受信部 105:カメラ 106:カメラ制御部 107:機体制御部
108:計測器 109:GPS用アンテナ 110:GPS装置 111:センサ
301:衛星通信用アンテナ 302:衛星通信装置 303:データ送信部
304:データ受信部 305:UAV機体操作部 306:UAVカメラ操作部
307:GPS用アンテナ 308:GPS装置 309:データ補正部
310:地理情報記憶部 311:配信映像生成部 312:映像配信部
104:データ受信部 105:カメラ 106:カメラ制御部 107:機体制御部
108:計測器 109:GPS用アンテナ 110:GPS装置 111:センサ
301:衛星通信用アンテナ 302:衛星通信装置 303:データ送信部
304:データ受信部 305:UAV機体操作部 306:UAVカメラ操作部
307:GPS用アンテナ 308:GPS装置 309:データ補正部
310:地理情報記憶部 311:配信映像生成部 312:映像配信部
Claims (15)
- 無人航空機と地上局とから構成され、無人航空機から撮影された映像を配信する空撮映像配信システムであって、
前記無人航空機は、
衛星通信を介して前記地上局と通信を行う通信部と、
撮影を行って空撮画像データを取得するカメラと、
前記空撮画像データを、前記通信部により前記地上局へ送信する送信部と、
を有し、
前記地上局は、
衛星通信を介して前記無人航空機と通信を行う通信部と、
前記空撮画像データを、前記通信部により前記無人航空機から受信する受信部と、
前記空撮画像データを含む映像データを生成する映像生成部と、
を有する、
ことを特徴とする空撮映像配信システム。 - 前記無人航空機は、位置情報を取得する位置情報取得部を更に有し、
前記送信部は、前記空撮画像データとともに、当該空撮画像データを取得した際の位置情報を送信し、
前記映像生成部は、前記空撮画像データとともに前記位置情報を含む映像データを生成する、
請求項1に記載の空撮映像配信システム。 - 前記地上局は、地理情報を格納する地理情報記憶部を更に有し、
前記映像生成部は、地図画像上での前記無人航空機の位置を表す映像データを生成する、
請求項2に記載の空撮映像配信システム。 - 前記映像生成部は、前記無人航空機の位置を表す映像データに、前記地上局と前記無人航空機との間の直線距離または高度差の少なくともいずれかを表示する、
請求項2または3に記載の空撮映像配信システム。 - 前記地上局は、
位置情報を取得する位置情報取得部と、
前記地上局が前記位置情報取得部によって取得した位置情報と前記地上局の実際の位置情報とに基づいて、前記無人航空機の位置情報を補正する位置情報補正部と、
を更に有する、請求項2〜4のいずれか1項に記載の空撮映像配信システム。 - 前記地上局は、
基準地物の映像を含む地理情報を格納する地理情報記憶部と、
前記空撮画像データと基準地物との比較により、前記無人航空機の位置情報を補正する位置情報補正部と、
を更に有する、請求項2〜5のいずれか1項に記載の空撮映像配信システム。 - 前記無人航空機は、時刻情報を取得する時刻情報取得部を更に有し、
前記送信部は、前記空撮画像データとともに、当該空撮画像データを取得した際の時刻情報を送信し、
前記映像生成部は、前記空撮画像データとともに前記時刻情報を含む映像データを生成する、
請求項1〜6のいずれか1項に記載の空撮映像配信システム。 - 前記映像生成部は、前記空撮画像データが取得された時刻と、前記映像データ生成時のあいだの時間差を含む映像データを生成する、
ことを特徴とする、請求項7に記載の空撮映像配信システム。 - 前記無人航空機は、当該無人航空機外部の計測データを取得するセンサを更に有し、
前記送信部は、前記空撮画像データとともに前記計測データも前記地上局へ送信し、
前記地上局は、前記空撮画像データと前記計測データを含む映像データを生成する、
請求項1〜8のいずれか1項に記載の空撮映像配信システム。 - 前記無人航空機は、前記センサによる計測データが所定の基準を満たすか否か判断し、当該基準を満たす場合に、前記カメラによる撮影および、前記送信部による送信を開始する、
請求項9に記載の空撮映像配信システム。 - 前記地上局は、前記映像データを配信する映像配信部を更に有する、
請求項1〜10のいずれか1項に記載の空撮映像配信システム。 - 前記映像配信部は、データ通信網を経由して前記映像データを他の情報処理装置へ配信する、
請求項11に記載の空撮映像配信システム。 - 前記地上局は、前記無人航空機のカメラを制御するカメラ制御コマンドを前記通信部により前記無人航空機に対して送信するカメラ操作部を更に有し、
前記無人航空機は、
前記地上局から、前記カメラ制御コマンドを受信する受信部と、
前記カメラ制御コマンドにしたがって、前記カメラの撮影方向または撮影倍率の少なくともいずれかを制御するカメラ制御部と、
を更に有する、請求項1〜12のいずれか1項に記載の空撮映像配信システム。 - 前記地上局は、前記無人航空機を制御する飛行制御コマンドを前記通信部により前記無人航空機に対して送信する機体操作部を更に有し、
前記無人航空機は、
前記地上局から、前記飛行制御コマンドを受信する受信部と、
前記飛行制御コマンドにしたがって、前記無人航空機の飛行を制御する機体制御部と、
を更に有する、請求項1〜13のいずれか1項に記載の空撮映像配信システム。 - 無人航空機と地上局とから構成される空撮映像配信システムにおける空撮映像配信方法であって、
前記無人航空機が、カメラを用いて空撮画像データを取得する撮影ステップと、
前記無人航空機が、前記空撮画像データを、衛星通信を介して前記地上局へ送信する送信ステップと、
前記地上局が、前記空撮画像データを、衛星通信を介して受信する受信ステップと、
前記地上局が、前記空撮画像データを含む映像データを生成する映像生成ステップと、
を含む、空撮映像配信方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014064640A JP5767731B1 (ja) | 2014-03-26 | 2014-03-26 | 空撮映像配信システムおよび空撮映像配信方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014064640A JP5767731B1 (ja) | 2014-03-26 | 2014-03-26 | 空撮映像配信システムおよび空撮映像配信方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5767731B1 JP5767731B1 (ja) | 2015-08-19 |
JP2015188150A true JP2015188150A (ja) | 2015-10-29 |
Family
ID=53888064
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014064640A Expired - Fee Related JP5767731B1 (ja) | 2014-03-26 | 2014-03-26 | 空撮映像配信システムおよび空撮映像配信方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5767731B1 (ja) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6020872B1 (ja) * | 2016-06-24 | 2016-11-02 | 株式会社アドインテ | 分析システム及び分析方法 |
WO2018193776A1 (ja) * | 2017-04-20 | 2018-10-25 | ソフトバンク株式会社 | ドローンシェアリングサービス・プラットフォーム |
WO2019003396A1 (ja) * | 2017-06-29 | 2019-01-03 | 株式会社オプティム | 画像提供システム、方法及びプログラム |
JP2019023010A (ja) * | 2017-07-24 | 2019-02-14 | 株式会社システック | ドローン飛行体の制御システム |
JP2019075075A (ja) * | 2018-03-28 | 2019-05-16 | 株式会社自律制御システム研究所 | 無人航空機の飛行計画経路を設定するためのシステム及びプログラム |
JP2019123415A (ja) * | 2018-01-18 | 2019-07-25 | 株式会社プロドローン | 空中散布用無人航空機、外部装置、制御プログラムおよび空中散布方法 |
JP2019185082A (ja) * | 2018-04-02 | 2019-10-24 | 株式会社セベック | 監視通報システムおよび監視通報方法 |
CN110896461A (zh) * | 2019-10-24 | 2020-03-20 | 视联动力信息技术股份有限公司 | 一种无人机拍摄视频展示方法及装置、系统 |
KR20200056068A (ko) * | 2018-11-14 | 2020-05-22 | 이병섭 | Mvs 기반의 무인항공기를 갖춘 객체 추적 시스템 |
WO2020137242A1 (ja) * | 2018-12-28 | 2020-07-02 | 株式会社クボタ | 飛行体の支援装置、及び飛行体の支援システム |
JP2021093215A (ja) * | 2015-08-25 | 2021-06-17 | 日本電気株式会社 | 飛行体制御装置、飛行体制御方法、及びプログラム |
US11127286B2 (en) | 2016-08-26 | 2021-09-21 | Sony Corporation | Information processing device and method, and recording medium |
CN114326764A (zh) * | 2021-11-29 | 2022-04-12 | 上海岩易科技有限公司 | 基于Rtmp传输的智慧林业无人机定点直播方法及无人机系统 |
JP2022121326A (ja) * | 2021-02-08 | 2022-08-19 | 株式会社オプティム | プログラム、方法、情報処理装置及びシステム |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113628500A (zh) | 2014-09-30 | 2021-11-09 | 深圳市大疆创新科技有限公司 | 用于支持模拟移动的系统和方法 |
CN112097789B (zh) | 2014-10-27 | 2023-02-28 | 深圳市大疆创新科技有限公司 | 无人飞行器飞行显示 |
JP6845227B2 (ja) * | 2015-09-25 | 2021-03-17 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | ビデオ放送のためのシステム |
JP6738059B2 (ja) * | 2016-07-12 | 2020-08-12 | 株式会社自律制御システム研究所 | 表示装置、探索システム、表示方法、およびプログラム |
CN106971511A (zh) * | 2017-06-02 | 2017-07-21 | 中国科学院城市环境研究所 | 一种基于飞行器的大气污染物监测与预警系统及方法 |
JP6661187B1 (ja) * | 2019-07-11 | 2020-03-11 | 株式会社センシンロボティクス | 飛行体の管理サーバ及び管理システム |
CN110705011B (zh) * | 2019-08-21 | 2023-02-03 | 广东友元国土信息工程有限公司 | 一种低空遥感和地面传感的双重采样仿真系统 |
CN110989670B (zh) * | 2019-12-11 | 2023-03-31 | 国网陕西省电力公司电力科学研究院 | 一种用于输变电工程环水保监测的无人机系统及其航拍方法 |
JP6800505B1 (ja) * | 2020-07-02 | 2020-12-16 | 株式会社センシンロボティクス | 飛行体の管理サーバ及び管理システム |
JP7319244B2 (ja) | 2020-12-07 | 2023-08-01 | Hapsモバイル株式会社 | 制御装置、プログラム、システム、及び方法 |
CN113271444A (zh) * | 2021-06-26 | 2021-08-17 | 广西翼界科技有限公司 | 一种地面中继的无人机图传链路 |
CN113589328B (zh) * | 2021-08-09 | 2024-01-12 | 深圳市电咖测控科技有限公司 | 一种基于多gnss接收系统的高精度gnss定位装置 |
CN113867410B (zh) * | 2021-11-17 | 2023-11-03 | 武汉大势智慧科技有限公司 | 一种无人机航拍数据的采集模式识别方法和系统 |
CN114553297B (zh) * | 2022-01-26 | 2023-09-05 | 中国电子科技集团公司第十五研究所 | 一种针对无通信信号区域的无人机监控系统及方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002328021A (ja) * | 2001-04-27 | 2002-11-15 | Hayashi Katsuyoshi | ヘリコプター撮影による災害の被災量計測方法 |
JP2003110981A (ja) * | 2001-09-28 | 2003-04-11 | Hiroboo Kk | 空撮映像処理システム及び無線式の小型無人飛行体 |
JP2003127994A (ja) * | 2001-10-24 | 2003-05-08 | Kansai Electric Power Co Inc:The | 無人飛行物体の制御システム |
JP2004037119A (ja) * | 2002-06-28 | 2004-02-05 | Osaka Gas Co Ltd | 航空写真取得システム、航空写真取得方法 |
JP2005214645A (ja) * | 2004-01-27 | 2005-08-11 | Nakanihon Koku Kk | 移動経路管理システム |
JP2008304260A (ja) * | 2007-06-06 | 2008-12-18 | Mitsubishi Electric Corp | 画像処理装置 |
EP2495702A1 (en) * | 2009-10-27 | 2012-09-05 | Avialsa T-35, S.L. | Aerial system for transmitting video and images via satellite in real time |
JP2013189036A (ja) * | 2012-03-12 | 2013-09-26 | Kitakyushu Foundation For The Advancement Of Industry Science & Technology | 測定用飛行体 |
-
2014
- 2014-03-26 JP JP2014064640A patent/JP5767731B1/ja not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002328021A (ja) * | 2001-04-27 | 2002-11-15 | Hayashi Katsuyoshi | ヘリコプター撮影による災害の被災量計測方法 |
JP2003110981A (ja) * | 2001-09-28 | 2003-04-11 | Hiroboo Kk | 空撮映像処理システム及び無線式の小型無人飛行体 |
JP2003127994A (ja) * | 2001-10-24 | 2003-05-08 | Kansai Electric Power Co Inc:The | 無人飛行物体の制御システム |
JP2004037119A (ja) * | 2002-06-28 | 2004-02-05 | Osaka Gas Co Ltd | 航空写真取得システム、航空写真取得方法 |
JP2005214645A (ja) * | 2004-01-27 | 2005-08-11 | Nakanihon Koku Kk | 移動経路管理システム |
JP2008304260A (ja) * | 2007-06-06 | 2008-12-18 | Mitsubishi Electric Corp | 画像処理装置 |
EP2495702A1 (en) * | 2009-10-27 | 2012-09-05 | Avialsa T-35, S.L. | Aerial system for transmitting video and images via satellite in real time |
JP2013189036A (ja) * | 2012-03-12 | 2013-09-26 | Kitakyushu Foundation For The Advancement Of Industry Science & Technology | 測定用飛行体 |
Cited By (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021093215A (ja) * | 2015-08-25 | 2021-06-17 | 日本電気株式会社 | 飛行体制御装置、飛行体制御方法、及びプログラム |
JP6020872B1 (ja) * | 2016-06-24 | 2016-11-02 | 株式会社アドインテ | 分析システム及び分析方法 |
KR20180026380A (ko) | 2016-06-24 | 2018-03-12 | 가부시키 가이샤 애드인테 | 분석 시스템 및 분석 방법 |
US10341984B2 (en) | 2016-06-24 | 2019-07-02 | Adinte, Inc. | Analytic system and analytic method |
US12125377B2 (en) | 2016-08-26 | 2024-10-22 | Sony Group Corporation | System and method for controlling landing of mobile unit using human flow data |
US11127286B2 (en) | 2016-08-26 | 2021-09-21 | Sony Corporation | Information processing device and method, and recording medium |
JP2018177135A (ja) * | 2017-04-20 | 2018-11-15 | ソフトバンク株式会社 | ドローンシェアリングサービス・プラットフォーム |
WO2018193776A1 (ja) * | 2017-04-20 | 2018-10-25 | ソフトバンク株式会社 | ドローンシェアリングサービス・プラットフォーム |
WO2019003396A1 (ja) * | 2017-06-29 | 2019-01-03 | 株式会社オプティム | 画像提供システム、方法及びプログラム |
US11263464B2 (en) | 2017-06-29 | 2022-03-01 | Optim Corporation | Image providing system, method, and program |
JPWO2019003396A1 (ja) * | 2017-06-29 | 2020-05-07 | 株式会社オプティム | 画像提供システム、方法及びプログラム |
JP2019023010A (ja) * | 2017-07-24 | 2019-02-14 | 株式会社システック | ドローン飛行体の制御システム |
JP2019123415A (ja) * | 2018-01-18 | 2019-07-25 | 株式会社プロドローン | 空中散布用無人航空機、外部装置、制御プログラムおよび空中散布方法 |
JP2019075075A (ja) * | 2018-03-28 | 2019-05-16 | 株式会社自律制御システム研究所 | 無人航空機の飛行計画経路を設定するためのシステム及びプログラム |
JP2019185082A (ja) * | 2018-04-02 | 2019-10-24 | 株式会社セベック | 監視通報システムおよび監視通報方法 |
KR102177655B1 (ko) | 2018-11-14 | 2020-11-11 | 이병섭 | Mvs 기반의 무인항공기를 갖춘 객체 추적 시스템 |
KR20200056068A (ko) * | 2018-11-14 | 2020-05-22 | 이병섭 | Mvs 기반의 무인항공기를 갖춘 객체 추적 시스템 |
JP2020104814A (ja) * | 2018-12-28 | 2020-07-09 | 株式会社クボタ | 飛行体の支援装置、及び飛行体の支援システム |
WO2020137242A1 (ja) * | 2018-12-28 | 2020-07-02 | 株式会社クボタ | 飛行体の支援装置、及び飛行体の支援システム |
CN113163745A (zh) * | 2018-12-28 | 2021-07-23 | 株式会社久保田 | 飞行器的支持装置以及飞行器的支持系统 |
JP7163179B2 (ja) | 2018-12-28 | 2022-10-31 | 株式会社クボタ | 飛行体の支援装置、及び飛行体の支援システム |
CN110896461B (zh) * | 2019-10-24 | 2021-09-28 | 视联动力信息技术股份有限公司 | 一种无人机拍摄视频展示方法及装置、系统 |
CN110896461A (zh) * | 2019-10-24 | 2020-03-20 | 视联动力信息技术股份有限公司 | 一种无人机拍摄视频展示方法及装置、系统 |
JP2022121326A (ja) * | 2021-02-08 | 2022-08-19 | 株式会社オプティム | プログラム、方法、情報処理装置及びシステム |
CN114326764A (zh) * | 2021-11-29 | 2022-04-12 | 上海岩易科技有限公司 | 基于Rtmp传输的智慧林业无人机定点直播方法及无人机系统 |
Also Published As
Publication number | Publication date |
---|---|
JP5767731B1 (ja) | 2015-08-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5767731B1 (ja) | 空撮映像配信システムおよび空撮映像配信方法 | |
US20230324562A1 (en) | Stratospheric position, navigation, and timing system | |
US10051178B2 (en) | Imaging method and appartus | |
WO2010097921A1 (ja) | 移動体撮像システム及び移動体及び地上局装置及び移動体撮像方法 | |
KR101160454B1 (ko) | 무인항공기의 자세 제어를 이용한 3d 공간정보구축 방법 | |
KR100556103B1 (ko) | 자동촬영시스템을 이용한 항공촬영방법 | |
US9897417B2 (en) | Payload delivery | |
Mukherjee et al. | Unmanned aerial system for post disaster identification | |
US10203691B2 (en) | Imaging method and apparatus | |
JP2014091335A (ja) | 飛行体を利用した無線通信システムおよび無線通信方法 | |
KR20120036684A (ko) | 지피에스를 이용한 지능형 항공로봇 | |
JP7337444B2 (ja) | 測位方法および測位システム | |
JPH08285590A (ja) | 位置特定方法および装置 | |
GB2522327A (en) | Determining routes for aircraft | |
WO2015082594A1 (en) | Determining routes for aircraft | |
JP6694035B2 (ja) | 通信装置、通信方法及び通信プログラム | |
KR20170123801A (ko) | 무인비행체의 이착륙용 수평위치 정확도 유지방법 및 그 장치 | |
EP2881827A1 (en) | Imaging method and apparatus | |
JP6393157B2 (ja) | 宇宙機の探索回収システム | |
GB2522328A (en) | Payload delivery | |
JP2004037119A (ja) | 航空写真取得システム、航空写真取得方法 | |
JP2007106269A (ja) | 無人ヘリコプタ | |
JP7488614B2 (ja) | 地上局装置 | |
CN114928812B (zh) | 一种航空器应急搜寻装置、系统及方法 | |
GB2522970A (en) | Imaging method and apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150602 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150619 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5767731 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |