JP6596746B2 - ゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法 - Google Patents

Description

本発明はゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法に関するもので、より詳しくは、ゴルフ場でゴルフラウンドを行う使用者がゴルフボールをゴルフショットして、打撃されたボールが飛んで目標地点の近くに着地する一連の過程を効果的に映像で記録し編集して該当使用者にゴルフラウンドに対する記念となることができるコンテンツを提供するようにするシステムとそのシステムによって駆動されるプロセスに関するものである。

ゴルフ場でゴルフラウンドをする大多数のゴルファーはゴルフラウンド過程でゴルフショットしたボールが適切にグリーンに着地する、ボールがグリーン上のホールカップに非常に近くに着地する、又は時にはホールインワン又はアルバトロスのような驚くべき記録を経験することもある。

例えば、普段ゴルフラウンドをするとき、グリーン的中率が低くて適切なオングリーンをしたことがなかった使用者がＰａｒ３ホールでティーショットしたボールが適切にオングリーンした場合、その使用者にはそのゴルフショットが実に驚くべき経験となるであろう。

また、同伴ラウンドをする人々同士Ｐａｒ３ホールにおいてティーショットによるボールがグリーン上のホールカップにいくら近くに着地するかを競争する場合、すなわちニアピン（Ｎｅａｒ Ｐｉｎ）競争をする場合が多い。そのニアピン競争で勝者となる場合にも該当使用者には実に驚くべき経験となるであろう。

特に、Ｐａｒ３ホールでホールインワンを記録する場合には、該当使用者には一生忘れない驚くべき経験となるであろう。

しかし、前述したように、ゴルフラウンド過程でゴルファーは非常に驚くべき経験をすることになるが、従来にはゴルファーがそのような驚くべき経験を記録しておき、記念とすることができるコンテンツを作って提供することができるシステムなどに関する技術が具現されなかった問題点があった。

ところが、従来、日本国特開２０１３−２４８３８１号公報（ホールインワン確認システム及びそのカメラ）、日本国特開２００４−４６６４８号公報（ホールインワン認証システム）及び日本国特開２００８−１６７２４５号公報（ホールインワン・ニアピン認定システム）などの多数の先行技術文献に、グリーン側にカメラを設置しておき、ティーボックスでゴルフショットしたものがホールインワンされるかを前記カメラの撮影映像を分析して確認することによってホールインワンであるか又はニアピンであるかを判断する技術が公知となっている。

しかし、前述した公開公報などに開示された公知の技術は単に使用者がゴルフショットしたものがホールインワンとなったかなどに対して確認して該当使用者に知らせる又はグリーンの周辺でホールインワン又はニアピンに関連した撮影映像を提供するだけで、使用者のゴルフショットからグリーン上でのボールの動きなどの一連の過程を映像で記録して提供することができないので、該当使用者のゴルフショットとその記録に対する記念のためのコンテンツとしては非常に足りないという問題点があった。

日本国特開２０１３−２４８３８１号公報 日本国特開２００４−４６６４８号公報 日本国特開２００８−１６７２４５号公報

本発明は単純なホールインワン確認又はニアピンの認証などの外にゴルフラウンドをしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報を編集してゴルフ映像情報を自動で生成することによって使用者にゴルフショットに対する記念となることができる映像コンテンツを提供することができるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法を提供するためのものである。

本発明の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、目標地点を含む領域を撮影する第２撮影ユニットと、前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。

一方、本発明の他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、前記ゴルフショットする使用者の側面を撮影する第１撮影ユニットと、グリーンを含む領域を撮影する第２撮影ユニットと、前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。

一方、本発明のさらに他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。

一方、本発明のさらに他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、前記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、前記使用者がゴルフショットすることによる映像を撮影するように構成される第２撮影ユニットと、前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。

一方、本発明の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法は、少なくとも一つのカメラを含む第１撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、少なくとも一つのカメラを含む第２撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して前記格納部に格納する段階と、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、前記格納部に格納された各映像から前記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階とを含む。

一方、本発明の他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法は、ゴルフ場の特定ホールの一側に設置された第１撮影ユニットによって撮影される使用者のゴルフショットに対する映像を収集して格納部に格納する第１撮影ユニット映像収集及び格納段階と、前記特定ホールの他側に設置され、パンチルトズーム駆動の可能な第２撮影ユニットによってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って前記使用者がゴルフショットすることによって撮影される映像を収集して前記格納部に格納する第２撮影ユニット映像収集及び格納段階と、前記第１撮影ユニットから抽出された第１抽出映像及び第２撮影ユニットから抽出された第２抽出映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階とを含む。

本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法は、単純なホールインワン確認又はニアピンの認証などの外に、ゴルフラウンドをしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報を編集してゴルフ映像情報を自動で生成することによって使用者にゴルフショットに対する記念となることができる映像コンテンツを提供することができる効果がある。

本発明の一実施例によるゴルフ映像情報自動生成システムがゴルフ場の特定ホールに設置された例を示した図である。

図１に示した本発明が一実施例によるゴルフ映像情報自動生成システムの構成を示したブロック図である。

本発明の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。

本発明の一実施例によるゴルフ映像情報自動生成システムの第１カメラによって撮影された映像の一例を示すもので、該当映像で映像処理をする方法を説明するための図である。

第１カメラによって撮影されたｎ番目フレームからｎ＋５番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示した図である

第１カメラによって撮影されたｍ番目フレームからｍ＋５番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示した図である。

本発明の一実施例によるゴルフ映像情報自動生成システムの第３カメラによって撮影された映像の一例を示すもので、該当映像においてホールカップとボール間の距離の表示など、グリーン上の使用者に提供可能なゴルフ情報について表示された例を示した図である。

本発明の一実施例によるゴルフ映像情報自動生成システムの映像情報処理装置によってそれぞれのカメラ映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。

本発明の他の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。

図９に示したフローチャートによるゴルフ映像情報自動生成方法によってそれぞれの撮影ユニット映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。

図１０で説明した編集映像の一例を時系列的に示した図である。

図１０で説明した編集映像の一例を時系列的に示した図である。

図１０で説明した編集映像の一例を時系列的に示した図である。

本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法について図面に基づいてより具体的に説明する。

まず、図１及び図２を参照して本発明の一実施例によるゴルフ映像情報自動生成システムについて説明する。

図１及び図２に示したように、本発明の一実施例によるゴルフ映像情報自動生成システムは、ゴルフ場の一ホールの一側に設置される第１撮影ユニット１００、該当ホールの反対側に設置される第２撮影ユニット２００、及び前記第１撮影ユニット１００及び第２撮影ユニット２００と連結され、有線又は無線で通信して各撮影ユニットから撮影された映像を受けて映像分析を行う又はその受けた映像から適切な映像を抽出して編集することによって、使用者に提供するゴルフ映像情報を自動で生成する映像情報処理装置５００を含んでなることができる。

前記第１撮影ユニット１００及び第２撮影ユニット２００はそれぞれ一つのカメラのみを含むこともでき、二つ以上のカメラを含むこともできる。一つの撮影ユニット１００又は２００が二つ以上のカメラを含む場合には、各カメラが互いに異なる位置で同じ領域を撮影するように構成されることが好ましい。

本発明によるゴルフ映像情報自動生成システム及び方法は、使用者がゴルフショットするときから該当ゴルフショットによるボールが目標地点の近くに到逹して停止するときまでの一連の過程についての映像を全部含むように映像編集を自動で行うから、使用者が一度のゴルフショットでスタート地点から目標地点にボールを送る場合にその活用度が高いと言える。

ここで、前述した目標地点はグリーン上のホールカップとなることもでき、グリーンの周辺のフェアウェイ上の任意の地点となることもできる。

本発明によるゴルフ映像情報自動生成システムは、使用者がゴルフショットするときから該当ゴルフショットによるボールが目標地点の近くに到逹して停止するときまでの一連の過程についての映像を自動で生成するから、Ｐａｒ３ホールのようにティーボックスでゴルフショットによってボールを直ちにグリーン上に到達させることができる場合に特に適用し易いだけでなくホールインワンなどが可能であるので好ましい。

図１ではＰａｒ３ホールのティーボックスＴＢ領域に前記第１撮影ユニット１００が設置され、グリーンＧの辺りに前記第２撮影ユニット２００が設置される場合を例として示している。

そして、図１では第１撮影ユニット１００が第１カメラ１１０及び第２カメラ１２０を含み、第２撮影ユニット２００が第３カメラ２１０及び第４カメラ２２０を含む場合を示している。

前記第１撮影ユニット１００の第１カメラ１１０はゴルフスイングする使用者の側面を見る画角で映像を撮影するように設置され、第２カメラ１２０はゴルフスイングする使用者の正面を見る画角で映像を撮影するように設置されることが好ましい。

前記第２撮影ユニット２００は単一カメラを含むようにしても良いが、図１に示したように、第３カメラ２１０と第４カメラ２２０などの２台以上のカメラが設置される場合、各カメラがグリーンＧを含む領域を互いに異なる視角で見る画角で映像を撮影するように設置されることが好ましい。

図１で、ＨＣはグリーンＧ上のホールカップを指示し、ＦＬはホールカップｈｃに差し込まれた旗竿を指示する。

一方、使用者に提供されるゴルフ映像情報の映像コンテンツをより多様な視角でよりドラマチックな高級映像として生成するためにホールの中間地点の辺りに、図１に示したように、第３撮影ユニット３１０、３２０を設置することも可能である。

また、例えば、図１に示したホールがＰａｒ４ホール又はＰａｒ５ホールの場合には、ティーボックスＴＢでゴルフショットしたものが直ちにグリーンＧに到逹することができず、その中間地点程度に着地することが一般的である。この時、図１に示したように、第３撮影ユニット３１０、３２０が前記第２撮影ユニット２１０、２２０と類似した機能をすることができる。

すなわち、本発明によるゴルフ映像情報自動生成システムがＰａｒ４ホール又はＰａｒｔ５ホールに設置される場合、前記目標地点がグリーン上のホールカップではなくて、例えばフェアウェイ上の目標領域ＥＶ上の一地点となり得る。

したがって、使用者がティーボックスＴＢでゴルフショットしたものがフェアウェイ上の目標領域ＥＶにいくら近く着地するかを前記第３撮影ユニットの第５カメラ３１０又は第６カメラ３２０が撮影した映像から確認することができ（後述する映像内ボールの位置の算出及びトラッキングによって前記目標領域内に着地したか又は中心にいくら近くに着地したかなどの判別及び決定が可能である）、映像情報処理装置５００は前記第３撮影ユニットの撮影映像を分析してこれを判別することができ、その結果を使用者に知らせる又はサーバーに伝送して、前記サーバーがその結果を記録しておくことができるようにすることが可能である。

また、前述したように、前記第３撮影ユニットの映像を分析し、ゴルフラウンドする使用者のそれぞれがティーボックスでゴルフショットしたものに対し、フェアウェイに前もって準備しておいた目標領域ＥＶの中心に最も近くに着地した順に順位を決定し、順位によって決定しておいた景品を前記第３撮影ユニットの映像分析結果によって、決定された順位によって支給するようにすることができる。

また、図１に示したように、目標領域ＥＶを敢えて決定しておいていなくても、通常ゴルフ場でＰａｒ４ホール又はＰａｒ５ホールで行われるロンゲストゲーム（Ｌｏｎｇｅｓｔ Ｇａｍｅ；ゴルフラウンド中の使用者のうちティーショットしたボールがフェアウェイ上で最も遠い飛距離を記録する場合の使用者が優勝するゲーム）の勝者を前記第３撮影ユニットの撮影映像の分析によって（映像内ボールの位置情報を把握することによって）正確に判別することができる。

前記目標領域内にボールが着地したかに対する判別によってイベントが当選されたか又はロンゲストゲームの勝者であるかなどを前記第３撮影ユニットの撮影映像の分析によって判別又は決定することができ、その当選者又は勝者にはゴルフ場業者が前もって準備しておいた景品を支給する、又は前記第１撮影ユニット及び第３撮影ユニットのそれぞれの撮影映像を用いて映像情報処理装置が映像編集によって自動で生成したゴルフ映像情報を提供することができる（当選者又は勝者であるかを前記映像情報処理装置が判別又は決定するとともに前記自動で生成したゴルフ映像情報を自動で該当使用者のモバイル端末機に伝送するなどの処理が可能である）。

ここで、本願の請求項１１〜１３に記載されているティーボックス撮影ユニット及びフェアウェイ撮影ユニットは、前記第１撮影ユニット及び第３撮影ユニットとそれぞれ同一である。

一方、前述したような各撮影ユニットのカメラは、映像情報処理装置５００と連結されて互いに通信し、各カメラが取得する映像が前記映像情報処理装置５００に伝送されて収集され、前記映像情報処理装置５００は各カメラから収集したそれぞれの映像から適切な映像を抽出し、その抽出された映像を互いに結合する又は特定カメラの映像内に他のカメラの映像をサブ映像として挿入するなどの映像編集を行って最終的にゴルフ映像情報を自動で生成するように構成される。

前記映像情報処理装置５００は、前述したように、ゴルフ映像情報を自動で生成するために各撮影ユニットの各カメラから収集したそれぞれの映像から適切な映像を抽出する。この際、どの区間の映像を抽出することが適切であるかについて前もってプログラムされている情報処理部によって適切な映像を抽出し編集して前記ゴルフ映像情報を生成する。

すなわち、前記映像情報処理装置５００はそれぞれのカメラから収集した映像を分析して適切な映像の抽出区間を決定し、その決定されたものによって適切な映像を抽出する。この事項については後述する。

一方、図２に示したように、映像情報処理装置５００は、大別して、格納部５１０と情報処理部５２０を含み、前記情報処理部５２０は、映像管理部５２１、トリガー処理部５２２、ボールトラッキング処理部５２３、ホールカップ位置感知部５２４及び映像編集部５２５を含むように構成されることができる。

ここで、前記映像管理部５２１、トリガー処理部５２２、ボールトラッキング処理部５２３、ホールカップ位置感知部５２４及び映像編集部５２５などはそれぞれハードウェア又はソフトウェアで具現されることができ、前記情報処理部５２０が行う各機能を区分して示したものであり得る。

前記格納部５１０は各撮影ユニット１００、２００などの各カメラから収集される映像が格納される部分であり、前記映像管理部５２１は各撮影ユニット１００、２００などの各カメラからそれぞれ撮影された映像を収集し、各カメラ別に区分して前記格納部５１０に格納して管理する。

前記トリガー処理部５２２は前記格納部５１０に格納された前記第１撮影ユニット１００の第１カメラ１１０又は第２カメラ１２０の映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知すれば、トリガー信号を発生する。

前記トリガー処理部５２２によって'ボールが打撃によって動くことを感知'する方式は、多くのフレームの映像に対して互いに異なる二つのフレーム映像の差映像でボールを検出するアルゴリズムによって各該当映像内でボールを検出することによってボールを感知することが可能になる。これについてのより具体的な説明は後述する。

一方、本発明の他の一実施例によるゴルフ映像情報自動生成システムの映像情報処理装置５００は、前述したように、映像分析によってトリガー信号を発生するトリガー処理部の代わりに、外部で発生するトリガー信号を受信し、これをトリガー信号として活用することができる。

すなわち、ゴルフラウンド過程で用いられるゴルフ端末機（ＭＴ：通常キャディーが持って通いながらゴルフスコアを入力して管理する端末機でもあり得、各ゴルファーが持って通うゴルフ補助端末機又はスマートフォンのようなモバイル端末機でもあり得る）を用いて一使用者がゴルフショットするときにインパクト時点に合わせて他の使用者が前記ゴルフ端末機（ＭＴ）を操作してショット信号を前記映像情報処理装置５００に伝送すれば、前記映像情報処理装置５００はそのショット信号を受信し、これを前記トリガー信号として用いることができる。これについての具体的な事項も後述する。

一方、前記ボールトラッキング処理部５２３は目標地点、すなわちグリーンの辺りに設置された第２撮影ユニット２００に含まれるカメラ２１０又は２２０の撮影映像に対する映像処理による分析で映像内でボールを検出してボールの位置情報を生成することによってボールをトラッキングする機能を有する部分である。

前記ボールトラッキング処理部５２３は、ボールがグリーン上に着地するなど、目標地点の辺りでボールを持続的にトラッキングすることで、ボールの動きが止まった時点を決定する。

そして、前記ボールトラッキング処理部５２３は、前述したように、映像分析によってボールの位置を持続的にトラッキングしてグリーン上のホールカップの位置とボールの位置を用いてホールインワンであるかを判断することもでき、ボールとホールカップ間の距離を算出することもできる。

一方、前記ホールカップ位置感知部５２４は、グリーンの辺りに設置された第２撮影ユニット２００に含まれるカメラ２１０又は２２０の撮影映像に対する映像処理による分析でグリーン上のホールカップ位置を実時間で感知し、ホールカップ位置が変更された場合、その変更されたホールカップ位置情報をアップデートする機能をする。

通常ゴルフ場の各ホールではグリーン上のホールカップの位置が頻繁に変更される。よって、本発明の一実施例によるゴルフ映像情報自動生成システムはグリーン上のホールカップ位置を固定した位置情報として持っているものではなく、システムが動作する都度又は予め設定された周期でホールカップ位置を新しく把握してアップデートする。

前記ホールカップ位置感知部５２４は、グリーンの辺りでグリーンを含む領域を撮影するカメラから収集した映像に対する予め設定された映像処理によってグリーン上のホールカップ位置を直接把握して認識することもでき、ホールカップに差し込まれた旗竿を認識し、その旗竿の下端部位置をホールカップ位置として認識することもできる。

前記ホールカップ位置感知部５２４によってグリーン上のホールカップ位置情報が最新情報として維持されることにより、前記ボールトラッキング処理部５２３によってホールインワンであるか又はニアピンであるかを判断し、ホールカップとボール間の距離算出などを正確に行うことができる。

一方、前記映像編集部５２５は前記映像管理部５２１によって管理されている各カメラ別映像から最終的に作られるゴルフ映像情報の生成に必要な映像をそれぞれ抽出し、その抽出された映像を互いに結合する又は特定抽出映像をサブ映像として他の抽出映像に挿入するなどの映像編集を行う部分である。

前記映像編集部５２５は各カメラ別映像に対する映像の抽出区間を決定し、その決定された抽出区間によって各カメラ別映像から必要な映像を抽出し、前記トリガー処理部５２２によって又は外部のゴルフ端末機によって発生するトリガー信号の時点、第１カメラの映像でボールがそれ以上検出されない時点、打撃されて移動するボールがグリーン上で止まった時点などの情報を用いて前記映像の抽出区間を決定する。これについての具体的な事項も後述する。

ここで、前記"時点"は時間情報でもあり得、映像のフレーム情報でもあり得る。例えば、'トリガー信号の発生時点'と言えば、トリガー処理部によってトリガー信号が発生したときの時間を意味することもでき、トリガー信号が発生するときの該当映像フレームを意味することもでき、両者を共に意味することもできる。

前記'ボールがそれ以上検出されない時点'も同様に映像分析によってボールが検出されないときの時間情報又はボールが検出されないときの該当映像フレームを意味することができ、前記'ボールがグリーン上で止まった時点'もボールトラッキング過程でボールの動きがないときの時間情報又は該当映像フレーム情報を意味することができる。

そして、前記"抽出区間"は時間区間でもあり得、フレーム区間でもあり得る。例えば、トリガー時点からボールがそれ以上検出されない時点までの区間であると言えば、トリガーが発生したときの時間とボールがそれ以上検出されないときの時間の間の時間区間に対応する映像フレームを抽出するという意味でもあり得、トリガーが発生したときの該当映像フレームとボールがそれ以上検出されないときの該当映像フレームの間のフレーム区間に相当する映像フレームを抽出するという意味でもあり得る。

一方、図３を参照して本発明の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明する。

図３に示したフローチャートでは、ティーボックスでホールインワンが可能なＰａｒ３ホールのようなホールにおいてティーボックスＴＢ（図１参照）に第１カメラ１１０（図１参照）と第２カメラ１２０（図１参照）が設置され、グリーンＧの辺りに第３カメラ２１０（図１参照）が設置されている場合に映像情報処理装置５００（図１参照）によって行われるゴルフ映像情報自動生成方法について示している。

ここで、前記第１カメラはゴルフスイング姿勢を取る使用者の側面を見る画角で映像を撮影し（ボールの進行方向において後方から映像を撮影）、前記第２カメラはゴルフスイング姿勢を取る使用者の正面を見る画角で映像を撮影する（ボールの進行方向において側方から映像を撮影）。

システムが動作し始めれば、ティーボックスの辺りに設置された第１カメラ及び第２カメラがそれぞれ映像撮影を始め（Ｓ１０）、映像管理部５２１（図２参照）は前記第１カメラ及び第２カメラのそれぞれから撮影された映像を収集して格納部５１０（図２参照）に格納する（Ｓ１２）。

使用者がティーボックスでゴルフショットしてボールを打撃すれば、トリガー処理部５２２（図２参照）によってトリガー信号が発生する又は外部のゴルフ端末機などからトリガー信号を受信する（Ｓ２０）。

前述したように、トリガー信号が発生すれば、グリーンの辺りに設置された第３カメラは映像撮影を始め（Ｓ２２）、映像管理部は第３カメラからも撮影映像を収集して格納部に格納する。

そして、前述したように、トリガー信号が発生すると、映像編集部５２５（図２参照）はトリガー時点を決定する（Ｓ２４）。

一方、トリガー処理部は格納部に格納された第１カメラの撮影映像に対して差映像及びボール検出方法などを適用して映像内で動いているボールを検出する（Ｓ３０）。

前記第１カメラの撮影映像はティーボックスの後方からボールの進行方向に見る画角で撮影される映像であるので、ボールがいくらか遠く飛べば映像内でそれ以上ボールを検出することができなくなる（Ｓ４０）。この時、映像編集部は、前記第１カメラの撮影映像でボールがそれ以上検出されない時点、つまり第１カメラ映像でボールがなくなった時点を決定する（Ｓ４２）。

もしくは、前記映像編集部は、前記トリガー時点から予め設定された時間が経過すれば（Ｓ４０）、その予め設定された時間が経過した時点をボールがなくなった時点として決定する（Ｓ４２）。

前述したように、第１カメラの映像でボールがなくなったと判断される場合、映像管理部は第１カメラ撮影映像の収集を終了する（Ｓ４４）（第１カメラも撮影を終了する）。

そして、映像情報処理装置のボールトラッキング処理部５２３（図２参照）は、グリーン領域を撮影している第３カメラの撮影映像に対して差映像及びボール検出方法などを適用してボールを検出することによってボールの位置をトラッキングする（Ｓ５０）。

ボールトラッキング処理部によってボールトラッキングが進んでからボールがそれ以上動かない場合、例えばボールがグリーン上で転がってから停止した場合（Ｓ６０）、前記映像編集部はボールがグリーン上で停止した時点を決定する（Ｓ６４）。

そして、前述したように、第３カメラの映像でボールが停止したと判断した場合、映像管理部は第３カメラ撮影映像の収集を終了する（Ｓ６２）（第３カメラも撮影を終了する）。

この時、ボールトラッキング処理部はホールカップの位置を前もって知っているとともに映像分析によってボールの位置情報も知っているので、ホールカップの位置とボールの位置情報を用いてホールインワンであるかを判断することができる（Ｓ７０）。

仮に、ホールインワンが発生した場合、映像編集部は最終的に生成されるゴルフ映像情報に前もって用意しておいたホールインワン祝いのコンテンツを挿入するようにする（Ｓ７２）。

仮に、ホールインワンではない場合、ボールトラッキング処理部はホールカップとボール間の距離を算出し（Ｓ８０）、映像編集部は最終的に生成されるゴルフ映像情報に前記算出されたホールカップとボール間の距離情報を表示する（Ｓ８２）。

一方、映像編集部は、前記Ｓ２４段階で決定したトリガー時点、Ｓ４２段階で決定した第１カメラ映像でボールがなくなった時点、及びＳ６４段階で決定したボールがグリーン上で停止した時点を用いて、前記決定された各時点を基準に前記格納部に格納された各カメラ映像からそれぞれ映像を抽出し、その抽出された映像に対して予め設定された事項による編集を行い、必要な場合、前記Ｓ７２段階のホールインワン祝いのコンテンツ又は前記Ｓ８２段階の距離情報表示などを挿入することによって最終的にゴルフ映像情報を生成する（Ｓ１００）。

図３に示したフローチャートによるゴルフ映像情報の自動生成に関連した具体的な例を図４〜図８を参照して説明する。

図４は前記第１カメラによって撮影された映像１０１の一例を示すもので、該当映像で映像処理をする方法を説明するための図である。

第１カメラによって撮影された映像によって前記トリガー時点の決定及びボールがなくなった時点の決定を行う必要があり、これは第１カメラによって撮影された映像に対する所定の映像処理による分析によってなされる。

映像処理による分析を容易に行うために、図４に示したように、ティーボックスにいつも用意されているティーマーカー１及び２を用いて該当映像内でティーマーカー１及び２を認識し、その認識されたティーマーカー１及び２を含む関心領域ＲＯＩを設定し、第１カメラの撮影映像の毎フレームごとに前記関心領域ＲＯＩに対応する部分を抽出することによって映像処理に前記抽出された関心領域ＲＯＩ部分を用いることができる。

最初に、前述したように関心領域ＲＯＩが設定されれば、ゴルフショットが進むうちには第１カメラの全てのフレームの映像から前記設定された関心領域ＲＯＩのみを抽出して分析することによってトリガー又はボールの消滅などを易しく判断することができる。

一方、図５の（ａ）〜（ｆ）は前記第１カメラによって撮影されたｎ番目フレームからｎ＋５番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示している（ここで、ｎは任意の自然数）。

図５の（ａ）はｎ番目フレーム映像を、（ｂ）はｎ＋１番目フレーム映像を、（ｃ）はｎ＋２番目フレーム映像を、（ｄ）はｎ＋３番目フレーム映像を、（ｅ）はｎ＋４番目フレーム映像を、そして（ｆ）はｎ＋５番目フレーム映像をそれぞれ示し、各フレーム映像内でｂ１、ｂ２、ｂ３、ｂ４、ｂ５及びｂ６が指示するように動くボールを検出することができる。

このようなボール検出は差映像及びボール検出方法によって行うことができる。例えば、ｎ番目フレーム映像とｎ＋１番目フレーム映像の差映像とこれに対する正規化などの所定のイメージ前処理を受ければ、映像内で動きがある部分のみ残ることになり、その中にはボールも含まれる。

ボールの大きさ、縦横比、直進性などについての事項を前もって設定しておき、その予め設定された事項によって、差映像によって生成された映像から不要な部分を除去する方式でボールを検出することができる。

例えば、差映像から、動く部分である使用者の頭部や胴体、脚部など、そしてゴルフクラブ部及びボール部が検出される。使用者の頭部や胴体、脚部などは予め設定されたボールの大きさ情報や縦横比情報によって容易に除去することができ、ゴルフクラブ部の場合にも曲線軌道に沿って動くしかないから直進性について予め設定された事項によって容易に除去することができるので、このような方式で不要な部分が全部除去されることによって、ボールを容易に検出することができる。

前述したようなボール検出方法によって、図５の（ａ）〜（ｆ）にそれぞれ示した各フレーム映像上で検出されたボールを表示したものがｂ１〜ｂ６である。

本発明によるシステムの映像情報処理装置のトリガー処理部が前記ボール検出方法によって最初にボールを検出するときの時点が直ちにトリガー時点となるものである。

図５の（ａ）に示した第１カメラ映像のｎ番目フレーム映像でボールｂ１が検出されることによってｎ番目フレームをトリガー時点と決定する又はｎ番目フレーム映像でボールを検出した時間をトリガー時点と決定することができる。

仮に、トリガー処理部の代わりに外部のトリガー信号を受信することによってトリガー時点を決定する場合には、他の使用者又はキャディーがゴルフ端末機を操作してトリガー信号を発生した時点（該当時間又は該当時間でのフレーム）がトリガー時点となる。

トリガー処理部の映像処理によるトリガー信号発生時点と外部からトリガー信号を受信することによって決定されるトリガー時点は違うことがあり、必ずしも使用者のゴルフスイングによってゴルフクラブのヘッドがボールにインパクトされるときをトリガー時点と決定する必要はない。適切な時点をトリガー時点としてその時点前後の予め設定された区間だけの映像を抽出して編集するため、インパクト時点がトリガー時点とならなくても適切なゴルフ映像情報の生成が可能であるからである。

一方、図６の（ａ）〜（ｆ）は前記第１カメラによって撮影されたｍ番目フレームからｍ＋５番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示している（ここで、ｍは任意の自然数、ｍはｎより大きい）。

図６の（ａ）はｍ番目フレーム映像を、（ｂ）はｍ＋１番目フレーム映像を、（ｃ）はｍ＋２番目フレーム映像を、（ｄ）はｍ＋３番目フレーム映像を、（ｅ）はｍ＋４番目フレーム映像を、そして（ｆ）はｍ＋５番目フレーム映像をそれぞれ示し、各フレーム映像内でＢ１、Ｂ２、Ｂ３、Ｂ４及びＢ５が指示するように動くボールを検出することができる（図６で、ｍ＋５番目フレーム映像ではボールが検出されなかった）。

ここで、ボールを検出する方式は先に図５で説明したようである。

このように、トリガー信号発生以後にもトリガー処理部は第１カメラの映像をフレームごとに分析してボールを検出するが、ｍ＋５番目フレーム映像でボールが検出されなかったので、すなわち映像内でボールがなくなったと判断することができるので、該当フレームをボールがなくなった時点又は映像でボールが検出されなかったときの時間をボールがなくなった時点と決定することができる。

一方、図７は前記第３カメラによって撮影された映像２０１の一例を示すもので、該当映像でホールカップとボール間の距離表示など、グリーン上で使用者に提供可能なゴルフ情報が表示された例を示している。

図７に例示された第３カメラの映像によって、本発明の映像情報処理装置のボールトラッキング処理部は該当映像内でボールｂａを検出（ボール検出方法は前述したようである）して毎フレーム映像ごとにボールの位置情報を算出することによってボールの位置を追跡する。

毎フレームごとにボールｂａの位置情報を算出することができるので、最終的に生成されるゴルフ映像情報に、図７に示したように、ボールの軌跡ｔｒを表示することも可能である。

また、本発明の映像情報処理装置のホールカップ位置感知部５２４（図２参照）は映像２０１内でグリーンｇ上のホールカップｈｃを直接捜す又はホールカップに差し込まれた旗竿ｆｌを捜してホールカップ位置を算出することができる。

ホールカップｈｃ又は旗竿ｆｌはグリーンＧと明らかに区別される色相を有するので、第３カメラの映像をＨＳＶ映像に変換し、その変換映像に対するカラー分析によってホールカップ又は旗竿を捜すことができる。

旗竿を捜す場合、映像内で旗竿のカラー分布によって、旗竿が立てられているか又は横になっているかを判断することができ、旗竿が横になっている場合にはホールカップ位置を感知しなく、旗竿が立てられている場合にその旗竿の下端部をホールカップ位置と特定することができる。

前記ボールトラッキング処理部は映像内ボール検出方法によってボールの位置情報を知っているとともにホールカップ位置感知部によって把握されたホールカップの位置も知っているので、ホールカップの位置情報とボールの位置情報を用いてボールｂａがホールカップｈｃにホールインされるかを判断することができるのはもちろんのこと、ボールｂａが停止した場合にホールカップｈｃとボールｂａ間の距離も計算することができる。

本発明の映像情報処理装置の映像編集部は、前述したようにボールがホールカップにホールインされる場合、すなわちホールインワンの場合、前もって用意したホールインワン祝いのコンテンツをゴルフ映像情報に挿入して表示することができ、図７に示したように、ボールｂａとホールカップｈｃ間の距離が算出された場合、その算出された距離情報をゴルフ映像情報に表示することができる。

また、図７に示したように、把握されたホールカップ位置を中心に同心円Ｒａのような仮想オブジェクトを表示することで、ボールｂａがホールカップｈｃにどの位近接したかを視角的に表示するコンテンツの挿入も可能である。

一方、図８では映像編集部によってそれぞれのカメラ映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示している。

図８で、ＩＭ−１は第１カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、ＩＭ−２は第２カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、ＩＭ−３は第３カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、ＩＭ−Ｇはそれぞれの映像から抽出された映像が編集された映像を示す。

それぞれの映像ＩＭ−１、ＩＭ−２、ＩＭ−３からゴルフ映像情報を生成するために必要な映像を抽出するためには、トリガー時点（図３のＳ２４段階参照）、ボールがなくなった時点（図３のＳ４２段階参照）及びボールが停止した時点（図３のＳ６４段階参照）がそれぞれ決定されることが好ましい。ここで、トリガー時点はＴ１、ボールがなくなった時点はＴ２、そしてボールが停止した時点はＴ３と言う。

前記それぞれの時点のうち、トリガー時点Ｔ１は必ず決定される必要があり、ボールがなくなった時点Ｔ２及びボールが停止した時点Ｔ３は必ずしも決定される必要がなく、前記トリガー時点からの時間区間又はフレーム区間を前もって設定してトリガー時点後に予め設定された時間又はフレーム区間に対応する映像を抽出する方式でそれぞれの映像ＩＭ−１、ＩＭ−２、ＩＭ−３からゴルフ映像情報を生成するために必要な映像を抽出することが可能である。

しかし、ゴルファーごとに飛距離も違い、打撃されたボールが岩にぶつかってグリーン上にさらに飛び上がるなどのさまざまな突発変数のため、固定された映像抽出区間ではボールの適切な映像を生成しにくいということを考慮すれば、映像分析によってそれぞれの時点を決定し、その決定された時点によって映像抽出区間を決定することがボールの適切な映像を生成するのにもっと有利であり得る。以下では、それぞれの決定された時点によって映像抽出区間が決定される場合について説明する。

図８に示したように、第１カメラの映像の分析によってトリガー時点Ｔ１とボールがなくなった時点Ｔ２が決定されれば、第１カメラの映像ＩＭ−１からトリガー時点Ｔ１以前の予め設定された区間Ｓ１−１に対応する映像とトリガー時点Ｔ１からボールがなくなった時点Ｔ２までの区間Ｓ１−２に対応する映像を抽出することができる。

もちろん、ボールがなくなった時点Ｔ２を別に判断しない場合には、トリガー時点Ｔ１から予め設定された区間を前記Ｓ１−２区間として抽出することができる。ボールがなくなった時点Ｔ２が決定された場合にも前記Ｓ１−２区間をＴ１〜Ｔ２の区間にする必要はなく、Ｔ１からＴ２時点より少し前の時点又は少し後の時点までの区間をＳ１−２区間と決定して抽出することができる。

ＩＭ−１映像で、Ｓ１−１区間及びＳ１−２区間に対応して抽出される映像をＥ１という。

一方、第２カメラの映像から抽出される映像は編集されるゴルフ映像をどのコンテンツで構成するかによって多様に決定されることができる。第２カメラの映像は使用者を正面から見る画角で撮影した映像なので、第１カメラの映像又は第３カメラの映像にサブ映像として挿入することで、ゴルフボールが打撃されて飛ぶ状況で使用者の表情を一緒に映像に含ませるための目的で抽出するものであり得る。

したがって、図８で、第２カメラの映像ＩＭ−２に対してトリガー時点Ｔ１から予め設定された区間Ｓ２に対応する映像を抽出することができ、第２カメラの映像ＩＭ−２からＳ２区間の抽出された映像をＥ２と言う。

一方、図８に示したように、第３カメラの映像に対する分析によってボールが停止した時点Ｔ３が決定されれば、第３カメラの映像ＩＭ−３からボールがなくなった時点Ｔ２からボールが停止した時点Ｔ３までの区間Ｓ３を抽出することができる。

もちろん、ボールが停止した時点Ｔ３を別に判断しない場合には、トリガー時点Ｔ１から予め設定された区間又はボールがなくなった時点Ｔ２から予め設定された区間を前記Ｓ３区間として抽出することができる。

第３カメラの映像ＩＭ−３からＳ３区間の抽出された映像をＥ３という。

前述したように、第１カメラ映像ＩＭ−１、第２カメラ映像ＩＭ−２及び第３カメラ映像ＩＭ−３からそれぞれＥ１、Ｅ２及びＥ３の映像が抽出されれば、これを用いて編集映像ＩＭ−Ｇを作ることができる。

すなわち、図８に示したように、Ｅ１映像とＥ３映像を結合し、その結合された映像にＥ２映像をサブ映像として挿入する方式で映像編集を行うことができる。

サブ映像の場合、オリジナル映像から特定部分、例えば使用者の上体部又は顔部のみ抽出して用いることもでき、使用者の拡大映像を用いることもできる。

本発明の一実施例によるゴルフ映像情報自動生成システムは、前記Ｅ１、Ｅ２及びＥ３映像を編集した映像に、図７で説明したようなボールの軌跡ｔｒの表示、グリーン上の同心円Ｒａの表示、ホールカップとボール間の距離の表示、ホールインワンなどに対する祝いコンテンツの表示などを挿入する又は'Ｎｉｃｅ Ｓｈｏｔ！'、'Ｎｅａｒｅｓｔ Ｗｉｎｎｅｒ！'などコメントの表示などを挿入することによって最終的なゴルフ映像情報を自動で生成することができる。

最終的にゴルフ映像情報の生成が完了すれば、映像情報処理装置５００（図１参照）はゴルフ場の運営サーバー又は別個のサーバーに前記生成の完了したゴルフ映像情報を伝送してサーバーで格納管理するようにすることができ、使用者はＰＣ又はモバイル端末機を用いてサーバーに接続して該当ゴルフ映像情報をダウンロードすることによって自らの記念的なゴルフショットについてのゴルフ映像情報を受けることができる。

一方、図３〜図８ではティーボックスに第１カメラ及び第２カメラが設置され、グリーン地域に第３カメラが設置され、それぞれから映像を収集してゴルフ映像情報を生成する場合について説明している。本発明によるゴルフ映像情報自動生成システム及び方法はこの場合に限定されず、２台のカメラを用いる場合はもちろんのこと、４台以上のカメラを用いる場合まで多様に具現可能である。

例えば、ティーボックスに第１カメラが設置され、グリーン地域に第３カメラのみ設置された場合には、図８で第２カメラの映像ＩＭ−２及びそれから抽出された映像Ｅ２に関する部分を除き、Ｅ１映像とＥ３映像を用いてゴルフ映像情報を生成することができる。

また、例えば、ティーボックスに第１カメラ及び第２カメラが設置され、グリーン地域に第３カメラ及び第４カメラが設置された場合には（図１参照）、図８で第４カメラの映像からＴ１、Ｔ２及びＴ３の少なくとも一つの時点を基準に映像抽出区間を決定し、その決定された区間によって映像を抽出して、編集される映像上にサブ映像として挿入する又はＥ３映像に結合する方式で編集することができる（第４カメラの映像は第３カメラとは違う視角でグリーン領域を撮影しているので、第３カメラの映像と第４カメラの映像のそれぞれ適切な区間で映像を抽出して互いに結合することができ、第４カメラの映像がホールカップの辺りを拡大して撮影する映像となるようにしてＥ３映像上にサブ映像として挿入して処理することもできる）。

また、例えば、ティーボックスとグリーンの間に第３撮影ユニット（第５カメラ及び第６カメラ、図１参照）が設置された場合には、適切な区間で第３撮影ユニットの映像から映像を抽出して、図８でＥ１映像とＥ３映像の間に適切に結合させる又は挿入する方式で映像編集を行うことができる。

一方、図９〜図１３を参照して本発明のさらに他の一実施例によるゴルフ映像情報自動生成システム及びこれに用いられるゴルフ映像情報自動生成方法について説明する。

本発明のさらに他の一実施例によるゴルフ映像情報自動生成システムは、ゴルフ場の特定ホールの一側に設置される第１撮影ユニットと他側に設置される第２撮影ユニット、及び前記第１撮影ユニット及び第２撮影ユニットと連結される映像情報処理装置を含んでなる。本実施例においても、前記映像情報処理装置の構成及び機能は実質的に同様に適用することができる。

ここで、前記第１撮影ユニットは図１に示した第１カメラによって具現されることもでき、第２カメラによって具現されることもでき、必ずしもティーボックスに設置されなければならないものではなく、ティーボックスと多少離れた距離に設置されることもできる。

前記第２撮影ユニットは図１に示した第３カメラによって具現されることもでき、第４カメラによって具現されることもでき、必ずグリーン周辺に設置されなければならないものではなく、グリーンと多少離れた距離に設置されることもできる。

以下、第１撮影ユニットとは使用者がゴルフショットする周辺に設置されるカメラ装置を意味し、第２撮影ユニットとは目標地点（例えば、グリーン上のホールカップ）の周辺に設置されるカメラ装置を意味すると定義する。

図９は本発明の他の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。

図９に示したフローチャートによるゴルフ映像情報自動生成方法が適用される本発明によるゴルフ映像情報自動生成システムの第２撮影ユニットはパンチルトズーム（Ｐａｎ−Ｔｉｌｔ−Ｚｏｏｍ）の可能なＰＴＺカメラ装置によって具現される。

前記ＰＴＺカメラのパン機能はカメラを左右に回転する機能であり、チルト機能はカメラを上下に回転させる機能であり、ズーム機能は映像を拡大又は縮小する機能である。

システムが動作し始めれば、第１撮影ユニットが使用者のゴルフショットについての映像撮影を始め、第２撮影ユニットも映像撮影を始める（Ｓ２１０）。この時、第２撮影ユニットは使用者がゴルフショットする位置（例えば、ティーボックス）から多少離れた距離（例えば、グリーンの周辺）に設置された状態で使用者がゴルフショットする位置を見て、予め設定された第１倍率でズームイン（Ｚｏｏｍ−Ｉｎ）された状態で撮影を始める（以下、前記第２撮影ユニットの使用者がゴルフショットする位置を見て、予め設定された第１倍率でズームイン（Ｚｏｏｍ−Ｉｎ）した状態を'基本状態'と言う）。

映像管理部５２１（図２参照）は前記第１撮影ユニット及び第２撮影ユニットのそれぞれから撮影された映像を収集して格納部５１０（図２参照）に格納する（Ｓ２２０）。

使用者がティーボックスでゴルフショットしてボールを打撃すれば、トリガー処理部５２２（図２参照）によってトリガー信号が発生する又は外部のゴルフ端末機などからトリガー信号を受信する（Ｓ２３０）。このようにトリガー信号が発生すれば、映像編集部５２５（図２参照）はトリガー時点を決定する（Ｓ２３２）。

また、前述したようにトリガー信号が発生すれば、第２撮影ユニットは基本状態で撮影してから、予め設定された第２倍率で段々ズームアウト（Ｚｏｏｍ−Ｏｕｔ）しながら撮影した映像を映像情報処理装置に伝送する（Ｓ３１０）。

前述したように第２撮影ユニットが段々ズームアウトして、前記予め設定された第２倍率（基本倍率でもあり得、それより高い倍率でもあり得る）に到逹すれば、ズームアウトを完了する（Ｓ３２０）。

ズームアウトが完了した後、前記第２撮影ユニットはパンチルティングを行って、すなわち上下に回転する、左右に回転する、又は上下左右に回転して目標地点を含む所定領域を撮影するようにする。すなわち、第２撮影ユニットは、その見る撮影範囲内にホールカップを含むグリーンが含まれる該当ビューとなるように前記第２撮影ユニットのパンチルティングが駆動される。

ここで、前記第２撮影ユニットは、初めから予め設定された上下及び／又は左右の角度で回転することによって前記パンチルティングを行うこともでき、映像情報処理装置が前記第２撮影ユニットから伝送される映像を分析してホールカップ位置を認識し、前記第２撮影ユニットに回転すべき上下及び／又は左右の角度情報を伝達することによって前記パンチルティングを行うこともでき、第２撮影ユニットそのものに映像分析ユニットを含み、自らの映像分析によってホールカップ位置を認識し、そのホールカップ位置を基準に回転角度情報を計算し、それによって前記パンチルティングを行うこともできる。

前述したように第２撮影ユニットのパンチルティングを行った後、前記第２撮影ユニットはグリーンの映像を撮影し、映像情報処理装置にその撮影された映像を伝送する（Ｓ３４０）。

一方、前記第１撮影ユニットがティーボックスの後方からボールの進行方向に見る画角で撮影する映像の場合、打撃によってボールが多少遠く飛べば映像内でそれ以上ボールを検出することができなくなる。この時、映像編集部は、前記第１撮影ユニットの撮影映像でボールがそれ以上検出されない時点、すなわち第１撮影ユニット映像でボールがなくなった時点を決定することができる。

追後に、映像編集部は、ゴルフ映像情報を生成するとき、前記ボールがなくなった時点を基準に前記第１撮影ユニットの映像から抽出する映像の抽出区間を決定することができ、あるいは前述したような'ボールがなくなった時点'を決定せずに前記トリガー時点から予め設定された時間が経過すれば、その経過した時間までの映像を前記第１撮影ユニットの映像から抽出することもできる。図９では後者を示している。

すなわち、映像情報処理装置は、前記トリガー信号が発生した後に予め設定された時間が経過したかを判断し（Ｓ４００）、その予め設定された時間が経過すれば、前記第１撮影ユニットの撮影映像の収集を終了する（Ｓ４１０）（第１撮影ユニットも撮影を終了する）。

そして、映像情報処理装置のボールトラッキング処理部５２３（図２参照）はグリーン領域を撮影している第２撮影ユニットの撮影映像に対して差映像及びボール検出方法などを適用してボールを検出することによってボールの位置をトラッキングする（Ｓ４２０）。

ボールトラッキング処理部によってボールトラッキングが進んでからボールがそれ以上動かない場合、例えばボールがグリーン上で転がってから停止した場合（Ｓ５００）、前記映像編集部はボールがグリーン上で停止した時点を決定する（Ｓ５０２）。

そして、前述したように第２撮影ユニットの映像でボールが停止したと判断した場合、映像管理部は第２撮影ユニット撮影映像の収集を終了する（Ｓ３５０）（第２撮影ユニットも撮影を終了する）。この時、前記第２撮影ユニットはズームイン及びパンチルティングによって前記基本状態に復帰する（Ｓ３６０）。

ボールトラッキング処理部はホールカップの位置を既に知っている映像分析によってボールの位置情報も知っているので、ホールカップの位置とボールの位置情報を用いてホールインワンであるかを判断することができる（Ｓ５２０）。

仮に、ホールインワンが発生した場合、映像編集部は最終的に生成されるゴルフ映像情報に前もって用意しておいたホールインワン祝いのコンテンツを挿入するようにする（Ｓ５２１）。

仮に、ホールインワンではない場合、ボールトラッキング処理部はホールカップとボール間の距離を算出し（Ｓ５４０）、映像編集部は最終的に生成されるゴルフ映像情報に前記算出されたホールカップとボール間の距離情報を表示する（Ｓ５５０）。

一方、映像編集部は、前記Ｓ２３２段階で決定したトリガー時点と、Ｓ５０２段階で決定したボールのグリーン上で停止した時点などを用いて、前記決定された各時点を基準に前記格納部に格納された各撮影ユニット映像からそれぞれ映像を抽出し、その抽出された映像に対して予め設定された事項による編集を行い、必要な場合、前記Ｓ５２１段階のホールインワン祝いのコンテンツ又は前記Ｓ５５０段階の距離情報表示などを挿入することによって最終的にゴルフ映像情報を生成する（Ｓ６００）。

図９に示したフローチャートによるゴルフ映像情報の自動生成に関連した具体的な例を図１０〜図１３を参照して説明する。

図１０は図９に示したフローチャートによるゴルフ映像情報自動生成方法によってそれぞれの撮影ユニット映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。

図１０で、ＩＭ−Ａは第１撮影ユニットの撮影映像を示すもので、映像管理部によって収集されて格納部に格納された映像を示し、ＩＭ−Ｂは第２撮影ユニットの撮影映像を示すもので、映像管理部によって収集されて格納部に格納された映像を示し、ＩＭ−Ｇはそれぞれの映像から抽出された映像が編集された映像を示す。

それぞれの映像ＩＭ−Ａ、ＩＭ−Ｂからゴルフ映像情報を生成するために必要な映像を抽出するためには、トリガー時点（図９のＳ２３２段階参照）及びボールが停止した時点（図９のＳ５０２段階参照）がそれぞれ決定されることが好ましく、図９で説明したボールがなくなった時点も場合によって決定されることができる。

ここで、トリガー時点はＴ１、ボールがなくなった時点又はトリガー時点から予め設定された区間の時点はＴ２、そしてボールの停止した時点はＴ３であり、Ｔ１、Ｔ２及びＴ３についての事項は図８で説明したようである。

図１０に示したように、第１撮影ユニットの映像ＩＭ−Ａからトリガー時点Ｔ１以前の予め設定された区間Ｒ１−１に対応する映像とトリガー時点Ｔ１からＴ２時点までの区間Ｒ１−２に対応する映像が抽出されることができる。

ＩＭ−Ａ映像で、Ｒ１−１区間及びＲ１−２区間に対応して抽出される映像をＥＲ１という。
一方、図１０に示したように、第２撮影ユニットの映像に対する分析によってボールが停止した時点Ｔ３が決定されれば、第２撮影ユニットの映像ＩＭ−Ｂからトリガー時点Ｔ１からボールが停止した時点Ｔ３までの区間Ｒ２を抽出することができる。

もちろん、ボールが停止した時点Ｔ３を別に判断しない場合には、トリガー時点Ｔ１から予め設定された区間を前記Ｒ２区間として抽出することができる。

ここで、図９に基づいて説明したように、第２撮影ユニットの映像ＩＭ−Ｂは基本状態でティーボックス領域に対するズームイン映像を示し（Ｓａ）、トリガー時点Ｔ１から（又はその以前又は以後の予め設定された時点でもあり得る）ズームアウト映像を示し（Ｓｂ）、ズームアウトが完了すれば、パンチルティングによって変化したビュー（ホールカップを含むグリーン領域）を示し（Ｓｃ）、その後には同じビューを維持する又は該当ビューをもっと拡大するなどの映像を示す（Ｓｄ）。

図９のＳ４２０及びその後の段階のボールトラッキングについての事項は前記Ｓｄ映像を用いて分析することによって処理することができる。

第２撮影ユニットの映像ＩＭ−ＢからＲ２区間の抽出された映像をＥＲ２と言う。好ましくは、前記ＥＲ２映像は前記ズームイン映像（Ｓａ）、ズームアウト映像（Ｓｂ）、パンチルティングによって変化したビュー（Ｓｃ）及びその後の該当ビューを維持する又は拡大した映像（Ｓｄ）を全て含むことにより、最終的に編集が完了した映像で使用者のゴルフショットによるゴルフ映像情報がもっとドラマチックに現れることができる。

前述したように、第１撮影ユニット映像ＩＭ−Ａ及び第２撮影ユニット映像ＩＭ−ＢからそれぞれＥＲ１及びＥＲ２の映像が抽出されれば、これを用いて編集映像ＩＭ−Ｇを作ることができる。

前記編集映像ＩＭ−Ｇに所定のコンテンツなどを挿入する又は表示することは図８で説明したものと同一であるので、これについての具体的な説明は省略する。

最終的に、ゴルフ映像情報の生成が完了すれば、映像情報処理装置はゴルフ場の運営サーバー又は別個のサーバーに前記生成の完了したゴルフ映像情報を伝送してサーバーで格納管理するようにすることができ、使用者はＰＣ又はモバイル端末機を用いてサーバーに接続して該当ゴルフ映像情報をダウンロードすることによって自らの記念的なゴルフショットについてのゴルフ映像情報を受けることができる。

一方、図１１では図１０で説明したＥＲ１映像及びＥＲ２映像の編集映像の一例を時系列的に示している。

図１１の（ａ）及び（ｂ）は第１撮影ユニットから抽出されたＥＲ１映像の例を示すもので、映像内のティーボックス領域で使用者がゴルフショットしている場面を示している。

図１１の（ｃ）は第２撮影ユニットから抽出されたＥＲ２映像の例を示すもので、ティーボックスＴＢ領域をズームイン映像で撮影している状態を示している。

図１１の（ｄ）は映像内のティーボックスＴＢ領域がズームアウトによって遠くなっている状態を示し、図１１の（ｅ）は第２撮影ユニットがパンチルティング（すなわち、上下及び／又は左右に回転）によってカメラビューを変更している状態を示し、図１１の（ｆ）はパンチルティングによってカメラビューの変更が完了した状態を示している（図１１の（ｆ）の映像から分かるように、第２撮影ユニットはホールカップｈｃ／旗竿ｆｌの位置を含むグリーンＧ領域が含まれるビューを有するようにパンチルティングすることが好ましい）。

図１１の（ｆ）以後の映像ではグリーン上にボールが登場し（使用者が打撃したボールがグリーンに到逹する前に第２撮影ユニットがズームアウトによってパンチルティングされてグリーンを見ていることが好ましい）、図１２の（ａ）及び（ｂ）は第２撮影ユニットがパンチルティングされてビューが変更して状態のままの映像を撮影しているものを示し、図１２の（ａ）に示した状態でボールがグリーンに到逹し、図１２の（ｂ）に示したようにグリーンＧ上にボールｂａが登場し、その移動を止めるまでの映像がゴルフ映像情報に含まれる場合である。

一方、図１１の（ｆ）以後の映像から図１３の（ａ）〜（ｄ）の映像にも連結されることができる。図１３の（ａ）〜（ｄ）では第２撮影ユニットがパンチルティングされた後に予め設定された倍率で拡大された映像が現れる場合を示している。すなわち、図１３の（ａ）はパンチルティングによって第２撮影ユニットのビューが変更した場合を示し、図１３の（ｂ）、（ｃ）及び（ｄ）はホールカップｈｃの位置を基準に予め設定された倍率で拡大された状態でボールｂａが登場して止まるまでの映像を示す。

図１３の（ｂ）〜（ｄ）の拡大された映像は第２撮影ユニットがズームインして撮影した映像でもあり得、映像情報処理装置が第２撮影ユニットから受けた映像に対して予め設定された倍率で拡大編集した映像でもあり得る。

以上説明したように、本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法はゴルフ場の特定ホールでそれぞれの領域を撮影する映像を収集し、これを分析することによって、編集のための適切な映像抽出の基準となる時点を決定することができ、それから抽出した映像を編集することによって、ゴルフラウンドしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報、すなわちゴルフ映像情報を自動で生成して使用者に提供することができ、そのようなゴルフ映像情報をよほどドラマチックに構成して自動で生成することができるので、ゴルフを楽しむ使用者には非常に貴い記念品となることができる特長がある。
［項目１］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、
目標地点を含む領域を撮影する第２撮影ユニットと、
上記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、上記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
［項目２］
上記第１撮影ユニットは、ゴルフスイングする使用者の側面を撮影する第１カメラと上記ゴルフスイングする使用者の正面を撮影する第２カメラの少なくとも一つを含んでなり、上記第２撮影ユニットは、目標地点を含む領域を撮影する第３カメラと上記第３カメラとは違う視角で上記目標地点を含む領域を撮影する第４カメラの少なくとも一つを含んでなることを特徴とする、項目１に記載のゴルフ映像情報自動生成システム。
［項目３］
上記映像情報処理装置は、
上記第１撮影ユニット及び第２撮影ユニットの各カメラからそれぞれ撮影された映像を格納する格納部と、
上記第１撮影ユニット及び第２撮影ユニットの各カメラからそれぞれ撮影された映像を収集し、各カメラ別に区分して上記格納部に格納して管理する映像管理部と、上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定し、上記決定された映像の抽出区間によって上記格納部に格納された各カメラ別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
上記情報処理部は上記自動で生成されたゴルフ映像情報をサーバー又は上記使用者の個人端末機に伝送するように構成されることを特徴とする、項目２に記載のゴルフ映像情報自動生成システム。
［項目４］
上記情報処理部は、上記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部をさらに含み、上記映像編集部は、上記トリガー処理部によってトリガー信号が発生する時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目３に記載のゴルフ映像情報自動生成システム。
［項目５］
上記情報処理部は上記使用者のゴルフスイングによってボールが打撃されるときに外部から伝送されるトリガー信号を受信し、上記映像編集部は上記外部からのトリガー信号受信時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目３に記載のゴルフ映像情報自動生成システム。
［項目６］
上記情報処理部は、上記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部と、上記第２撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部とをさらに含み、上記映像編集部は上記トリガー処理部によってトリガー信号が発生する時点及び上記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目３に記載のゴルフ映像情報自動生成システム。
［項目７］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、上記ゴルフショットする使用者の側面を撮影する第１撮影ユニットと、
グリーンを含む領域を撮影する第２撮影ユニットと、
上記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、上記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
［項目８］
上記映像情報処理装置は、
上記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を格納する格納部と、
上記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、各撮影ユニット別に区分して上記格納部に格納して管理する映像管理部と、上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニット別映像に対してそれぞれ決定し、上記決定された映像の抽出区間によって上記格納部に格納された各撮影ユニット別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
上記情報処理部は上記自動で生成されたゴルフ映像情報をサーバー又は上記使用者の個人端末機に伝送するように構成されることを特徴とする、項目７に記載のゴルフ映像情報自動生成システム。
［項目９］
上記情報処理部は、上記第２撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部をさらに含み、上記映像編集部は映像の分析又は外部信号入力によってトリガー信号が発生する時点及び上記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニット別映像に対してそれぞれ決定するように構成されることを特徴とする、項目８に記載のゴルフ映像情報自動生成システム。
［項目１０］
上記情報処理部は、上記第２撮影ユニットの映像から上記グリーン上のホールカップ又は上記ホールカップの旗竿を認識して上記グリーン上のホールカップの位置を実時間で感知するホールカップ位置感知部と、上記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングするボールトラッキング処理部とをさらに含み、上記ボールトラッキング処理部は、上記ホールカップ位置感知部によって感知されたホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び上記ボールと上記ホールカップ間の距離の算出の少なくとも一つを行うように構成され、上記映像編集部は、上記ボールトラッキング処理部によってホールインワンと判断された場合、上記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、上記ボールトラッキング処理部によって上記ボールと上記ホールカップ間の距離が算出された場合、上記生成されるゴルフ映像情報に上記算出されたボールとホールカップ間の距離を表示するようにすることを特徴とする、項目８に記載のゴルフ映像情報自動生成システム。
［項目１１］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、
フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、
上記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、上記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
［項目１２］
上記フェアウェイ撮影ユニットは上記フェアウェイ上に前もって設定しておいた目標領域を撮影するように構成され、上記映像情報処理装置は上記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することによってゴルフラウンドする使用者のそれぞれが行ったゴルフショットによってボールが上記目標領域内に着地したかを判断するように構成され、その判断結果を上記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、項目１１に記載のゴルフ映像情報自動生成システム。
［項目１３］
上記映像情報処理装置は、上記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することにより、ゴルフラウンドする使用者のうち最も長い飛距離を記録した使用者を判別する又は上記飛距離に基づいて上記使用者に対して順位を決定するように構成され、上記判別又は決定された結果を上記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、項目１１に記載のゴルフ映像情報自動生成システム。
［項目１４］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、
上記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、上記使用者がゴルフショットすることによる映像を撮影するように構成される第２撮影ユニットと、
上記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、上記第１撮影ユニット及び第２撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
［項目１５］
上記第２撮影ユニットは、予め設定された第１倍率でズームインされて上記使用者のゴルフショットに対する映像を取得してから上記映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって予め設定された第２倍率でズームアウトされ、目標地点を含む領域が撮影領域内に含まれるように上下及び左右ので少なくとも一方に回転して映像を撮影するように構成され、上記映像情報処理装置は、上記第１撮影ユニットから収集した映像で上記トリガー信号を基準に予め設定された区間に対して抽出した映像と上記第２撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像を含むように抽出した映像とを結合することによって上記ゴルフ映像情報を自動で生成するように構成されることを特徴とする、項目１４に記載のゴルフ映像情報自動生成システム。
［項目１６］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
少なくとも一つのカメラを含む第１撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、
少なくとも一つのカメラを含む第２撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して上記格納部に格納する段階と、
上記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、
上記格納部に格納された各映像から上記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
［項目１７］
上記映像の抽出区間を決定する段階は、
上記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は上記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、上記決定されたトリガー信号の発生時点又は受信時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目１８］
上記映像の抽出区間を決定する段階は、
上記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は上記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、上記第２撮影ユニットの映像に対する映像処理によってボールを検出してボールの動きが止まった時点を決定する段階と、上記トリガー信号の発生時点又は受信時点及び上記ボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目１９］
上記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記目標地点の位置と上記トラッキングされたボールの位置を用いて上記ボールと目標地点間の距離を算出する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、上記算出されたボールと目標地点間の距離情報を上記生成されるゴルフ映像情報に表示する段階を含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目２０］
上記第１撮影ユニットは、ティーボックスに設置され、ゴルフショットする使用者の側面を撮影するカメラを含むように構成され、
上記映像の抽出区間を決定する段階は、
上記第１撮影ユニットの映像で上記ティーボックスに設置された少なくとも一つのティーマーカーを認識し、上記認識された少なくとも一つのティーマーカーを基準に予め設定された大きさの関心領域を設定する段階と、複数のフレームの映像から上記設定された関心領域に対応する映像を抽出し、差映像分析によって打撃されたボールが動くことを感知することによってトリガー信号を発生させる段階と、上記トリガー信号が発生した時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目２１］
上記第２撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
上記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記グリーン上のホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかを判断する又は上記ボールと上記ホールカップ間の距離を算出する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ボール位置のトラッキング結果、ホールインワンであると判断された場合、上記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、上記ボール位置のトラッキング結果、ホールインワンではない場合、上記生成されるゴルフ映像情報に上記算出されたボールとホールカップ間の距離を表示する段階をさらに含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目２２］
上記第２撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
ゴルフラウンドする各使用者のゴルフショットに対してそれぞれ上記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記グリーン上のホールカップの位置と上記トラッキングされたボールの位置を用いて上記ゴルフラウンドする各使用者のゴルフショットに対して上記ホールカップにボールが最も近接した場合を判断する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ホールカップにボールが最も近接した場合であると判断された使用者のゴルフショットについてのゴルフ映像情報にニアリスト祝いのためのコンテンツを挿入する段階をさらに含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目２３］
上記第２撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
上記第２撮影ユニットの映像から上記グリーン上のホールカップ又は上記ホールカップの旗竿を認識して上記グリーン上のホールカップの位置を実時間で感知する段階と、上記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記実時間感知によって決定される上記ホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び上記ボールと上記ホールカップ間の距離の算出の少なくとも一つを行う段階をさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ホールインワンであるかの判断又は上記ボールとホールカップ間の距離算出の結果を上記ゴルフ映像情報に表示する段階をさらに含むことを特徴とする、項目１６に記載のゴルフ映像情報自動生成方法。
［項目２４］
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
ゴルフ場の特定ホールの一側に設置された第１撮影ユニットによって撮影される使用者のゴルフショットに対する映像を収集して格納部に格納する第１撮影ユニット映像収集及び格納段階と、
上記特定ホールの他側に設置され、パンチルトズーム駆動の可能な第２撮影ユニットによってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って上記使用者がゴルフショットすることによって撮影される映像を収集して上記格納部に格納する第２撮影ユニット映像収集及び格納段階と、
上記第１撮影ユニットから抽出された第１抽出映像及び第２撮影ユニットから抽出された第２抽出映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
［項目２５］
上記第２撮影ユニット映像収集及び格納段階は、
上記第２撮影ユニットによって予め設定された第１倍率でズームインされた基本状態で上記使用者のゴルフショットに対する映像を取得する段階と、映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって上記第２撮影ユニットが上記基本状態で予め設定された第２倍率でズームアウトされながら映像を取得する段階と、上記第２撮影ユニットが上下及び左右の少なくとも一方に回転駆動され、上記目標地点の位置情報を認識して上記目標地点を含む領域に対する映像を取得する段階と、上記それぞれの取得される映像を上記映像情報処理装置によって収集して上記格納部に格納する段階とを含むことを特徴とする、項目２４に記載のゴルフ映像情報自動生成方法。
［項目２６］
上記ゴルフ映像情報を自動で生成する段階は、
上記第１撮影ユニットから収集した映像から上記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、上記第２撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像を含むように映像を抽出する段階と、上記各抽出された映像を結合することによって又は上記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は上記各抽出された映像に対して予め設定された映像処理をすることによって上記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、項目２５に記載のゴルフ映像情報自動生成方法。
［項目２７］
上記ゴルフ映像情報を自動で生成する段階は、
上記第１撮影ユニットから収集した映像から上記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、上記第２撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像、上記上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像及び上記目標地点を含む領域の映像に対して上記目標地点の位置によって決定される倍率でズームインした映像を含むように映像を抽出する段階と、上記各抽出された映像を結合することによって又は上記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は上記各抽出された映像に対して予め設定された映像処理をすることによって上記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、項目２５に記載のゴルフ映像情報自動生成方法。

１００ 第１撮影ユニット
１１０ 第１カメラ
１２０ 第２カメラ
２００ 第２撮影ユニット
２１０ 第３カメラ
２２０ 第４カメラ
５００ 映像情報処理装置
５１０ 格納部
５２０ 情報処理部
５２１ 映像管理部
５２２ トリガー処理部
５２３ ボールトラッキング処理部
５２４ ホールカップ位置感知部
５２５ 映像編集部

Claims (9)

1. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、
   目標地点を含む領域を撮影する第２撮影ユニットと、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を格納する格納部と、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像編集部と、前記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部と、前記第２撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部とを含む映像情報処理装置と、を含み、
   前記映像編集部は前記トリガー処理部によってトリガー信号が発生する時点及び前記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各映像に対してそれぞれ決定するゴルフ映像情報自動生成システム。
2. 前記第１撮影ユニットは、ゴルフスイングする使用者の側面を撮影する第１カメラと前記ゴルフスイングする使用者の正面を撮影する第２カメラの少なくとも一つを含んでなり、前記第２撮影ユニットは、目標地点を含む領域を撮影する第３カメラと前記第３カメラとは違う視角で前記目標地点を含む領域を撮影する第４カメラの少なくとも一つを含んでなる、請求項１に記載のゴルフ映像情報自動生成システム。
3. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、前記ゴルフショットする使用者の側面を撮影する第１撮影ユニットと、
   グリーンを含む領域を撮影する第２撮影ユニットと、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
   を含み、
   前記映像情報処理装置は、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を格納する格納部と、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、各撮影ユニット別に区分して前記格納部に格納して管理する映像管理部と、前記ゴルフ映像情報の生成のための映像抽出区間を各撮影ユニット別映像に対してそれぞれ決定し、前記決定された映像の抽出区間によって前記格納部に格納された前記各撮影ユニット別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部と
   を含み、
   前記情報処理部は前記自動で生成されたゴルフ映像情報をサーバー又は前記使用者の個人端末機に伝送するように構成され、
   前記情報処理部は、前記第２撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部をさらに含み、前記映像編集部は映像の分析又は外部信号入力によってトリガー信号が発生する時点及び前記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニット別映像に対してそれぞれ決定するように構成される、ゴルフ映像情報自動生成システム。
4. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、前記ゴルフショットする使用者の側面を撮影する第１撮影ユニットと、
   グリーンを含む領域を撮影する第２撮影ユニットと、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
   を含み、
   前記映像情報処理装置は、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を格納する格納部と、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、各撮影ユニット別に区分して前記格納部に格納して管理する映像管理部と、前記ゴルフ映像情報の生成のための映像抽出区間を各撮影ユニット別映像に対してそれぞれ決定し、前記決定された映像の抽出区間によって前記格納部に格納された前記各撮影ユニット別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
   前記情報処理部は前記自動で生成されたゴルフ映像情報をサーバー又は前記使用者の個人端末機に伝送するように構成され、
   前記情報処理部は、前記第２撮影ユニットの映像から前記グリーン上のホールカップ又は前記ホールカップの旗竿を認識して前記グリーン上のホールカップの位置を実時間で感知するホールカップ位置感知部と、前記第２撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングするボールトラッキング処理部とをさらに含み、前記ボールトラッキング処理部は、前記ホールカップ位置感知部によって感知されたホールカップの位置と前記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び前記ボールと前記ホールカップ間の距離の算出の少なくとも一つを行うように構成され、前記映像編集部は、前記ボールトラッキング処理部によってホールインワンと判断された場合、前記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、前記ボールトラッキング処理部によって前記ボールと前記ホールカップ間の距離が算出された場合、前記生成されるゴルフ映像情報に前記算出されたボールとホールカップ間の距離を表示するようにするゴルフ映像情報自動生成システム。
5. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、
   フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、
   前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
   を含み、
   前記フェアウェイ撮影ユニットは前記フェアウェイ上に前もって設定しておいた目標領域を撮影するように構成され、前記映像情報処理装置は前記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することによってゴルフラウンドする使用者のそれぞれが行ったゴルフショットによってボールが前記目標領域内に着地したかを判断するように構成され、その判断結果を前記使用者に知らせる又はサーバーに伝送して記録するようにする、ゴルフ映像情報自動生成システム。
6. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、
   フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、
   前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
   を含み、
   前記映像情報処理装置は、前記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することにより、ゴルフラウンドする使用者のうち最も長い飛距離を記録した使用者を判別する又は前記飛距離に基づいて前記使用者に対して順位を決定するように構成され、前記判別又は決定された結果を前記使用者に知らせる又はサーバーに伝送して記録するようにする、ゴルフ映像情報自動生成システム。
7. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
   ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第１撮影ユニットと、
   前記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、前記使用者がゴルフショットすることによる映像を撮影するように構成される第２撮影ユニットと、
   前記第１撮影ユニット及び第２撮影ユニットからそれぞれ撮影された映像を収集し、前記第１撮影ユニット及び第２撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
   を含み、
   前記第２撮影ユニットは、予め設定された第１倍率でズームインされて前記使用者のゴルフショットに対する映像を取得してから前記映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって予め設定された第２倍率でズームアウトされ、目標地点を含む領域が撮影領域内に含まれるように上下及び左右ので少なくとも一方に回転して映像を撮影するように構成され、
   前記映像情報処理装置は、前記第１撮影ユニットから収集した映像で前記トリガー信号を基準に予め設定された区間に対して抽出した映像と前記第２撮影ユニットから収集した映像から前記トリガー信号を基準にズームイン映像、ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した前記目標地点を含む領域の映像を含むように抽出した映像とを結合することによって前記ゴルフ映像情報を自動で生成するように構成される、ゴルフ映像情報自動生成システム。
8. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
   少なくとも一つのカメラを含む第１撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、
   少なくとも一つのカメラを含む第２撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して前記格納部に格納する段階と、
   前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、
   前記格納部に格納された各映像から前記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階と、
   を含み、
   前記映像の抽出区間を決定する段階は、
   前記第１撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は前記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、前記決定されたトリガー信号の発生時点又は受信時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含む、ゴルフ映像情報自動生成方法。
9. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
   少なくとも一つのカメラを含む第１撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、
   少なくとも一つのカメラを含む第２撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して前記格納部に格納する段階と、
   前記第１撮影ユニット及び第２撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、
   前記格納部に格納された各映像から前記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階と、
   を含み、
   前記第１撮影ユニットは、ティーボックスに設置され、ゴルフショットする使用者の側面を撮影するカメラを含むように構成され、
   前記映像の抽出区間を決定する段階は、
   前記第１撮影ユニットの映像で前記ティーボックスに設置された少なくとも一つのティーマーカーを認識し、前記認識された少なくとも一つのティーマーカーを基準に予め設定された大きさの関心領域を設定する段階と、複数のフレームの映像から前記設定された関心領域に対応する映像を抽出し、差映像分析によって打撃されたボールが動くことを感知することによってトリガー信号を発生させる段階と、前記トリガー信号が発生した時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含む、ゴルフ映像情報自動生成方法。