JP2009290790A - 映像送信装置および映像送信方法 - Google Patents

Abstract

【課題】放送業務用カメラ等で撮像したＡＶデータをネットワーク経由で伝送する際、通信状況によってビットレートを変更しながら伝送する仕組みを用いた場合、通信状況によっては画質が劣化してしまい、放送業務用としては価値の低いデータとなってしまう可能性があった。
【解決部】映像を、伝送路を通じてサーバへ送信する映像送信装置であって、伝送路の通信状況を検出する通信状況検出部と、通信状況に応じて映像のビットレートを変換して送信する送信部と、映像の変換後のビットレートが閾値以下となる区間を示す情報を記載したプレイリストを作成するプレイリスト作成部と、映像・音声データを記録するための記録メディアと、プレイリストおよび映像・音声データを記録するための記録部とを備え、記録部への記録終了後、前記区間に該当する記録部内の映像・音声データとプレイリストとを再送信する構成とする。
【選択図】図１

Description

本発明は、放送業務用ビデオカメラ等のような高品質の映像・音声データを記録する装置に関し、特に、報道番組などの速報性を要する放送用映像データを記録しながら、同じ内容の映像・音声データをネットワーク経由で遠隔地にある編集装置にリアルタイム送信する放送業務用ビデオカメラ等の記録装置に関する。

近年、携帯電話やＷｉＭＡＸといった無線ネットワーク技術が急速に普及している。このような無線ネットワークを使用して、ビデオカメラで撮影した映像・音声データを遠隔地にリアルタイムで伝送するようなシステムが考案されている。

そんな中、ネットワークの伝送状態の悪化等の要因で低ビットレートでの伝送を余儀なくされた場合、ＭＰＥＧ方式の動画像の特定のピクチャを間引いて低ビットレートで伝送し、のちにネットワークの伝送状態が回復した時に、その低ビットレート伝送要因により送信できなかった間引いたピクチャの映像・音声データを送信するというような技術が公開されている（例えば、特許文献１）。
特開２００７−２７４４４３号公報

しかしながら、特許文献１に記載の技術では、間引いたピクチャの送信後に受信側で既送信済データとの結合処理を行う必要があった。また、伝送状態の急激な悪化により、一時的に完全にデータ伝送ができないような状況に陥った場合、その区間を復旧するための再送信を行う手段も、すでに受信したピクチャとのちに受信した間引きピクチャとを受信側で結合する手段も記載されていない。

従って、本発明は、上記課題に鑑み、伝送状態の急激な悪化によりデータの送信が途切れた場合であっても、受信側で途切れなく映像データを再生できるとともに、伝送状態が一定の基準より悪いときでも基準を満たす画質で映像データを再生することができる映像送信装置および映像送信方法を提供することを目的とする。

本発明の映像送信装置は、上記目的を達成するために、取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置であって、映像データを取得する映像データ取得部と、取得した前記映像データを、第１映像データと、前記第１映像データよりも画質の高い第２映像データとに変換する映像データ変換部と、前記第１映像データを、伝送路を介して前記受信装置へ送信する第１映像データ送信部と、前記第１映像データの前記送信と並行して、前記第２映像データを記録媒体に記録する映像データ記録部と、前記第１映像データ中の１つの部分区間を特定する特定部と、前記第２映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、１つのファイルとして前記受信装置に送信する第２映像データ送信部と、前記第１映像データを再生する場合、前記第１映像データの中で特定された前記部分区間では前記第２映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部とを備える。

また、本発明の映像送信装置は、前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部を備え、前記特定部は、前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定するとしてもよい。

なお、本発明は、装置として実現できるだけでなく、その装置を構成する処理手段をステップとする方法として実現したり、それらステップをコンピュータに実行させるプログラムとして実現したり、そのプログラムを記録したコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体として実現したり、そのプログラムを示す情報、データ又は信号として実現したりすることもできる。そして、それらプログラム、情報、データ及び信号は、インターネット等の通信ネットワークを介して配信してもよい。

本発明の映像送信装置によれば、記録メディアへの記録と並行して、リアルタイムで映像・音声データを伝送する無線ネットワークの伝送ビットレートが、伝送される映像・音声データに要求される画質を最低限保証できる値を下回る区間では、高画質の状態で記録メディアに記録してある当該区間の映像・音声データを区間ごとにファイルの形式で再送信する。併せて、当該区間では、サーバがリアルタイムで受信した映像・音声データから、当該区間に対応する再送信ファイルに切り替えて再生するようプレイリストを送信する。したがって、映像送信装置によって撮像された映像・音声データを受信するサーバ側では、無線ネットワークの通信状態が悪い区間において、リアルタイムで受信した映像・音声データの間に再送信により受信した映像・音声データを組み込む作業を必要とせず、単純にプレイリストに従って再生するファイルを切り替えればよいので、サーバの負荷も少なくて済み、その分、タイムロスすることなく高画質の映像・音声データを再生することができるという効果がある。

特に、報道番組などの速報性を要する放送用映像データを記録メディアに記録しながら、同じ内容の映像・音声データをネットワーク経由で遠隔地にある編集装置にリアルタイム送信する放送業務用ビデオカメラ等のような高品質の映像・音声データを記録する映像送信装置では、高い効果を奏することができ、非常に有用である。

さらに、ネットワークの伝送状態の悪化等の要因で高品質の映像・音声データの伝送が完全に途切れた場合にも、所定の映像・音声データを再送信することで、受信側では受信した映像データの結合等の特別な処理を行うことなくあらかじめ定められた基準値以上の画質で映像・音声データを容易に閲覧することが可能となる。

以下、図面を用いて本発明の実施の形態について説明する。

（実施の形態１）
図１は、本発明の映像送信装置を含む映像送信システムの構成およびデータの流れを示すブロック図である。同図に示すように、映像送信システムは、ネットワークを介して互いに接続されるカメラ１０１とサーバ１０２とを備える。カメラ１０１は、撮影することにより得られた映像データを内蔵の記録媒体に高画質で記録しながら、並行してサーバ１０２にリアルタイム送信するカメラ１０１であって、送信機１０３、撮像部１１１、第１記録部１１２、第１記録メディア１１３、リスト作成部１１６およびリスト解釈部３０１を備える。送信機１０３は、通信状況検出部１１５および送信部１１４を備える。第１記録部１１２は記録符号化部１１７を備え、送信部１１４は送信符号化部１１８を備える。

カメラ１０１は、撮像部１１１を用いて被写体を撮影し、撮影によってえられた高画質な映像・音声データを、第１記録部１１２により、第１記録メディア１１３に記録する。なお、記録符号化部１１７は、撮像部１１１によって得られた映像・音声データを圧縮符号化およびファイル化して記録する機能を有する。ここで、撮像部１１１は、「映像データを取得する映像データ取得部」の一例である。第１記録部１１２は、「前記第１映像データの前記送信と並行して、前記第２映像データを記録媒体に記録する映像データ記録部」の一例である。

一方、これと並行して、カメラ１０１は、撮像部１１１によって撮影された映像・音声データを送信部１１４に転送し、送信部１１４を用いて無線ネットワークに送信する。送信部１１４は、圧縮符号化を行って無線ネットワークに送信する送信符号化部１１８を有する。記録符号化部１１７及び送信符号化部１１８は、「取得した前記映像データを、第１映像データと、前記第１映像データよりも画質の高い第２映像データとに変換する映像データ変換部」の一例であり、送信部１１４は、「前記第１映像データを、伝送路を介して前記受信装置へ送信する第１映像データ送信部」、「前記第２映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、１つのファイルとして前記受信装置に送信する第２映像データ送信部」および「生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部」の一例である。また、通信状況検出部１１５およびリスト作成部１１６は、「前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部」及び「前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定する前記特定部」の一例である。送信部１１４ではリアルタイムでの伝送が求められるため、送信符号化部１１８は、リアルタイムにビットレートを変更して圧縮符号化を行う機能を有する。

通信状況検出部１１５は、無線ネットワークの通信状況（伝送ビットレート）を検出し、検出した通信状況を例えば、ビットレートで表して送信部１１４およびリスト作成部１１６に通知する。

送信部１１４内の送信符号化部１１８は、圧縮符号化を行う際、撮像部１１１から送られてきた映像・音声データを、通信状況検出部１１５から通知される通信状況に応じて、最適なビットレートで圧縮符号化を行い、無線ネットワークに送信する。

リスト作成部１１６は、通信状況検出部１１５から通知される通信状況を参照し、所定の手順でプレイリストを生成する。リスト作成部１１６の詳細制御については後述する。リスト作成部１１６は、「前記第１映像データ中の１つの部分区間を特定する特定部」と「前記第１映像データを再生する場合、前記第１映像データの中で特定された前記部分区間では前記第２映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部」との一例である。

サーバ１０２は、放送局においてカメラ１０１の記録メディアに収録された報道番組などの映像・音声データの編集を行うための装置であって、受信機１０４、受信部１２１、第２記録部１２２、第２記録メディア１２３、表示部１２４および再生部３１１を備える。これによりサーバ１０２のオペレータは、カメラ１０１からリアルタイムで送られてくる映像・音声データを見ながら、高画質の放送番組に使用できるシーンをいち早く判断することができ、カメラ１０１の第１記録メディア１１３に格納された高画質の映像・音声データを入手した後、手早く編集して放送用の映像・音声データを作成することができる。

受信機１０４は、カメラ１０１からの符号化映像・音声データを受信する。
受信部１２１は、受信機１０４で受信された映像・音声データを復調および復号化する。受信部１２１は、内部にリアルタイムにビットレートを変更して符号化映像・音声データを復号化する復号化部１１９を備える。受信部１２１は、復号化部１１９によって復号化された映像・音声データを第２記録部１２２と表示部１２４とに出力する。第２記録部１２２は、受信部１２１からの映像・音声データを第２記録メディア１２３に記録する。この際に、第２記録部１２２は、映像・音声データを第２記録メディア１２３に記録するために、符号化し直すとしても良い。また、第２記録部１２２による第２記録メディア１２３への記録と並行して、表示部１２４は、復号化部１１９で復調および復号化された映像・音声データをモニタに表示する。

無線ネットワークの通信状態が最低限の画質を維持できる状態にあるときの各処理部の動作は上記の通りである。

次に、リスト作成部１１６の詳細な制御方法を、図２を用いて説明する。
図２は、通信状況検出部１１５で検出される通信状況（ビットレート）の変化と、通信状況に応じた映像・音声データの再生方法を示すプレイリストとの一例を示す図である。

ここでは時刻ｔ１から第１記録メディア１１３への映像・音声データの記録が開始され、時刻ｔ６で記録を終了したとする。つまり、時刻ｔ１から時刻ｔ６の区間の映像・音声データを、高画質での再生が可能なビットレートに記録符号化部１１７にて圧縮符号化し、第１記録メディア１１３にファイル化して記録する。そして、同時にこの区間の映像・音声データを通信状況に応じたビットレートに送信符号化部１１８にて圧縮符号化し、無線ネットワークに送信する。

この時、通信状況検出部１１５では、無線ネットワークの通信状況（伝送ビットレート）を取得し、取得した通信状況をリスト作成部１１６に通知する。リスト作成部１１６では、通信状況検出部１１５により通知される通信状況（伝送ビットレート）をモニタリングし、無線ネットワークの伝送ビットレートとあらかじめ指定されている閾値２１１とを比較することにより、第１プレイリスト２５１を作成する。

ここでの閾値２１１は、映像・音声データの圧縮符号化データを、無線ネットワークを経由してサーバ１０２に伝送する上で、最低限のデータ品質（映像・音声品質）を確保したい時のビットレートの下限値を設定することを想定している。

例えば、図２左のグラフのような状況を想定する。時刻ｔ１から時刻ｔ２の区間は、伝送ビットレートが閾値２１１よりも高く、時刻ｔ２から時刻ｔ３までの区間は、伝送ビットレートが閾値２１１よりも低い。同様に、時刻ｔ３から時刻ｔ４までの区間および時刻ｔ５から時刻ｔ６の区間は伝送ビットレートが閾値２１１よりも高く、時刻ｔ４から時刻ｔ５の区間は、伝送ビットレートが閾値２１１よりも低い。

このような状況の時、リスト作成部１１６では、時刻ｔ１から時刻ｔ６までの各時刻をそれぞれＩＮ／ＯＵＴ点とした第１プレイリスト２５１を作成する。

第１プレイリスト２５１は、送信部１１４から映像・音声データの圧縮符号化データを無線ネットワークに送信する際、送信符号化部１１８が閾値２１１よりも低いビットレートで圧縮符号化を行っていた場合、閾値２１１よりも低いビットレートで圧縮符号化を行って送信した区間の映像・音声データを特定し、特定した区間の映像・音声データを後で再送信するために使われるものである。

よって、第１プレイリスト２５１には、時刻ｔ１から時刻ｔ６までの各時刻の情報をＩＮ／ＯＵＴ点として各区間を示す情報を記録しておき、それぞれの区間のデータの再送信情報（再送信が済んだか否かを示す情報）も同時に記録しておく（図２右の第１プレイリスト２５１参照）。

一方で、サーバ１０２では、カメラ１０１の送信部１１４によって無線ネットワークに送信された映像・音声データの圧縮データを、受信機１０４の受信部１２１で受信する。受信部１２１で受信した映像・音声データの圧縮データを、復号化部１１９がリアルタイムで伸張して、表示部１２４が表示する。

一方、受信部１２１で受信し復号化部１１９で復号化した映像・音声データは、第２記録部１２２が、第２記録メディア１２３にファイル化して記録する。このときに、第２記録部１２２は、復号化された映像・音声データを再び圧縮符号化して第２記録メディア１２３に記録するとしてもよい。

時刻ｔ１から時刻ｔ６までの撮像データを記録する一連の処理の後、カメラ１０１では、第１プレイリスト２５１を解釈し、低いビットレートで圧縮符号化を行っていた区間のデータを、送信部１１４から無線ネットワークへ再送信する。

図３はデータ再送時のデータの流れを示す映像送信システムの構成図であり、この図を用いてデータの再送信を行う制御について説明する。

記録終了時点では、第１記録メディア１１３には、時刻ｔ１から時刻ｔ６の区間の映像・音声データの圧縮符号化データファイルおよび第１プレイリスト２５１ファイルが記録されている。ただし、第１記録部１１２が映像・音声データの圧縮符号化データを第１記録メディア１１３に記録する際、記録符号化部１１７は通信状況（伝送ビットレート）には依存せずに映像・音声データを圧縮符号化し、第１記録部１１２は符号化された映像・音声データを一定のビットレート（ここではデータ品質を保つ上で十分なビットレートを想定）で第１記録メディア１１３に記録するものとする。

リスト解釈部３０１は、第１記録メディア１１３に記録されている第１プレイリスト２５１を解釈して再送信情報を参照し、再送信が必要な区間の映像・音声データの圧縮符号化データをファイル形式で、送信部１１４を経由して無線ネットワークに送信する。その制御について図４を用いて説明する。

図４は、データ再送信時に、通信状況検出部１１５で検出された通信状況（ビットレート）の変化と、通信状況に応じて映像・音声データの再送信の要否を示すプレイリストの一例を示す図である。

図４の例では、時刻ｔ２から時刻ｔ３までの区間を再送区間としてみなして再送信を行う。

この時、再送信する時刻ｔ２から時刻ｔ３までの区間の映像・音声データの圧縮符号化データは、リアルタイム伝送する必要がないため、送信部１１４は通信状況に関わらず、映像・音声データの圧縮符号化データをそのままのビットレート（第１記録メディア１１３に記録されているデータのビットレート）で送信する。

時刻ｔ２から時刻ｔ３までの区間の映像・音声データの圧縮符号化データの再送信が完了した後、リスト解釈部３０１は、第１プレイリスト２５１の再送信対象区間の再送信情報を例えば、「済」に更新し、この区間を再送信対象から外す（図４の第１プレイリスト２５１参照）。

さらに、リスト解釈部３０１は、更新した第１プレイリスト２５１を送信部１１４により、無線ネットワークを経由してサーバ１０２に送信する。

上記と同様の処理により、第１記録メディア１１３内の時刻ｔ４から時刻ｔ５までの区間の映像・音声データの圧縮符号化データをサーバ１０２に再送信し、さらに第１プレイリスト２５１の時刻ｔ４から時刻ｔ５までの区間の再送信情報を、例えば、「未」から「済」に更新してサーバ１０２に送信する。

次に、上記のようにしてカメラ１０１が再送信した各データを受信した時のサーバ１０２の処理を説明する。

図３に示すように、サーバ１０２は、受信機１０４の受信部１２１で受信した映像・音声データの圧縮符号化データの再送信データを、第２記録部１２２により、第２記録メディア１２３にファイル化して記録する。このとき、受信部１２１は、受信した再送信データを、復号化部１１９で復号化することなく第２記録部１２２に受け渡す。また、同様に、受信機１０４で受信した第１プレイリスト２５１を、第２記録部１２２により、第２記録メディア１２３にファイル化して記録する。なお、１回の記録処理において、再送信区間が２つ以上に分かれた場合、サーバ１０２は、第１プレイリスト２５１も２回以上受信することになる。その場合、第２記録部１２２は、受信した第１プレイリスト２５１を最新の第１プレイリスト２５１で上書きして第２記録メディア１２３に記録する。

図５は、図４に示した例のように、カメラ１０１が、時刻ｔ２から時刻ｔ３までの区間の映像・音声データの圧縮符号化データ、および時刻ｔ４から時刻ｔ５までの区間の映像・音声データの圧縮符号化データを再送信した場合のサーバ側のデータの記録状況の一例を示す図である。すなわち第２記録メディア１２３には図５のような状態で各ファイルが記録されることになる。

すなわち、第２記録メディア１２３に記録されているファイルは、図５に示す通り、リアルタイム送信時に受信した第１リアルタイム送信ファイル５０１（図５の上段右図参照）、時刻ｔ２から時刻ｔ３までの区間のデータの再送信時に受信した第１再送信ファイル５０２（図５の中段右図参照）、時刻ｔ４から時刻ｔ５までの区間のデータの再送信時に受信した第２再送信ファイル５０３（図５の中段右図参照）、および第１プレイリストファイル５０４（図５の下段右図参照）となる。

図５下段右に示す第１プレイリストファイル５０４には、第１リアルタイム送信ファイル５０１、第１再送信ファイル５０２、および第２再送信ファイル５０３の３つの映像・音声データファイルの再生方法が記載されている。

第１プレイリストファイル５０４には、具体的には図５下段左の第１プレイリスト２５１のような内容が記載されている。

再生部３１１は第１プレイリスト２５１を参照して、時刻ｔ１から時刻ｔ６までの各時刻において、再送信情報が存在しない区間、すなわち、時刻ｔ１から時刻ｔ２までの区間、時刻ｔ３から時刻ｔ４までの区間、および時刻ｔ５から時刻ｔ６までの区間においては、再送信が行われていないと判断し、この区間は第１リアルタイム送信ファイル５０１の該当区間である第１再生対象区間５１１（図中矢印で示す区間）を再生する。

一方、第１プレイリスト２５１を参照して、時刻ｔ１から時刻ｔ６までの各時刻において、再送信情報が「済」となっている区間、すなわち、時刻ｔ２から時刻ｔ３までの区間、および時刻ｔ４から時刻ｔ５までの区間においては、再送信データを受信済と判断し、それぞれ第１再送信ファイル５０２および第２再送信ファイル５０３の該当区間である第２再生対象区間５１２を再生する。

図６は、図５に示した第１プレイリスト２５１に従ってカメラ１０１からの映像・音声データを再生した場合のビットレートを示す図である。このようにして、第１プレイリストファイル５０４に従って再生処理を行うことにより、再生時には図６のような再生ビットレートでの再生が可能となり、時刻ｔ１から時刻ｔ６の全再生対象区間において、閾値２１１よりも高いビットレート、すなわち最低限のデータ品質（映像・音声品質）を確保したい時のビットレートの下限値よりも高いビットレートにて再生を行うことが可能となる。

ただし、第１プレイリストファイル５０４において、仮に再送信情報が「未」となっている区間が存在した場合、その区間のデータは再送信すべきデータであるにも関わらず、受信側ではその再送信データの受信が完了していないことを示す。よって、この場合は、再送信情報が存在しない区間と同様の処理を行う。

例えば、図４右の第１プレイリスト２５１のような状況を考える。すなわち、再送信の区間が時刻ｔ２から時刻ｔ３までの区間、および時刻ｔ４から時刻ｔ５までの区間の２区間存在するにも関わらず、前者の区間、すなわち時刻ｔ２から時刻ｔ３までの区間のみが再送信「済」であり、この区間のみの再送信を行ったような状況を考える。

図４の状況下では、第１プレイリスト２５１では、時刻ｔ２から時刻ｔ３までの区間の再送信情報は「済」となっているが、時刻ｔ４から時刻ｔ５までの区間の再送信情報は「未」となっている。この場合、図５中段右の第２再送信ファイル５０３は受信していないことになるので、時刻ｔ４から時刻ｔ５までの区間の再生対象区間は第１リアルタイム送信ファイル５０１の該当区間となる。

この仕組みを用いることにより、全再送信候補の区間のデータの全てあるいは一部を受信していない状況下であっても、再生（閲覧）を行うことが可能となる。つまり、再送信の状況がどのような場合であっても、再生（閲覧）を行うには、プレイリストファイルに従うだけでよく、受信側（サーバ１０２側）での制御が単純となる。

なお、第１記録部１１２は映像・音声データを圧縮符号化して記録する機能を有しているが、その圧縮符号化方式はＭＰＥＧ、ＤＶ、ＤＶＣＰＲＯ、ＨＤＶ，Ｈ．２６４等、任意の圧縮方式を用いてもよい。

また、送信部１１４の送信符号化部１１８は映像・音声データを状況に応じてビットレートを変更しながら圧縮符号化を行う機能を有するが、その圧縮符号化方式はＭＰＥＧ、ＤＶ、ＤＶＣＰＲＯ、ＨＤＶ，Ｈ．２６４等、任意の圧縮方式を用いてもよい。

また、第１記録メディア１１３および第２記録メディア１２３は、ＨＤＤ、ＤＶＤ、ＢＤ、フラッシュメモリ等、ランダムアクセス可能なメディアであればその種類は問わない。

また、閾値２１１はユーザの判断で任意で設定できる仕組みであってもよく、または機器で固定の値としてもよい。

また、時刻ｔ１から時刻ｔ６までの区間を示す情報は、必ずしも時刻である必要はなく、タイムコード等でもよく、映像フレームのオフセット値、ＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）等、映像フレーム位置を判別するための情報であればその種類は問わない。

また、本実施の形態では、第１プレイリスト２５１の形式は、図４〜図６に示すような形式にしたが、再生区間を特定でき、再送信の状況を確認できる情報、すなわち、再送信不要、再送信必要だが未再送信、再送信完了済のような情報が特定できれば、その形式は問わない。

（実施の形態２）
実施の形態１では、カメラ１０１からサーバ１０２にデータを伝送する処理において、リアルタイム送信を行う時の基本的な制御方法、および再送信を行う時の基本的な制御方法について述べた。本実施の形態では、特にリスト作成部１１６の詳細制御方法について説明する。具体的には、映像・音声データの重要区間をカメラマンがカメラ１０１に備えられる「重要釦」などを押すことによって特定し、カメラ１０１は「重要釦」などが押されたことを検出することによって重要区間の指定を取得する。カメラ１０１は、取得した重要区間の指定に従って、重要区間における最低ビットレートの閾値を高くする。このようなカメラ１０１の制御方法について説明する。実施の形態１と構成上異なる点は、（１）カメラ１０１に重要釦、重要解除釦、リモート釦などを備える点、および（２）リスト作成部１１６が閾値２１１及び重要閾値７１１を記憶しており、これらの釦が押されることによって重要区間が特定された時には、リスト作成部１１６は重要区間での第１プレイリスト２５１のＩＮ／ＯＵＴ区間を重要閾値７１１に基づいて区切る点である。

実施の形態１では、リスト作成部１１６では、閾値２１１、すなわち最低限のデータ品質（映像・音声品質）を確保したい時のビットレートの下限値として、ユーザによって設定されたユーザ設定値または機器ごとにあらかじめ定められた機器設定値を用いていた。

本実施の形態では、無線ネットワークの通信状況（伝送ビットレート）を監視することにより、閾値２１１を自動的に決定する。

例えば、カメラ１０１による記録処理を開始する前に、図１に示した通信状況検出部１１５により、無線ネットワークの通信状況を定常的に監視しておく。そして、記録処理を開始する時に、無線ネットワークの通信状況（伝送ビットレート）に応じて閾値２１１を決定する。

カメラ１０１への電源投入後、記録処理の開始前の一定期間の通信状況（伝送ビットレート）の監視により、例えば定常的なビットレート（平均ビットレート）の８０％のビットレートを閾値２１１とする。つまり、定常的な通信状況でのビットレートが１０［Ｍｂｐｓ］だった場合、その８０％の８［Ｍｂｐｓ］を閾値２１１として設定する。

または、記録処理の開始前の一定期間の通信状況（伝送ビットレート）の監視により、最低ビットレートの値をそのまま閾値２１１に設定してもよく、または、安全のため、最低ビットレートの８０％のビットレートを閾値２１１に設定してもよい。

また、リスト作成部１１６にて、実施の形態１では、閾値２１１よりも低いビットレートかどうかで第１プレイリスト２５１のＩＮ／ＯＵＴ区間を区切ったが、本実施の形態では、閾値２１１に加えて、撮影している映像・音声データの区間的な重要度の情報を考慮してＩＮ／ＯＵＴ区間を区切り、再送信情報を設定する。ここで、区間的な重要度の情報とは、例えば、カメラ１０１に備えられた重要釦が押されていた時間的区間を示す情報をいう。

図７は、重要釦と重要解除釦を用いて重要区間を設定した場合の閾値２１１、重要閾値７１１および第１プレイリスト２５１の関係を示す図である。以下では、図７を用いて重要度の情報を考慮したリスト作成部１１６の制御について説明する。

ここでは、特に重要なシーンを、撮影中に動的に指定することにより、その重要なシーンの最低ビットレート、すなわち重要閾値７１１が通常の閾値２１１に比べて高くなるようにする。つまり、閾値として２種類の値を用いて第１プレイリスト２５１のＩＮ／ＯＵＴ区間を決定する。なお、ここでは、重要閾値７１１の値をリスト作成部１１６が記憶しているとしたが、あらかじめ定められた一定値であってもよいし、リスト作成部１１６により動的に決定される閾値２１１よりも高い値に決定されるよう計算式を定めておくとしても良い。例えば、それぞれの閾値を算出するための計数を記憶しておくことなどである。すなわち、閾値２１１を平均ビットレートの８０％とし、重要閾値７１１を平均ビットレートの９０％とする場合には、（閾値２１１）＝８０％、（重要閾値７１１）＝９０％などの値を記憶しておく。

図７のように、映像・音声データの撮影中に、例えばカメラマンが重要なシーンに入ったと判断した場合、カメラ１０１に備えられた図指しない重要釦を押下する。すると重要釦が押下された以降の映像・音声データはリスト作成部１１６により重要シーンと判断される。これにより、記録中のデータの伝送ビットレートが、あらかじめ設定していた重要閾値７１１を下回った時、すなわち時刻ｔ２'にてＩＮ／ＯＵＴ区間が設定される。つまり、重要区間以外の区間では閾値２１１に基づいて設定される時刻ｔ２にてＩＮ／ＯＵＴ点が設定されないようになる。

一方、重要なシーンを撮影中、例えばカメラマンが重要なシーンが終了した、と判断した場合、カメラ１０１に備えられた図指しない重要解除釦を押下する。すると、重要解除釦が押下された以降の映像・音声データはリスト作成部１１６により重要シーンでないと判断され、記録中のデータの伝送ビットレートが、あらかじめ設定していた閾値２１１を下回った時に第１プレイリスト２５１のＩＮ／ＯＵＴ区間を分けるよう制御される。これは、すなわち元の制御に戻すということである。

この時、図７のように、重要区間にて、記録中のデータの伝送ビットレートが重要閾値７１１より低く、かつ閾値２１１よりも高い場合、すなわち時刻ｔ３'のような状況の時に、重要解除釦が押下された場合、その瞬間に重要シーンが解除されることになるため、時刻ｔ３'でＩＮ／ＯＵＴ点が設定される。つまり、時刻ｔ３にてＩＮ／ＯＵＴ点が設定されないようになる。

また、上述した例では、重要シーンの判定をカメラマンの判断によって手動で行ったが、撮影中の映像・音声データの所定のパラメータから自動的に重要シーンを判定してもよい。

例えば、撮影の過程でズームアップした時は自動的に重要シーンと判定してもよく、あるいは音声のボリュームが上がった時（歓声が上がった時等）、顔認識機能のあるカメラだった場合は、顔認識を検知した時、などに自動的に重要シーンと判定してもよい。

上述した制御を行うことにより、様々な状況に応じて、第１記録メディア１１３に記録されていた高画質な映像・音声データの再送信区間を変更することが可能となる。

なお、本実施の形態では、閾値を決める際、通信状況（伝送ビットレート）の定常的なビットレート（平均ビットレート）または最低ビットレートの８０％を閾値２１１に設定することを例にしたが、その％値は任意に決定してよい。

また、本実施の形態では、撮影中の映像・音声データにおいて、重要シーンと判断して重要釦を押下するのはカメラマンであることを例にしたが、現場にいるカメラマン以外の第三者がそれを判断し、カメラ１０１に備えられる図指しない例えば、赤外線や中距離無線などによるリモート釦等を用いて、重要シーンの開始・終了を制御するような仕組みにしてもよい。

また、図指しない重要釦と図指しない重要解除釦は同一の釦で開始・終了をトグルとして動作してもよく、またはそれぞれの釦が別々の釦であってもよい。

また、本実施の形態では、閾値２１１および重要閾値７１１の２種類の閾値を用いてＩＮ／ＯＵＴ点の制御を行ったが、３種類以上の閾値を設定し、状況に応じてＩＮ／ＯＵＴ点の判断の基準となる閾値を用いて制御してもよい。例えば、重要釦、重要解除釦の他に、重要レベル設定釦などを設け、重要釦によって設定された重要区間ごとに、重要レベルに応じた異なる閾値を用いて制御すればよい。

また、本実施の形態では、重要シーンの自動判定のパラメータとして、ズームレベル、ボリュームレベル、顔認識等を例にしたが、その他の映像・音声パラメータから自動的に重要シーンと判定する仕組みでもよい。この場合も、自動判定のパラメータに応じて異なる重要レベルを設定し、重要シーンの重要レベルに応じた異なる閾値を用いて制御するようにしてもよい。ここで、リスト作成部１１６は、「取得した前記映像データ内で、特定の条件を満足する重要区間と、前記重要区間の重要度合いとを判定する重要区間判定部」および「前記重要区間の前記重要度合いに応じて、前記重要度合いが高いほど大きい値をとる閾値と、前記伝送路の伝送ビットレートとを比較して、前記重要区間内において前記重要度合いに応じた前記閾値よりも前記伝送ビットレートが下回る区間を前記部分区間として特定する前記特定部」の一例である。

（実施の形態３）
本実施の形態では、無線ネットワークのデータ伝送が一時的に停止してしまった場合、つまり、一時的に伝送ビットレートが０［Ｍｂｐｓ］になってしまった時の制御を説明する。本実施の形態において、実施の形態１と異なる点は、無線ネットワークのデータ伝送が停止している間、（１）サーバ１０２の表示部１２４が最後に受信した映像フレームを静止画像として表示すること、（２）サーバ１０２の第２記録部１２２が、カメラ１０１からのリアルタイム送信ファイルの途切れ部分をダミーデータで補間し、これによって作成した第２リアルタイム送信ファイル８０１を第２記録メディア１２３に記録することである。

図８は、無線ネットワークのデータ伝送が一時的に停止した時のリアルタイム送信時のビットレート変化と、それに対する再送信ファイルおよび第１プレイリスト２５１との関係を示す図である。

図８上段左のグラフに示すように、例えば、時刻ｔ３''から一時的に無線ネットワークが停止し、時刻ｔ４''から無線ネットワークがデータ伝送を再開した場合を想定する。

時刻ｔ３''から時刻ｔ４''の区間はデータ伝送が不可能なため、撮影中のリアルタイム送信において、サーバ１０２側で映像・音声データが受信できない区間が発生する。

その場合、図１に示したサーバ１０２内の表示部１２４では、受信部１２１からの映像・音声データ供給が一時的に止まるため、それまでに受信することのできた最後の映像フレーム、すなわち時刻ｔ３''の映像フレームにてＳＴＩＬＬ（静止）画像を表示する。

その後、無線ネットワークがデータ伝送を再開した時に、表示部１２４では、受信部１２１からの映像・音声データ供給が再開されるため、引き続き映像・音声データを再生表示する。

一方、同様に、第２記録部１２２においても、受信部１２１からの映像・音声データ供給が一時的に止まるため、それまでに受信することのできた最後の映像フレームデータ、すなわち時刻ｔ３''の映像フレームデータ（または受信することのできた最後のＧＯＰデータ）を用いてダミーデータを作り出し、作り出したダミーデータで途切れ部分を補間し第２リアルタイム送信ファイル８０１の作成を継続する。

その後、無線ネットワークがデータ伝送を再開した時に、第２記録部１２２では、受信部１２１からの映像・音声データ供給が再開されるため、ダミーデータによる補間をやめ、受信部１２１からの映像・音声データを内容とする第２リアルタイム送信ファイル８０１の記録を継続する。

その時、リスト作成部１１６は、実施の形態１の場合と同様にして第１プレイリスト２５１を生成する。すなわち、無線ネットワークの通信状況（伝送ビットレート）が閾値２１１を下回っている区間では、第３再送信ファイル８０２（図８中段右図参照）が再送されるように第２プレイリストファイル８０４（図８下段右図参照）を作成する。具体的に、ＩＮ／ＯＵＴ点を示すプレイリストファイルとしては、図８の第１プレイリスト２５１の示す通り、データ伝送が一時的に停止していた区間、すなわち時刻ｔ３''から時刻ｔ４''までの区間を含めた、閾値２１１を下回る低ビットレート区間、すなわち時刻ｔ２から時刻ｔ５までの全区間をひとつの区間としてＩＮ／ＯＵＴ点を設定する。よって、データ再送信時に第２記録部１２２では、図８の第３再送信ファイル８０２のようなデータファイルを、第２記録メディア１２３に記録する。

よって、再送信後のサーバ１０２の再生部３１１での再生区間としては、第２リアルタイム送信ファイル８０１の第３再生対象区間８１１（時刻t１から時刻t２まで、および時刻t５から時刻t６まで）、第３再送信ファイル８０２が第４再生対象区間８１２（時刻t２から時刻t５まで）となる。

上述した制御により、無線ネットワークのデータ伝送が一時的に停止した場合でも、無線ネットワークの伝送ビットレートが閾値２１１を下回る区間の映像・音声データの再送信を行うことにより、サーバ１０２側では高品質な映像・音声データを再生（閲覧）することが可能となる。

（実施の形態４）
上記実施の形態１〜３では、カメラ１０１が映像・音声データの記録処理終了後、サーバ１０２に対して、再送信対象の映像・音声データを自動的に再送信していたが、本実施の形態では、再送信すべきデータをユーザが選択する場合について説明する。本実施の形態４が実施の形態１と異なる点は、カメラ１０１が（１）ＩＮ／ＯＵＴ区間の先頭映像フレームのサムネイルを表示する表示部を備えること、（２）サムネイルで特定される区間の映像・音声データの再送信を指示するための再送信釦を備えること、（３）リスト解釈部３０１が、再送信ボタンで指示された再送信ファイルのみを再送信することである。

例えば、図２のように、カメラ１０１が映像・音声データの記録処理終了後、再送信対象区間が、時刻ｔ２から時刻ｔ３までの区間および時刻ｔ４から時刻ｔ５までの区間の２箇所存在したとする。

この時、カメラ１０１内の図指しない表示部により、それぞれの再送信候補の区間のサムネイル、すなわち、時刻ｔ２から時刻ｔ３までの区間のシーンの先頭映像フレームのサムネイル、および時刻ｔ４から時刻ｔ５までの区間の先頭映像フレームのサムネイルを、図指しない表示部の液晶画面等に表示する。

このサムネイル画面から、それぞれの対象区間の映像データを再生することにより、どのようなシーンが再送信候補のデータになったのかを、ユーザが知ることができる。

再送信候補のシーンをユーザが確認し、再送信が必要なデータ（すなわち重要なデータ）であると判断した場合、図指しない再送信釦を押下することにより、所定の区間の映像・音声データをサーバ１０２に向けて再送信する。

例えば、図２において、時刻ｔ２から時刻ｔ３までの区間のシーンは重要なシーンであり、時刻ｔ４から時刻ｔ５までの区間のシーンはそれほど重要でないシーンだった場合、ユーザは意図的に時刻ｔ２から時刻ｔ３までの区間のシーンのみを再送信する。

上述した方法により、映像・音声データの撮影終了後、ユーザが必要と判断した再送信候補のデータのみを伝送することが可能となるため、無駄なデータ伝送を抑制することができる。

なお、本実施の形態では、再送信候補の区間のシーンのサムネイルとしては、先頭映像フレームのものとしたが、先頭映像フレームである必要はなく、該当区間のシーン内の映像フレームであれば、任意でよい。また、例えば、ズームアップされたフレーム、顔が画像認識されたフレーム、音声のボリュームが上がったときのフレームなど、実施の形態２で重要度の高さを自動的に判定可能と説明したフレームを、サムネイルとして用いてもよい。

また、本実施の形態では、サムネイルを図指しない液晶画面に表示するとしたが、サムネイルが表示できるものであれば液晶画面でなくとも任意でよい。

また、本実施の形態では、図指しない再送信釦をユーザが押下することにより、所定の再送信区間のデータの再送信を行ったが、再送信を行うためのトリガを与える機能であれば再送信釦の押下でなくとも任意でよい。

また、本実施の形態では、再送信候補の区間のデータを再送信する際、１回の送信に１つの区間のみのデータの再送信を行ったが、複数の再送信対象区間が存在した場合、複数の再送信区間のデータを同時に再送信するような仕組みとしてもよい。

（実施の形態５）
実施の形態１〜４では、カメラ１０１が映像・音声データの記録処理終了後、同じカメラ１０１からサーバ１０２に対してデータを再送信していたが、本実施の形態では、カメラ１０１以外の別の機器から、サーバ１０２に対して再送信を行う。本実施の形態５が実施の形態１と異なる点は、（１）リスト作成部１１６はプレイリストに再送信データおよび当該プレイリストの送信先のアドレスを示す送信ＩＤを書き込むこと、（２）図示しない編集機がリスト作成部１１６によって作成されたプレイリストに書き込まれている送信ＩＤを解釈して、送信ＩＤで特定される送信先に、再送信データファイルおよび当該プレイリストのファイルを送信することである。

例えば、図２のように、カメラ１０１が映像・音声データの記録処理終了後、再送信対象区間が、時刻ｔ２から時刻ｔ３までの区間および時刻ｔ４から時刻ｔ５までの区間の、２箇所存在したとする。

この時、第１記録メディア１１３上には、映像・音声データおよび、プレイリストが記録されている。

図９は、カメラ１０１とは異なる機器から再送信データファイルおよびプレイリストファイルを送信する場合の第２プレイリスト９５１の一例を示す図である。ここで、プレイリストには、例えば、図９の第２プレイリスト９５１に示すように、再送信先のＩＤ（送信ＩＤ）として、例えばＩＰアドレス「１１．２２．３３．４４」を記載しておくことにより、再送信を行う際の送信先が特定できる。

第１記録メディア１１３が着脱可能な記録メディアである場合、再送信を行う前に、第１記録メディア１１３をカメラ１０１から取り外し、図指しない編集機に第１記録メディア１１３を装着する。

そして、図指しない編集機が、第１記録メディア１１３上に記録されている第２プレイリスト９５１の再送信情報を参照し、再送信が「未」となっている区間が存在した場合は、その区間の映像・音声データをサーバ１０２に再送信する。

上述した手法により、カメラ１０１にて映像・音声データの撮影終了後、すぐに次の別のシーンを撮影したい場合に、カメラ１０１から第１記録メディア１１３を取り出し、別の記録メディアをカメラ１０１に装着することにより、すぐに次のシーンの撮影を開始することが可能となる。

また、同時に、カメラ１０１から取り出した第１記録メディア１１３を図指しない編集機に装着し、所定のデータの再送信を行うことが可能となる。

なお、本実施の形態では、送信ＩＤが記載されている第２プレイリスト９５１には、再送信先を特定するためのＩＤとしてＩＰアドレスを用いたが、送信先を特定することができる情報であればどのようなアドレスであってもよい。

また、本実施の形態では、カメラ１０１から取り外された第１記録メディア１１３を、図指しない編集機に装着したが、編集機である必要ではなく、本発明で示す再送信機能を有する機器であればどのような装置であってもよい。

（実施の形態６）
実施の形態１〜５では、サーバ１０２に対して所定の区間の映像・音声データを再送信する際、送信側にて再送信する映像・音声データ区間を選択していたが、本実施の形態では、受信側、すなわちサーバ１０２から再送信して欲しい映像・音声データ区間を指定する場合について説明する。この場合、サーバ１０２側およびカメラ１０１側に、新たな構成が必要である。具体的には、サーバ１０２側では（１）再送信してほしい映像・音声データの区間を指定するためのプレイリストを作成する再送信要求プレイリスト作成部と、（２）作成された再送信要求プレイリストをカメラ１０１に送信する送信部とが必要である。カメラ１０１側では、（１）サーバ１０２から再送信要求プレイリストを受信する受信部と、（２）リスト解釈部３０１の新たな機能として再送信要求プレイリストを解釈して、要求された区間の映像・音声データを第１記録メディア１１３から読みだし、サーバ１０２に送信する機能が必要である。

ここで、例えば、図２のように、カメラ１０１が映像・音声データの記録処理終了後、再送信対象区間が、時刻ｔ２から時刻ｔ３までの区間および時刻ｔ４から時刻ｔ５までの区間の２箇所存在したとする。

この時、時刻ｔ２から時刻ｔ３までの区間および時刻ｔ４から時刻ｔ５までの区間の映像・音声データは再送信を行っていないため、サーバ１０２側でこれらの区間を閲覧した場合、所定のビットレート、すなわち、伝送ビットレートが閾値２１１よりも低い映像・音声データしか確認できないことになる。

ここで、サーバ１０２側にて編集作業を行う過程で、上記の所定のビットレートよりも低い区間の映像・音声データに対し、高品質データが必要だと判断した場合、すなわち、上記の所定のビットレートよりも低い区間の映像・音声データの再送信が必要と判断した場合に、送信側、すなわちカメラ１０１に対して再送信要求を行う。なお、この場合、サーバ１０２側でリアルタイム送信ファイルを視聴したうえで、高品質データが必要だと判断し、再送信要求を行うのであるから、カメラ１０１側では無線ネットワークの伝送ビットレートが、閾値２１１や、重要閾値７１１を上回っている区間であっても再送信するものとする。

図１０は、サーバ１０２からカメラ１０１に再送信要求を行う際の再送信区間を示す再送信要求プレイリスト１００１を示す図である。図２に示すように、時刻ｔ２から時刻ｔ３までの区間の映像・音声データの再送信を要求する場合、例えば図１０に示すような再送信要求プレイリスト１００１を、サーバ１０２からカメラ１０１に送信する。

サーバ１０２から送信された再送信要求プレイリスト１００１を、カメラ１０１が受信し、第１記録部１１２により第１記録メディア１１３に記録する。

リスト解釈部３０１は、第１記録メディア１１３に記録された再送信要求プレイリスト１００１を解釈し、再送が必要な区間を特定し、実施の形態１〜５の要領で、所定の区間の映像・音声データをサーバ１０２に送信する。

上述した制御を行うことにより、受信側（サーバ１０２）から送信側（カメラ１０１）に対して所定区間の映像・音声データの再送要求を行うことが可能となる。

なお、本実施の形態では、再送信要求プレイリスト１００１としては図１０に示すようなプレイリストを用いたが、再送信要求の区間を示すことができる形式であれば、任意の形式でよく、または第１プレイリスト２５１と等価の形式であってもよい。

（実施の形態７）
実施の形態１〜６では、映像・音声データを再送信する際に、所定の区間の単位で再送信を行っていたが、本実施の形態では、任意の区間の単位で映像・音声データの再送信を行う。すなわち、実施の形態１〜６では時刻ｔ１から時刻ｔ６までの区間について映像・音声データを記録し、記録した全区間の映像・音声データを対象として無線ネットワークの伝送ビットレートに応じて再送信を行ったが、本実施の形態７では、映像・音声データを記録した一部区間について当該区間内の全映像・音声データの再送信を行う。ただし、当該区間内において伝送ビットレートが閾値２１１を下回っている区間の映像・音声データと、閾値２１１以上である区間の映像・音声データとを別のファイルにして再送信する。さらに、当該一部区間以外の区間では、無線ネットワークの伝送ビットレートに応じて再送信を行う。

この場合、カメラ１０１側で任意の区間（時刻ｔａから時刻ｔｂまで）を設定する場合には、カメラ１０１に区間（時刻ｔａから時刻ｔｂまで）を指定するための区間開始釦および区間終了釦などを備え、リスト作成部１１６は時刻ｔａおよび時刻ｔｂをＩＮ/ＯＵＴ点とするプレイリストを作成するものとする。この釦は、１つの釦でトグル動作をするものであっても良い。また、サーバ１０２側で任意の区間を設定する場合には、実施の形態６と同様の構成が必要である。具体的には、サーバ１０２側では（１）再送信してほしい映像・音声データの任意区間を指定するためのプレイリストを作成する再送信要求プレイリスト作成部と、（２）作成された再送信要求プレイリストをカメラ１０１に送信する送信部とが必要である。カメラ１０１側では、（１）サーバ１０２から再送信要求プレイリストを受信する受信部と、（２）リスト解釈部３０１の新たな機能として再送信要求プレイリストを解釈して、要求された区間の映像・音声データを第１記録メディア１１３から読みだし、サーバ１０２に送信する機能が必要である。

図１１は、設定された任意の区間（時刻ｔａから時刻ｔｂまで）と無線ネットワークの伝送ビットレートとの関係、およびこの場合の再送信ファイルを示す第３プレイリスト１１５１の例を示す図である。例えば、カメラ１０１が映像・音声データの記録処理終了後、図２のように、時刻ｔ１から時刻ｔ６までのような区間に分かれていたとする。

この時、図１１に示すように、任意の区間（時刻ｔａから時刻ｔｂまで）を設定する。
送信側、すなわちカメラ１０１側から再送信しようとした場合（実施の形態１〜５）には、カメラ１０１内で時刻ｔａおよび時刻ｔｂを設定する。

一方、受信側、すなわちサーバ１０２側から再送信要求を行う場合（実施の形態６）には、サーバ１０２側で時刻ｔａおよび時刻ｔｂを設定する。

この時、時刻ｔａと時刻ｔｂの間には、時刻ｔ２および時刻ｔ３が存在するものとする。

この時、第１プレイリスト２５１を、時刻ｔａおよび時刻ｔｂを考慮した図１１に示す第３プレイリスト１１５１のように書き換える。

そして、時刻ｔａから時刻ｔ２までの区間、時刻ｔ２から時刻ｔ３までの区間、および時刻ｔ３から時刻ｔｂまでの各区間を、実施の形態１〜６の要領でそれぞれ別のファイルとして、対応するプレイリストを添付し、高画質の映像・音声データを再送信する。

上述した制御を行うことにより、記録した全映像・音声データの任意の区間を再送信することが可能となる。

なお、上記実施の形態７では、時刻ｔａから時刻ｔ２までの区間、時刻ｔ２から時刻ｔ３までの区間、および時刻ｔ３から時刻ｔｂまでの各区間をそれぞれ別のファイルとして取り扱うとしたが、時刻ｔａから時刻ｔｂまでの区間を１つのファイルとして再送信ファイルおよび第３プレイリスト１１５１を作成するとしても良い。

また、上述した例では、任意の区間の指定をカメラマンのボタン操作を検出することによって取得したが、撮影中の映像・音声データの所定のパラメータから自動的に重要シーンを検出し、任意区間の指定を取得するとしてもよい。

例えば、撮影の過程でズームアップした時、あるいは音声のボリュームが上がった時（歓声が上がった時等）、顔認識機能のあるカメラだった場合に顔認識を検知した時、などに自動的に任意区間の指定を取得するとしてもよい。ここで、リスト作成部１１６およびリスト解釈部３０１は、「第２映像データを再生すべき区間を特定する情報を取得し、取得した区間を、前記部分区間として特定する前記特定部」の一例である。

なお、ブロック図（図１、図３など）の各機能ブロックは典型的には集積回路であるＬＳＩとして実現される。これらは個別に１チップ化されても良いし、一部又は全てを含むように１チップ化されても良い。例えばメモリ以外の機能ブロックが１チップ化されていても良い。

ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。

また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用しても良い。

さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。

また、各機能ブロックのうち、符号化または復号化の対象となるデータを格納する手段だけ１チップ化せずに別構成としても良い。

本発明は、映像・音声データの撮影時に、無線ネットワークを経由したリアルタイム伝送を必要とするようなシステム、その中でも高品質なデータ伝送を必要とするシステム、具体的には、放送、特に素早い編集を要する報道番組などの放送用・業務用カメラシステムに特に有効である。

本発明の映像送信装置を含む映像送信システムの構成およびデータの流れを示すブロック図である。 通信状況検出部で検出される通信状況（ビットレート）の変化と、通信状況に応じた映像・音声データの再生方法を示すプレイリストとの一例を示す図である。 データ再送時のデータの流れを示す映像送信システムの構成図である。 データ再送信時に、通信状況検出部で検出された通信状況（ビットレート）の変化と、通信状況に応じて映像・音声データの再送信の要否を示すプレイリストの一例を示す図である。 図４に示した例のように、カメラが、時刻ｔ２から時刻ｔ３までの区間の映像・音声データの圧縮符号化データ、および時刻ｔ４から時刻ｔ５までの区間の映像・音声データの圧縮符号化データを再送信した場合のサーバ側のデータの記録状況の一例を示す図である。 図５に示した第１プレイリストに従ってカメラからの映像・音声データを再生した場合のビットレートを示す図である。 重要釦と重要解除釦を用いて重要区間を設定した場合の閾値、重要閾値および第１プレイリストの関係を示す図である。 無線ネットワークのデータ伝送が一時的に停止した時のリアルタイム送信時のビットレート変化と、それに対する再送信ファイルおよび第１プレイリストとの関係を示す図である。 カメラとは異なる機器から再送信データファイルおよびプレイリストファイルを送信する場合の第２プレイリストの一例を示す図である。 サーバからカメラに再送信要求を行う際の再送信区間を示す再送信要求プレイリストを示す図である。 設定された任意の区間（時刻ｔａから時刻ｔｂまで）と無線ネットワークの伝送ビットレートとの関係、およびこの場合の再送信ファイルを示す第３プレイリストの例を示す図である。

符号の説明

１０１ カメラ
１０２ サーバ
１０３ 送信機
１０４ 受信機
１１１ 撮像部
１１２ 第１記録部
１１３ 第１記録メディア
１１４ 送信部
１１５ 通信状況検出部
１１６ リスト作成部
１１７ 記録符号化部
１１８ 送信符号化部
１２１ 受信部
１２２ 第２記録部
１２３ 第２記録メディア
２１１ 閾値
２５１ 第１プレイリスト
３０１ リスト解釈部
３１１ 再生部
５０１ 第１リアルタイム送信ファイル
５０２ 第１再送信ファイル
５０３ 第２再送信ファイル
５０４ 第１プレイリストファイル
５１１ 第１再生対象区間
５１２ 第２再生対象区間
７１１ 重要閾値
８０１ 第２リアルタイム送信ファイル
８０２ 第３再送信ファイル
８０４ 第２プレイリストファイル
８１１ 第３再生対象区間
８１２ 第４再生対象区間
９５１ 第２プレイリスト
１００１ 再送信要求プレイリスト
１１５１ 第３プレイリスト

Claims (6)

1. 取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置であって、
   映像データを取得する映像データ取得部と、
   取得した前記映像データを、第１映像データと、前記第１映像データよりも画質の高い第２映像データとに変換する映像データ変換部と、
   前記第１映像データを、伝送路を介して前記受信装置へ送信する第１映像データ送信部と、
   前記第１映像データの前記送信と並行して、前記第２映像データを記録媒体に記録する映像データ記録部と、
   前記第１映像データ中の１つの部分区間を特定する特定部と、
   前記第２映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、１つのファイルとして前記受信装置に送信する第２映像データ送信部と、
   前記第１映像データを再生する場合、前記第１映像データの中で特定された前記部分区間では前記第２映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、
   生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部と
   を備える映像送信装置。
2. 前記映像送信装置は、
   前記伝送路の通信状況を示す伝送ビットレートを検出し、検出された伝送ビットレートから、前記部分区間を特定するための閾値を動的に決定する通信状況検出部を備え、
   前記特定部は、前記伝送路の伝送ビットレートが前記通信状況検出部によって決定された前記閾値を下回った時点を前記部分区間の始点と特定し、前記伝送ビットレートが前記閾値以上となった時点を前記部分区間の終点と特定する
   請求項１記載の映像送信装置。
3. 前記映像送信装置は、
   取得した前記映像データ内で、特定の条件を満足する重要区間と、前記重要区間の重要度合いとを判定する重要区間判定部を備え、
   前記特定部は、前記重要区間の前記重要度合いに応じて、前記重要度合いが高いほど大きい値をとる閾値と、前記伝送路の伝送ビットレートとを比較して、前記重要区間内において前記重要度合いに応じた前記閾値よりも前記伝送ビットレートが下回る区間を前記部分区間として特定する
   請求項１記載の映像送信装置。
4. 前記特定部は、第２映像データを再生すべき区間を特定する情報を取得し、取得した区間を、前記部分区間として特定する
   請求項１記載の映像送信装置。
5. 取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信方法であって、
   映像データを取得する映像データ取得ステップと、
   取得した前記映像データを、第１映像データと、前記第１映像データよりも画質の高い第２映像データとに変換する映像データ変換ステップと、
   前記第１映像データを、伝送路を介して前記受信装置へ送信する第１映像データ送信ステップと、
   前記第１映像データの前記送信と並行して、前記第２映像データを記録媒体に記録する映像データ記録ステップと、
   前記第１映像データ中の１つの部分区間を特定する特定ステップと、
   前記第２映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、１つのファイルとして前記受信装置に送信する第２映像データ送信ステップと、
   前記第１映像データを再生する場合、前記第１映像データの中で特定された前記部分区間では前記第２映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成ステップと、
   生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信ステップと
   を含む映像送信方法。
6. 取得した映像を記録媒体に記録するとともに、伝送路を介して受信装置へ送信する映像送信装置のためのプログラムであって、コンピュータを
   映像データを取得する映像データ取得部と、取得した前記映像データを、第１映像データと、前記第１映像データよりも画質の高い第２映像データとに変換する映像データ変換部と、前記第１映像データを、伝送路を介して前記受信装置へ送信する第１映像データ送信部と、前記第１映像データの前記送信と並行して、前記第２映像データを記録媒体に記録する映像データ記録部と、前記第１映像データ中の１つの部分区間を特定する特定部と、前記第２映像データ中の、前記特定部によって特定された前記部分区間に対応する部分区間の映像データを、１つのファイルとして前記受信装置に送信する第２映像データ送信部と、前記第１映像データを再生する場合、前記第１映像データの中で特定された前記部分区間では前記第２映像データの前記ファイルを再生すべきことを示す再生順序情報を生成する再生順序情報生成部と、生成した前記再生順序情報を前記受信装置に送信する再生順序情報送信部として機能させるためのプログラム。

Images