JP2012054733A - 再生装置および再生方法 - Google Patents

Abstract

【課題】３Ｄ表示映像を受信する装置において再生を行なう際の使い勝手を向上する。
【解決手段】再生速度の切替に応じて、制御部は再生制御部、デコード処理部及び出力処理部を制御して３Ｄ表示と２D表示を適宜切り替える。また入力ストリームが部分的に３Ｄ表示可能である場合はストリームに含まれる３Ｄ表示可否を示す情報に応じて３Ｄ表示と２D表示を適宜切り替える。
【選択図】図３

Description

技術分野は、デジタル映像情報を再生する再生装置に関する。

上記技術分野について、特許文献１には、「再生時一時停止した場合でも立体映像を鑑賞することができる立体映像表示システムを提供する」ことを課題とし、解決手段として「左右の視差をもって時分割して記録された左右のビデオ信号を再生する映像再生装置１０１と、映像再生装置１０１により再生された左右のビデオ信号をそれぞれ記録するメモリ１０５、１０６と、この各メモリ１０５、１０６に記録された左右のビデオ信号を所定周期で切り替えて出力するためのスイッチ１０７と、前記記録された左右のビデオ信号の再生が一時停止されたときにはメモリ１０５、１０６への書き込みを禁止する禁止する制御を行う制御部１０９とを備え、スイッチ１０７により切り替えて出力されたビデオ信号に基づいて表示を行う」ことが記載されている。

特開２００２−９５０１７号公報

近年３Ｄ（三次元）での映像を家庭でも楽しみたいという要求が高まっており、Ｂｌｕ−ｒａｙ（登録商標）ディスクプレイヤーによる３Ｄコンテンツの再生等が実施されている。

また、放送波で３Ｄコンテンツを送出し、受信機で３Ｄ映像を表示、さらには放送受信機器に記録媒体を搭載、あるいは外付けで付加し、記録媒体に記録した３Ｄコンテンツを再生することも想定される。

ここで、記録媒体からの３Ｄコンテンツの再生であったとしても、従来のコンテンツの再生（２Dコンテンツの再生）におけるユーザの使い勝手を維持、向上できることが好ましい。

特許文献１では、立体映像の表示について、一時停止時であっても立体映像の表示を維持する方法が開示されている。しかし、特許文献１には、記録媒体から３Ｄ映像を含むコンテンツを読み出して視聴する場合の特殊再生（早送り再生や巻き戻し再生等、通常再生（一倍速再生）とは異なる再生）に関する記載が無い。

そのため、３Ｄ映像を含むコンテンツの特殊再生を行うと、ユーザにとって不快な映像が再生されるおそれがあり、従来のコンテンツの再生に比べてユーザにとっての使い勝手が悪い。

上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。

本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、映像データを３Ｄ映像として再生しているときに再生速度を変更する指示を受信すると、当該映像データの再生を２Ｄ映像としての再生に切り替えることを特徴とする。

上記手段によれば、３Ｄ映像を含むコンテンツの特殊再生に関するユーザの利便性を向上することが可能である。

システムの構成例を示す模式図 送出装置の構成の一例を示す模式図 記録再生装置の構成の一例を示すブロック図 視聴時・録画時の処理の一例を示す模式図 視聴時・録画時の処理の一例を示す模式図 視聴時・録画時の処理の一例を示す模式図 再生時の処理の一例を示す模式図 再生時の処理の一例を示す模式図 再生時の処理の一例を示す模式図 再生手法を切り替える処理シーケンスの一例を示すシーケンス図 再生手法を切り替える処理シーケンスの一例を示すシーケンス図 再生手法を切り替える処理シーケンスの一例を示すシーケンス図 記録再生装置のメニュー表示の一例を示す模式図 再生手法を切り替える処理シーケンスの一例を示すシーケンス図 記録再生装置の構成の一例を示すブロック図 記録再生装置の構成の一例を示すブロック図

以下、本発明に好適な実施形態の例（実施例）を説明する。但し、本発明は本実施例に限定されない。以下の実施例において、３Ｄとは３次元を、２Ｄとは２次元を意味する。例えば３Ｄ映像とは、左右の眼に視差のある映像を提示することにより、観察者があるオブジェクトを立体的に、自分と同じ空間に存在するかのように知覚することを可能とする映像を意味する。また、例えば３Ｄコンテンツとは、３Ｄ表示装置による処理で３Ｄ映像の表示が可能となる映像信号を含むコンテンツである。

３Ｄ映像を表示する方法としては、アナグリフ方式、偏光表示方式、フレーム・シーケンシャル方式、視差（パララックス）バリア方式、レンチキュラレンズ方式、マイクロレンズアレイ方式、光線再生方式等がある。

アナグリフ方式とは、左右異なる角度から撮影した映像をそれぞれ赤と青の光で重ねて再生し、左右に赤と青のカラーフィルタの付いたメガネ（以下、「アナグリフメガネ」ともいう）で見る方式である。

偏光表示方式とは、左右の映像に直交する直線偏光をかけて重ねて投影し、これを偏光フィルタの付いたメガネ（以下、「偏光メガネ」ともいう）により分離する方式である。

フレーム・シーケンシャル方式とは、左右異なる角度から撮影した映像を交互に再生し、左右の視界が交互に遮蔽されるシャッターを備えたメガネ（必ずしもメガネの形状を取る必要は無く、電気的特性によりレンズ内の素子の光の透過具合が制御可能なデバイスを指す。以下、「シャッターメガネ」ともいう。）で見る方式である。

視差バリア方式とは、ディスプレイに「視差バリア」と呼ばれる縦縞のバリアを重ねることで、右眼には右眼用の映像、左眼には左眼用の映像を見せる方式であり、ユーザが特別なメガネ等を着用する必要がない。視差バリア方式は、さらに視聴する位置が比較的狭い２視点方式、視聴する位置が比較的広い多視点方式等に分類することもできる。

レンチキュラレンズ方式とは、ディスプレイにレンチキュラレンズを重ねることで、右眼には右眼用の映像、左眼には左眼用の映像を見せる方式であり、ユーザが特別なメガネ等を着用する必要がない。レンチキュラレンズ方式は、さらに視聴する位置が比較的狭い２視点方式、視聴する位置が左右に比較的広い多視点方式等に分類することもできる。

マイクロレンズアレイ方式とは、ディスプレイにマイクロレンズアレイを重ねることで、右眼には右眼用の映像、左眼には左眼用の映像を見せる方式であり、ユーザが特別なメガネ等を着用する必要がない。マイクロレンズアレイ方式は、視聴する位置が上下左右に比較的広い多視点方式である。

光線再生方式とは、光線の波面を再生することにより、観察者に視差画像を提示する方式であり、ユーザが特別なメガネ等を着用する必要がない。また、視聴する位置も比較的広い。

なお、３Ｄ映像の表示方式は一例であり、上記以外の方式を採用してもよい。また、アナグリフメガネ、偏光メガネ、シャッターメガネ等、３Ｄ映像を視聴するために必要な道具や装置を総称して３Ｄメガネ、３Ｄ視聴装置または３Ｄ視聴補助具ともいう。

図１は、本実施例を適用するシステムの構成の一例を示す模式図である。放送波からの情報を受信する場合を例示している。ただし放送に限定されず通信網によるＩＰ放送（マルチキャスト）であってもよく、総称して配信ともいう。

１は放送局などの情報提供局に設置される送信装置、２は放送用衛星として、３は地上中継局として設置される中継装置、４はユーザの宅内などに設置される記録再生装置（表示装置を含む）を示す。５はＩＰ放送用のデータを配信する配信サーバである。６はユーザの宅内などに設置される例えばＢＤレコーダなどの記録再生装置である。７は３Ｄメガネである。

送信装置１は、中継装置２や３を介して、変調された信号電波を伝送する。例えばケーブルによる伝送、電話線による伝送などを用いることもできる。記録再生装置４で受信されたこの信号電波は、後に述べるように、復調されて情報信号となる。

本構成では記録再生装置４は表示ディスプレイを有しているため、ユーザは情報信号が示す映像音声を視聴することができる。図１では未記載であるが記録再生装置４は内包する記録再生部により受信したデータを内包する、あるいは外付けした記録媒体に記録し、再生することが可能である。

また、記録再生装置４は別の記録再生機器６との間でデータの送受信が可能である。両者は例えばＨＤＭＩケーブルなどの３Ｄ映像情報を含むデジタルデータの送受信が可能な接続を有し、記録再生機器６に対して受信した情報信号を転送することも記録再生機器６から受信した情報信号を記録再生装置４で再生を行なうことが可能である。

図２は、図１に示したシステムのうちの、送信装置１の構成の一例を示すブロック図である。

２０１はソース発生部、２０２はＭＰＥＧ方式等で圧縮を行うエンコード部、２０３はスクランブル部、２０４は変調部、２０５は送信アンテナ、２０６は番組情報付与部である。カメラ、記録再生装置などから成るソース発生部２０１で発生した映像音声などの情報は、より少ない占有帯域で伝送できるよう、エンコード部２０２でデータ量の圧縮が施される。必要に応じてスクランブル部２０３で、特定の視聴者には視聴可能となるように伝送暗号化される。変調部２０４で伝送するために適した信号となるよう変調された後、送信アンテナ２０５から、中継装置２に向けて電波として送信される。このとき、番組情報付与部２０６では、例えば電子番組表表示や現在視聴中の番組情報表示のために番組情報を付加する。

なお、一つの電波には複数の情報が、時分割、スペクトル拡散などの方法で多重されることが多い。簡単のため図２には記していないが、この場合、ソース発生部２０１とエンコード部２０２の系統が複数個あり、エンコード部２０２とスクランブル部２０３との間に、複数の情報を多重するマルチプレクス部（多重化部）が置かれる。

３Ｄ映像の送信・受信を実現する方式としては様々な方式が考えられる。例えば３Ｄ映像を送出する方法の一例として、左目用画像データと右目用画像データを多重化して送出する方法がある。これに限らず受信時に判別可能なように送信ならびに受信の運用形態が決められれば、受信機は運用形態に応じて立体映像であることを判別して立体映像表示することが可能である。

図３は記録再生装置４の構成の一例を示すブロック図である。３０１は放送装置１から送信され中継局２または３を経た送信データを受信するための入力端子である。３０２は放送受信部であり、入力が例えば放送ストリームといったスクランブルされたデータの場合、スクランブルを解く処理を行いデータを出力する。

３０３は受信したデータを解析しデータ種別毎に分離し後段へ転送する分離部である。分離の手順としては予め定められた数値（例えば０）をＩＤ（Ｉｄｅｎｔｉｆｉｅｒ）として持つＰＡＴ（Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）データを入力されたデジタルデータの中より検出し、所定の方法に基づいて解析することでＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のＩＤを得る。その情報を用いてさらに入力されたデジタルデータよりＰＭＴデータを検出し所定の方法に基づいて解析する。これにより映像データや音声データ、番組情報（ＳＩ（Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）情報とも呼ぶ）を含むデータ（例えばＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）など）のＩＤを知ることが出来る。以上により種類別にデータを分別することが可能であり、例えば映像データ・音声データを抽出して後段のデコード処理部３０５へと転送する。また番組情報を番組情報処理部３０４へと転送する。録画を行う場合には規格で定められた必要となるデータをデータ変換処理部３０８へ転送する。例えばＡＲＩＢ規格によれば録画はパーシャルＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）形式として記録するよう定められており、この時必要な番組情報やデータ形式が規定されている。

番組情報処理部３０４ではＥＩＴなど記述子内の一部の情報を取得し、制御部３１６およびデータ変換処理部３０８などが利用できるようメモリ３１７へ情報を保持する。

デコード処理部３０５は分離された映像データ・音声データを、画面に表示する映像データ、あるいはスピーカから出力する音声データにデコードする。図には未記載ではあるが、デコード処理部の中で映像と音声のデコード処理を行うブロックがそれぞれ別に存在する。デコードされたデータは表示制御部３０６へ送付する。

３０６は映像・音声データや各種アプリケーション用インタフェース(ＩＦ)の表示データから出力データを生成する表示制御部である。例えばデコード処理部３０５で処理された映像データの上に、記録再生装置４が独自に用意する例えばメニュー画面などのＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）を重ね合わせるなどして表示画像を生成する。表示制御部３０６は３Ｄ映像表示手法の少なくとも一つ以上に対応しているものとする。

３０７は出力端子であり、表示制御部３０６により生成された出力データを例えば表示用液晶パネルなどの表示デバイスに転送する。

３０８は記録媒体３１２にデジタルデータを記録するためのデータ変換処理部である。入力された放送形式のストリームを、例えば録画時に不要なＥＩＴなどの情報を削除し、先に得られた情報から必要なＳＩＴを生成するなどして所定のパーシャルＴＳ形式に変換を行う。パーシャルＴＳの形式で必要な番組情報については規格で決められていればそれに準拠する。データ変換処理部３０８においては、あるいは記録容量を削減するために画角のサイズやデータフォーマットを変換するなども可能である。

３０９は暗復号処理部であり、記録時には例えば制御部３１６より指定された鍵情報を用いるなどして、入力されたデジタルデータを所定の暗号方式に暗号化する。一方で再生時には、記録媒体３１２に記録されているデータを復号してデコード処理可能なストリームとする。これにより記録されたストリームの不正利用を出来ないようにする。

３１０は記録再生制御部であり、記録媒体３１２にデータを記録する為の、あるいは記録媒体３１２に記録したストリームを再生する為のコマンドを発行し、デジタルデータの転送などの処理を行う。３１１は記録媒体３１２へのデータ送受信を行う入出力端子である。

３１２は記録媒体である。図３においては記録媒体３１２を記録再生装置４の外に配置したが、記録再生装置４に内包されていても良い。なお、図３では再生時の経路も示しているが、例えば記録再生部３１０を介して記録媒体３１２から読み出したデータを暗復号処理部３０９で処理し、その出力データを分離部３０３へデータを転送する。この時、復号処理が不要なデジタルデータ（以降記録番組とも表記する）を扱う場合は暗復号処理部３０９を介さず、分離部３０３へ転送する構成としても良い。またデータ変換処理部３０８を介さずに分離部３０３へ転送する構成としても良い。

３１３は使用者がリモコンを用いて操作を行う際のリモコンＩＦ（Ｉｎｔｅｒｆａｃｅ）である。３１４は入力端子であり例えばリモコンからの信号を受信する受光部である。

３１５は例えば選局操作や音量操作などの各種操作を行うボタン群を配し、使用者が直接ボタンを操作することで記録再生装置４の制御を行うための操作部である。３１６は記録再生装置４の動作を制御する制御部であり、例えばＣＰＵで構成される。３１７は情報を記録するためのメモリである。

３１８は記録再生装置４が表示装置を包含しているか表示装置における表示タイミングと連動可能な場合、かつ３Ｄ視聴方法としてシャッターメガネが必要となる場合に、３Ｄメガネ７に対して、表示制御タイミングに合わせたシャッター開閉タイミングを通知する信号を生成、送出する同期制御部である。

３１９は出力端子であり、３Ｄメガネ７とは例えば赤外線通信や有線ケーブルでの接続で制御信号の送受信を行う。図１に示した例と異なり、表示装置が記録再生装置と別体であるならば、表示タイミングは表示装置において制御されるため、同期制御部３１８および出力端子３１９は不要である。３２０はシステムバスであり、これを経由して各ブロック間のデータ送受信が行われる。

なお、図３の中で各ブロックを結ぶ矢印で示された線は受信したデジタルデータの流れである。各ブロックでデータに対して適宜処理が行なわれるため、各ブロック間に流されるデータの内容・形式は各々異なるものである。

以上の構成に基づいて以下の実施例を説明する。受信するデジタル情報の中に、どの番組が３Ｄ映像を含むかを判別する情報が含まれているとする。例えば、ＥＩＴ内に番組に３Ｄ映像が含まれるかを示す情報を含んで送信することを考える。

あるいは例えばシーケンス（複数のピクチャから構成される一連のデータのまとまり）やピクチャ毎に割り振られるヘッダ情報中に番組のシーン毎に３Ｄ映像を含むかどうかを示す情報を含んで送信する事を考える。

なお、これらの例に限らず受信時に判別可能なように運用形態が決められれば、それに合わせて記録再生装置（本実施例によれば番組情報処理部３０４および制御部３１６）が判別することで効果は得られる。
上述の通り、３Ｄ映像の表示を実現する方法には多くの方式が存在するが、本実施例においては３Ｄ映像の表示方式はいずれの方式が用いられてもよい。なお、図３で示した同期制御部３１８と出力端子３１９は、フレームシーケンシャル方式以外の方式を用いる場合は不要となる。 図４は、記録再生装置４に入力されるデータの一例である。図４（ａ）には左右両眼用の各画像データが独立したストリームとして存在し、それを混合した入力ストリームとなっている。本例では簡単のため右目用と左目用の映像がピクチャ単位で交互に並んでいる図としているが、ＴＳパケット単位で入れ子になっていたり、１枚以上のピクチャ毎に入れ子になっていても以降の考え方は同様である。

例えばユーザがこの形式のストリームを視聴する場合には、デコード処理部３０４には図４（ａ）の右部に示す入力順に対して、順次各ピクチャをデコードした後、表示制御部３０５が左右の映像を交互に、映像に視差をつけて表示する。同期制御部３１８が送信する同期信号に基づきシャッターメガネでは右目用の画像表示時は右目側のレンズが透過して映像を視認可能とし、左目用の画像表示時は左目側のレンズが透過して映像を視認可能とする。この図では２Ｄ表示を左目用の映像で行うこととして例示している。

録画を行う場合は、左下部に示すように映像ストリームの順序はそのままに、データ変換処理部３０８にて番組情報の更新と挿入（Ｒｅｍｕｘ）を行い記録用ストリームを生成する。すなわち記録媒体３１２に記録したコンテンツは、再生時にこの記録順でデータを逐次読み出しを行えば、映像データの並びは放送受信時と同様の並びでデコード処理部３０５が受信・処理することとなる。

また受信タイミングを各ＴＳパケット単位で時間情報（タイムスタンプ）を付加する処理を行う。これにより再生時にはデータ変換処理部３０８から付加したタイムスタンプを参照して出力タイミングを調整することで放送受信時と同じデータ伝送が可能となる。

暗復号処理部３０９では記録時には必要に応じて暗号化を行い、再生時には暗号化されたデータであれば復号を行なう。記録再生部３１０で記録媒体３１２へ所定の方法で書き込み・読み出しを行う。

例えば映像データをＭＰＥＧ２形式からＨ．２６４形式にすることでデータ容量が圧縮できると言ったメリットがあるため、映像データや音声データのフォーマットを変更して記録する場合やフォーマットは変えずにデータレートを落として記録する場合も考えられる。この時はデータ変換処理部３０８にて右目用、左目用それぞれのストリームを個別にレート変換あるいはフォーマット変換を行ってから、１つのストリームに再構築（Ｒｅｍｕｘ）を行い記録用ストリームを生成する。この時右目用映像と左目用映像の位置関係はほぼ変わらずにＲｅｍｕｘすることが必要となる。

また別の入力ストリーム形式の例として、図４（ｂ）には各画像データとそれに付随して深さ情報が付加される形式を示す。この場合もデコード処理までは同様に入力されたデータを順次処理する。表示制御部３０６で奥行き情報に基づいて右目用画像と左目用画像を生成し、それを交互に表示を行うことで立体映像表示を実現する。

シャッターメガネを使用する場合の制御は先の例と同様である。またこの場合も記録時は左下部に示すように入力順と同じ順序で記録用ストリームを生成する。記録時にデータ変換処理部３０８にてデータレートの変換や画角の変更などをする場合は、それに合わせて深さ情報を適宜変換することが必要となる。

また別の入力ストリーム形式の例として、図４（ｃ）では左目用映像と右目用映像とを交互に組み合わせて構成されたＴＳストリームを入力とした模式図である。本例では簡単のため右目用と左目用の映像がピクチャ単位で交互に並んでいる図としているが、ＴＳパケット単位で入れ子になっていたり１枚以上のピクチャ毎に入れ子になっていてもよい。

立体映像表示の実現方法は前例と同じように交互に表示を行う。シャッターメガネの制御は先の例と同様である。この場合も記録時は図４（ａ）や図４（ｂ）の説明と同様に入力順と同じ順序で記録用ストリームを生成する。このデータ列の場合、Ｉピクチャが左目用の映像のみに含まれるため、２Ｄ表示は必ず左目用の映像で行うこととなる。

いずれの例においてもＢピクチャの枚数などピクチャの並びは図の例に限らない。例えば図４（ａ）の右目用、左目用の各ストリームにおいてＰピクチャ間のＢピクチャの枚数が４枚、６枚でも前記の実施例および後記の実施例における制御、効果は同様である。

次に、ユーザが記録媒体からのリモコンなどの指示手段により、早送り動作を指示した場合の動作シーケンスを説明する。

早送りを行う場合の映像の出力制御例を図５を用いて説明する。早送りは不連続な再生位置の画像を連続的に表示することで実現する。これはストリームの先方向へ送る場合及び前方向へまき戻す場合とで同じ処理となる。表示させる画像の時間間隔と1枚の画像の表示時間とを調整することで早送りの倍速数は決定される。

例えば、図４（ａ）で示した画像の並びをしたデータに対する早送りの実施例を図５（ａ）で示す。２Ｄ表示で早送りを行う場合は例えば左目用のＩピクチャのデータだけを連続的に表示する。またシャッタメガネの制御を停止させユーザは両目で２Ｄの映像を視聴することとなる。

一方で３Ｄでの表示を行う場合、左目用ストリームのＩピクチャに加えてそれに対応した右目用のＩピクチャの映像も表示に用い、各表示タイミングに同期してシャッター開閉タイミングも合わせることが必要である。
例えば左目用のＩピクチャとそれに対応する右目用のＩピクチャをデコード処理部３０５に入力してデコードを行い、次に再び左目用のＩピクチャと対応する右目用のＩピクチャをデコードし、…といったように局所的にデコード・表示を行うことにより３Ｄの表示は維持しつつ表示する枚数を減らすことによって早送り動作を実現する。

図４（ｂ）で示したデータ列に対する早送りの実施例を図５（ｂ）で示す。２Ｄ表示を行う場合はＩピクチャデータを取得しそれをデコード・表示する。またシャッタメガネの制御を停止させユーザは両目で２Ｄの映像を視聴することとなる。３Ｄ表示を行う場合はそれに対応する深さ情報を合わせて取得し、両目用のＩピクチャを生成、表示を行い、シャッター開閉のタイミングも合わせて制御する。

図４（ｃ）で示した画像の並びをしたデータに対する早送りの実施例を図５（ｃ）で示す。この時、２Ｄ表示で早送りを行う場合はＩピクチャのデータだけを連続的に表示する。一方で３Ｄでの表示を行う場合、Ｉピクチャに加えてそれに対応した右目用のＰピクチャの映像も表示に用いる。

以上では順方向に早送りする例について説明をしたが、逆の時間方向に進む、いわゆる早戻し、まき戻しの処理についても原理は同様である。

また、早送りの方法として例えば１．３倍速や１．５倍速で音声出力も行ういわゆる「早見再生」といった方法もある。３Ｄ映像に対してこの処理を行う場合、Ｉピクチャ以外のデータもデコードを行いより多くのコマを表示することが基本的な制御であるが、例えば性能面の問題などで全てのピクチャをデコード・表示できない場合などにおいて、例えばＩピクチャと一部あるいは全部のＰピクチャのみをデコード・表示したり、一部のＢピクチャを間引いて（システムの時間情報を操作して一部のＢピクチャのデコード・表示をスキップするように制御するなどする）表示を行ったりする。あるいは制御部の時々の処理能力に応じて適応的にピクチャのデコード・表示処理を間引いて制御する方法もある。

同様に図４（ｂ）で示した画像の並びを持つデータに対する早送りの実施例を図５（ｂ）で示す。例えば左目用のＩピクチャとそれに対応する右目用のピクチャを表示部３０６で生成して表示を行い、次にある左目用のＩピクチャに対応する右目用のピクチャをデコードし、といったように局所的にデコード・表示を行うことにより３Ｄの表示は維持しつつ表示する枚数を減らすことによって早送り動作を実現する。処理する画像の間隔を変更しても良い。

さらに高速度の早送りを行う場合、倍速数に応じてデコード・表示するＩピクチャの取捨選択と1枚のピクチャの表示時間を制御して任意の速度を実現可能である。

また、早送りを実現する別の方法としては、映像を一定時間分だけ1倍速の再生を行ない一定時間分先あるいは前のデータへスキップし、また一定時間分１倍速の再生をしてスキップし、という制御の繰り返しによっても実現可能である。

以降では、３Ｄ表示可能な番組を前述の早送り動作を行う場合の制御の実施例について説明する。なお、早送り動作を例に説明を進めるが、早戻し（巻き戻し）に関する処理についても同様に考えて良い。

３Ｄ表示に関する切り替え手法として、早送りを行う場合は必ず２Ｄ表示にして1倍速再生に戻す際に表示も３Ｄに戻すように構成してもよい。あるいは、低速度（例えば３倍速よりも低い速度）の早送り動作では３Ｄ表示を行い、高速度（例えば３倍速以上）の早送り動作において２Ｄ表示とするように構成してもよい。あるいは、早送り時に３Ｄ表示とするかをユーザが設定し、その設定に応じて表示を行う場合、あるいは番組の内容に合わせて早送り時に３Ｄ表示の部分だけを見せるように制御するように構成してもよい。

図６では1倍速表示から早送り再生へと処理を切り替える場合に、２Ｄ表示と３Ｄ表示を切り替える場合の処理シーケンスを示す。ステップ（以降Ｓと略記する）６０１では１倍速の再生動作中にユーザからのリモコン操作や操作部３１５の操作によって早送り再生への切り替えの指示が制御部３１６へと伝達され、Ｓ６０２へと進む。

Ｓ６０２では、制御部３１６は記録再生装置４が３Ｄ映像を表示中（出力中）であるかどうかを判断する。例えば、表示制御部３０６が入力された映像を３Ｄ映像として表示を行っているか否かにより判断すればよい。３Ｄ映像の表示中であると判断した場合Ｓ６０３へと進み、３Ｄ映像の表示中ではないと判断される場合にはＳ６０４へと進む。

Ｓ６０３では制御部３１６は表示制御部３０６を２Ｄ表示するように切り替える。例えばデコード処理部３０５への入力データを、左目用あるいは右目用映像のみとする。あるいは左右両方の映像のデコードは行うが表示制御部３０６において左目用映像及び右目用映像のいずれか一方の映像のみ出力する方法や、左目用Ｉピクチャ映像とそれに対応する右目用Iピクチャ映像から中間の映像を生成し、表示する方法などがある。なお、２Ｄコンテンツの映像を３Ｄ映像に変換して出力していた場合、３Ｄ映像に変換する処理を中止すればよい。

また制御部３１６は同期制御部３１８に対して同期信号の送信を止めるよう制御する。例えばフレームシーケンシャル方式の場合、これにより同期して左右両方のレンズが光を透過するようになり、ユーザは両眼で表示部に表示される２Ｄの映像を視認可能となる。以上の制御を行いＳ６０４へと進む。

Ｓ６０４では制御部３１６は所定の早送り動作を行う。例えば早送りの表示に必要なピクチャデータ部分のみを記録媒体から読み出し、記録再生部３１０、暗復号処理部３０９などで所定の処理を経て映像を表示する。

なお、Ｓ６０２では表示制御部３０６が３Ｄ映像の表示を行っているか否かを判別したが、再生番組が３Ｄコンテンツであるかどうか、または再生中のシーンが３Ｄ映像であるかどうかにより判別しても良い。現在再生中のシーンが３Ｄ映像に対応しているかどうかは例えばＰＭＴやＳＩＴといった定期的にストリームに含まれる番組情報の中、あるいはシーケンスヘッダ情報の中、あるいは各ピクチャのヘッダ情報の中に含まれるそのシーンが３Ｄ表示可能かどうかを示す情報を参照すれば良い。

このシーケンスは例えば早送り再生の再生速度を変更する際に２Ｄ表示と３Ｄ表示を切り替える場合も同様である。ユーザが早送りなどの特殊再生を行なう理由は、いくつか考えられる。一つは物語の概要を理解しながら高速に視聴すること、あるいは現在視聴時点の映像から別の場面が視聴したいため、所望の再生位置を探す場合などが挙げられる。

前者の例ではユーザが臨場感を失わないためにも表示は３Ｄのまま早送りをおこなうことが望ましいと考えられる。一方で後者の例では所望の位置が見つけられるまでは表示は２Ｄに切り替えても良いと考えられる。

すなわち、例えば２倍速や３倍速といった低速の早送りでは３Ｄ表示で実施し、例えば次に１０倍速など比較的高速な早送り再生に切り替わる場合に２Ｄに切り替えるといった実施例が考えられる。

Ｓ６０２に進む条件を制御部３１６が判定すれば以降の処理は同様で実現可能である。またこの切り替える条件判定と再生番組あるいはシーンが３Ｄ表示をしているかどうかの条件判定の順番は任意で構わない。

図７では早送り再生から1倍速再生へと処理を切り替える際に３Ｄ表示と２Ｄ表示を切り替える場合の処理シーケンスを示す。Ｓ７０１では２Ｄ表示で早送りを実行している再生動作中にユーザからのリモコン操作や操作部３１５の操作によって一倍速再生への切り替えの指示が制御部３１６へと伝達され、Ｓ７０２へと進む。

Ｓ７０２での処理は、早送り再生を行う前に３Ｄ映像の表示を行っていたか否かを判断する。２Ｄ映像の表示をしていたと判断した場合Ｓ７０３へと進み、３Ｄ映像の表示をしていたと判断される場合にはＳ７０４へと進む。

Ｓ７０３では制御部３１６は表示制御部３０６を３Ｄ表示するように切り替え、また同期制御部３１８に対して同期信号の送信を開始するよう制御する。例えばフレームシーケンシャル方式の場合、これにより受信した同期信号に基づいて左右どちらかのみのレンズが光を透過するようになり、表示部に表示される視差を持った映像を３Ｄとして視認可能となる。以上の制御を行いＳ７０４へと進む。

Ｓ７０４では制御部３１６は所定の動作によって一倍速再生を開始する。この時音声出力の有無を切り替えても良い。

なお、Ｓ７０２では表示制御部３０６が３Ｄ映像の表示を行っていたか否かを判別したが、再生番組が３Ｄコンテンツであるかどうか、または１倍速再生を再開するのシーンが３Ｄ映像であるかどうかにより判別しても良い。１倍速再生を再開するシーンが３Ｄ映像に対応しているかどうかは例えばＰＭＴやＳＩＴといった定期的にストリームに含まれる番組情報の中、あるいはシーケンスヘッダ情報の中、あるいは各ピクチャのヘッダ情報の中に含まれるそのシーンが３Ｄ表示可能かどうかを示す情報を参照すれば良い。

ひとつの記録番組内で３Ｄ映像の表示が可能なシーンと不可能なシーンが混在している場合（例えば番組本編は３Ｄ映像の表示が可能であるが、コマーシャルメッセージ（ＣＭ）部分は３Ｄ映像の表示ができないデータの場合や番組製作者が意図的に２Ｄ映像の表示を混在させる場合など。）、受信装置４で上記３Ｄ映像と２Ｄ映像との表示の切り替えをストリームを検出した際に自動的に行う。

例えばPMT内やシーケンスヘッダ内に、あるシーンが３Ｄ表示可否を示す情報が存在する場合、もしくは例えば録画中に切り替わりを検出して、切り替わり点の情報を録画データとともに保存しておけば、再生時にも検出した情報を元に３Ｄ・２D表示の切り替えが可能である。

あるいは制御部でデコード後のフレーム画像の特徴を解析し３Ｄ画像特有のパターンを検出するなどして判別することでも良いし、番組名に３Ｄという文字が含まれていることと、ここで述べた各処理を組み合わせて判別しても良い。

図８を用いてこの場合のシーケンスを説明する。Ｓ８０１では制御部３１６が番組情報処理部３０４あるいは分離部３０２などから切り替わり点の情報を検出し、Ｓ８０２へ進む。Ｓ８０２では制御部３１６は現在の表示状態が３Ｄであるか、あるいは３Ｄ表示を行うモードをユーザが選択しているかどうかなどの情報を取得し、この切り替わり点で表示を切り替える必要があるかを判定する。

例えば、３Ｄ表示を行う設定が有効であり、この時点で３Ｄ表示をしている状態で、この切り替わり点でストリームの状態が３Ｄから２Ｄへと切り替わる場合は必要ありと判定される。あるいは３Ｄ表示を行う設定が無効の場合、常に２Ｄで表示しているため切り換える必要はないと判定する。

切り替える必要がある場合にはＳ８０３へ進み、ない場合には処理を終了する。Ｓ８０３では現在の表示が３Ｄであれば２Ｄ表示へと切り替え、２Ｄ表示であれば３Ｄ表示へと切り替えて処理を終了する。切り替え手順は前記実施例Ｓ６０３やＳ７０３と同様である。

再生中にユーザ操作によって３Ｄ表示のＯＮ／ＯＦＦが切り替えられた場合、それを機に表示を切り替える。図９にはメニュー表示の一例を、図１０には切り替えシーケンスの一例を示す。例えばユーザによる特定のリモコン操作によって図９に示すような機能メニュー９０１が表示される。さらにこの中から３Ｄ設定の項目を選択することによりユーザは３Ｄ表示の有効・無効が選択可能である。

Ｓ１００１では制御部３１６が３Ｄ設定の項目をユーザが変更したことを認識し、Ｓ１００２へ進む。Ｓ１００２では制御部３１６は現在表示している番組が３Ｄ表示可能かどうかを判定し、表示可能であればＳ８０３へ、表示不可能であれば処理を終了する。

Ｓ８０３では先の説明と同様に２Ｄ表示と３Ｄ表示を切り替えて、処理を終了する。本実施例は１倍速の再生中であっても、また特殊再生中であっても同様に実行可能である。また、本実施例で示した３Ｄ表示ＯＮ／OＦＦの切り替えと同様に例えば早送り中の３Ｄ表示ＯＮ／OＦＦを設定する項目などがあっても良い。すなわちＯＮにした場合、特殊再生時の表示方法を３Ｄとし、ＯＦＦにした場合、特殊再生時の表示方法を２Ｄ表示とする。

また２Ｄ表示部分と３Ｄ表示部分が混在した場合の特殊再生、特に高倍速（例えば３倍速以上の速度）の早送りの動作で、２Ｄ表示と３Ｄ表示が目まぐるしく変化すると視聴しているユーザが不快に感じる可能性がある。そのため、例えば３Ｄ表示実行中は、３Ｄ表示部分のみをデコード・表示するように制御してもよい。例えば、記録媒体から読みだしたデータが２Ｄ表示部分と判別したら、その画像についてはデコード・表示を行わないようにしてもよい。その間は例えば一番最後に表示した映像の静止画像の表示を維持するなどすればよい。

継続して先のデータを読み出し、読み出したデータが３Ｄ表示部分であると判別したら、デコード・表示を再開する。以上のようにして３Ｄ表示部分だけを表示することが実現可能である。

２Ｄ表示部分か３Ｄ表示部分かは例えば読みだしたデータがシーケンスヘッダやＧＯＰヘッダ、あるいは例えばＰＭＴなどの番組情報があり、それらの中に３Ｄ表示可能かどうかを判別するフラグが含まれていれば、それによって制御部３１６で判別可能である。

あるいはデコード後の映像の特徴を解析することで判別しても良い。上記の例とは逆に３Ｄ表示を実行していない場合には、全ての読みだしたデータに対して２Ｄでデコード・表示を行っても良い。あるいはあらかじめ３Ｄ部分のみを表示するかどうかをユーザに設定させておき、それに応じて、２Ｄ表示部分をスキップするかどうかを制御しても良い。

なお、以上の実施例における３Ｄ表示可否の切り替り点を検出する方法は一例であり、本実施例に限定されない。例えば停止・開始のトリガは表示の切り替わりに連動した音声フォーマットの切り替わりでも良いし、また記録再生装置４内で独自に設定を行ったチャプタ情報でも良い。

以上は送出装置１からの放送受信を例に説明を行ったが、例えば配信サーバ６からのネットワーク経由のストリームを受信する場合を考える。この時、入力となる番組情報データは映像・音声データと独立したストリーム（メタデータとも呼ばれる）に情報が含まれることがある。

この場合の記録再生装置４の構成を図１１に示す。１１０１はネットワークを介してのデータ送受信を行うための入出力端子である。１１０２はネットワークのデータ送受信を管理するネットワーク送受信部である。ネットワーク送受信部１１０２では例えばＤＴＣＰ−ＩＰといったネットワーク上をデータを伝送するために必要な暗復号処理の機能などを内包しても良い。

映像音声データを含むストリームデータとメタデータとを別々に受信した場合、例えば分離部３０３でメタデータを抽出して番組情報処理部３０４へデータを転送、番組情報処理部３０４で番組情報を取得することで、放送受信時と同様の実施例が適用可能である。

またネットワーク経由のストリーム受信の場合、受信したコンテンツが３Ｄ表示可能であるかを判別可能な情報や、部分的に３Ｄ表示可能である場合に可能な部分を示す情報がメタデータに含まれていても良い。この場合制御部３０８はこれらの情報に基づいて上述した２Ｄ・３Ｄ表示を切り替える実施例を実施することが可能である。

また、記録再生装置４と接続された別の記録再生機器６からの入力を考える。この場合の記録再生装置４の構成を図１２に示す。１２０１は機器間の連携を取るコマンドを処理したり、受信した映像音声データを含むストリームデータを表示するために表示制御部３０６へデータ転送を行ったりする。１２０２は別の記録再生機器との間の入出力端子である。

別の記録再生装置６からストリームデータを受信するだけでなく、二つの装置間で例えば通電制御の切り替えやチャンネル変更、特殊再生時の再生速度の変更といった制御コマンドの送受信を行う。この時記録再生装置４では受信したデータを表示制御部３０６で適宜表示タイミングを計って映像・音声表示を行う。この場合においても上述した実施例と同様に特殊再生時の３Ｄ・２Ｄ表示の切り替えが実施可能である。

図１２においては図１１にて追加した機能ブロックが含まれているが、これらが無くても良い。

以上の実施例によれば、特殊再生時に３Ｄ表示と２Ｄ表示を切り替えることによりユーザの利便性を向上させることが可能である。また、各特殊再生の目的に応じて３Ｄ・２Ｄ映像表示を切り替えて表示することによって、ユーザの利便性を向上させることが可能である。

なお、以上の実施例では録画機能を備える再生装置による処理の説明を行ったが、必ずしも録画機能を備える必要は無い。記録媒体に記録されたコンテンツを再生する装置であれば、本実施例で説明した処理を行うことが可能である。

４…記録再生装置 ３０１…入力端子 ３０２…放送受信部 ３０３…分離部 ３０４…番組情報処理部 ３０５…デコード処理部 ３０６…表示制御部 ３０７…出力端子 ３０８…データ変換処理部 ３０９…暗復号処理部 ３１０…記録再生部 ３１１…入出力端子 ３１２…記録媒体 ３１３…リモコンインタフェース ３１４…リモコン受光部 ３１５…操作部 ３１６…制御部 ３１７…メモリ ３１８…同期制御部 ３１９…出力端子 ３２０…システムバス １１０１…入出力端子 １１０２…ネットワーク送受信部 １２０１…データ送受信部 １２０２…入出力端子

Claims (8)

1. ３Ｄ映像を再生可能な再生装置であって、
   左目用の映像ストリームと右目用の映像ストリームとから成る３Ｄ映像ストリームをデコードし左目用画像と右目用画像とを生成するデコード手段と、
   前記デコード手段でデコードされた左目用画像と右目用画像とを交互に読み出して画像を出力する出力手段と、
   ユーザの操作に対応した処理を行う指示手段と、
   指示手段からの指示によって前記デコード手段および前記出力手段を制御する制御部とを備え、
   前記指示手段が再生速度の変化の指示を出した場合に、前記制御部は前記デコード手段を左目用の映像ストリーム及び右目用の映像ストリームのいずれか一方のみをデコードするよう制御する、あるいは前記出力手段を左目用画像及び右目用画像のいずれか一方のみを出力するよう制御する処理を行うことを特徴とする再生装置。
2. 請求項1に記載の再生装置において、
   記録媒体と、
   前記記録媒体から前記デコード手段へデータを転送する再生制御部とを備え、
   前記デコード手段は記録媒体に記録された３Ｄ映像ストリームをデコード可能であり、
   前記指示手段による再生速度変化の指示により、前記制御部は前記再生制御部を前記記録媒体から間欠的にデータを読み出すように切り替える処理を行うことを特徴とする再生装置。
3. 請求項２に記載の再生装置において、前記出力手段が出力するデータは左目用画像のデータであることを特徴とする記録再生装置。
4. 請求項１または２に記載の再生装置において、
   前記指示手段によって再生速度の変化の指示がされた後、一倍速で再生する指示がされると、前記制御部は前記デコード手段が左目用の映像ストリームおよび右目用の映像ストリームをデコードするよう制御し、前記出力手段が左目用画像および右目用画像を出力するよう制御することを特徴とする再生装置。
5. ３Ｄ映像を再生可能な再生装置であって、
   左目用の映像ストリームと右目用の映像ストリームとから成る３Ｄ映像ストリームをデコードし左目用画増と右目用画像とを生成するデコード手段と、
   前記デコード手段でデコードされた左目用画像と右目用画像とを交互に出力する出力手段と、
   前記デコード手段および前記出力手段を制御する制御部とを備え、
   映像ストリームの一部が３Ｄ映像ストリームであり、前記映像ストリームのうち３Ｄ映像ストリームの位置を示す３Ｄ映像位置情報を有する場合に、前記制御部は前記３Ｄ映像位置情報に応じて前記デコード処理部を、左目用の映像ストリーム及び右目用の映像ストリームのいずれか一方をデコードする処理と左目用の映像ストリーム及び右目用の映像ストリームをデコードする処理とを切り替える制御をする、あるいは前記出力部を左目用画像及び右目用画像のいずれか一方を出力する処理と左目用画像及び右目用画像を出力する処理とを切り替える制御をすることを特徴とする再生装置。
6. 請求項５に記載の再生装置において、
   １倍速より高速に再生を行なう場合に、前記制御部が、前記デコード手段が前記映像ストリームのうちの３Ｄ映像ストリームをデコードするよう制御する、あるいは前記出力手段が前記映像ストリームのうちの３Ｄ映像ストリームがデコードされた画像を出力するよう制御することを特徴とする再生装置。
7. 記録媒体に記録された映像データを再生する再生装置であって、
   記録媒体から映像データを再生する再生部と、
   前記再生部で再生された映像データを出力する出力部と、
   ユーザからの指示を受信するインタフェースとを有し、
   前記再生部は映像データを３Ｄ映像として再生可能であり、
   前記再生部が前記記録媒体に記録された映像データを３Ｄ映像として再生しているときに前記インタフェースで再生速度を変更する指示を受信すると、前記記録媒体に記録された映像データの再生を２Ｄ映像としての再生に切り替えることを特徴とする再生装置。
8. 記録媒体に記録された映像データを再生する再生方法であって、
   記録媒体から映像データを再生するステップと、
   再生された映像データを出力するステップと、
   ユーザからの指示を受信するステップとを有し、
   記録媒体に記録された映像データを３Ｄ映像として再生しているときに再生速度を変更する指示を受信すると、当該映像データの再生を２Ｄ映像としての再生に切り替えることを特徴とする再生方法。

Images