JP4544348B2 - リモートコントローラ、画像信号処理装置および画像信号処理方法 - Google Patents

Description

この発明は、リモートコントローラ、画像信号処理装置および画像信号処理方法に関する。詳しくは、この発明は、ベースユニットに互いに異なる機能を操作する複数の機能操作ユニットが接続されてなり、操作データと共に複数の機能操作ユニットの優先順位を示す順位データを送信することにより、操作対象の機器における機能操作が適切な順序で行われるようにしたリモートコントローラに係るものである。

また、この発明は、送信データに含まれる順位データに基づいて、この送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断するとき、この操作データに基づいて画像信号の処理を行い、その後に、順位データで示される順に他の機能操作ユニットの操作データを設定して処理を行うことにより、機能操作が適切な順序で行われるようにした画像信号処理装置等に係るものである。

特許文献１には、リモートコントローラ（以下、適宜、「リモコン」という）をユニット化することにより、機能拡張を容易に行い得ることが記載されている。
特開２００５−４５７６２号公報

上述の特許文献１には、接続されたユニット間の関係を利用した機能については、何ら言及されていない。通常、操作対象の機器において複数の機能操作を行い得る場合、機能操作の順序によっては、効果が現れにくい場合もあり、最悪の場合には、逆効果となってしまうこともある。

この発明の目的は、操作対象の機器における機能操作が適切な順序で行われるようにすることにある。

この発明の概念は、
リモートコントロール信号の送信部を有するベースユニットと、
上記ベースユニットに接続され、互いに異なる機能を操作する複数の機能操作ユニットと、
上記複数の機能操作ユニットの優先順位を設定する優先順位設定部とを備え、
上記ベースユニットの送信部は、上記各ユニットが操作されるとき、操作データと共に、上記優先順位設定部で設定された上記複数の機能操作ユニットの優先順位を示す順位データを含む送信データを送信する
リモートコントローラにある。

また、この発明の概念は、
操作データおよび複数の機能操作ユニットの優先順位を示す順位データを含む送信データを受信する送信データ受信部と、
入力画像信号を処理して出力画像信号を得る画像信号処理部と、
上記送信データ受信部で受信された送信データに基づいて、上記画像信号処理部の動作を制御する制御部とを備え、
上記制御部は、
上記送信データに含まれる順位データに基づいて上記送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断するとき、
該操作データに基づいて上記画像信号処理部の動作を制御し、その後に、上記順位データで示される順に他の機能操作ユニットの操作データを設定して処理する
画像信号処理装置にある。

リモートコントローラは、リモートコントロール信号の送信部を有するベースユニットに、互いに異なる機能を操作する複数の機能操作ユニットが接続されて構成される。ベースユニットの送信部からは、各ユニットが操作されるとき、操作データと共に、複数の機能操作ユニットの優先順位を示す順位データを含む送信データが送信される。

複数の機能操作ユニットの優先順位は優先順位設定部により設定される。例えば、優先順位設定部では、ベースユニットに対する複数の機能操作ユニットの接続順に基づいて優先順位が設定される。このように、接続順によって優先順位が設定されるものにあっては、ユーザは、複数の機能操作ユニットの接続順を変更するだけで、優先順位を容易に変更できる。

例えば、機能操作ユニットは、自身が接続するユニットから、このユニットを特定するデータを取得するデータ取得部と、自身に接続されるユニットに、自身を特定するデータを供給するデータ供給部とを有するものとされ、複数の機能操作ユニットの優先順位を示す順位データは、複数の機能操作ユニットのデータ取得部で取得されたデータにより構成される。例えば、複数の機能操作ユニットは、互いに異なるラインにより、データ取得部で取得されたデータをベースユニットに送るようにされる。

また、例えば、優先順位設定部では、複数の機能操作ユニットの優先順位設定値に基づいて優先順位が設定される。この場合、各機能操作ユニットは、優先順位を設定するための例えばディップスイッチ等の設定手段を備えている。このように、優先順位設定値に基づいて優先順位が設定されるものにあっては、ユーザは、機能操作ユニットの接続順を変更することなく、設定手段により優先順位を任意に変更できる。

画像信号処理装置の送信データ受信部では、例えば、上述したリモートコントローラから送信されてくる送信データが受信される。この送信データには、上述したように、操作データと、複数の機能操作ユニットの優先順位を示す順位データが含まれている。画像信号処理装置においては、入力画像信号が処理されて出力画像信号が得られる。上述したように送信データ受信部で受信された送信データに基づいて、画像信号処理部の動作が制御される。

ここで、送信データに含まれる順位データに基づいて送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断されるとき、この操作データに基づいて画像信号処理部の動作が制御され、その後に、順位データで示される順に他の機能操作ユニットの操作データが設定されて処理が行われる。この場合、少なくとも、生成された他の機能操作ユニットの操作データに基づいて画像信号処理部の動作が制御されるか、あるいは生成された他の機能操作ユニットの操作データをユーザに提示する表示信号が出力画像信号に重畳される。このように他の機能操作ユニットの操作データが出力画像信号に重畳される場合、ユーザの選択操作があったとき、選択された操作データに基づいて画像信号処理部の動作が制御される。

上述したように、リモートコントローラからは、操作データと共に複数の機能操作ユニットの優先順位を示す順位データが含まれる送信データが送信される。また、操作対象の機器、例えば画像信号処理装置では、送信データに含まれる操作データが最優先の機能操作ユニットの操作データであるとき、この操作データに基づいて画像信号の処理が行われ、その後に、順位データで示される順に他の機能操作ユニットの操作データが設定されて処理が行われる。これにより、操作対象の機器では、機能操作が適切な順序で行われるようになる。

この発明に係るリモートコントローラによれば、ベースユニットに互いに異なる機能を操作する複数の機能操作ユニットが接続されてなり、操作データと共に複数の機能操作ユニットの優先順位を示す順位データを送信するものであり、操作対象の機器における機能操作が適切な順序で行われるようにできる。

また、この発明に係る画像信号処理装置等によれば、送信データに含まれる順位データに基づいて、この送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断するとき、この操作データに基づいて画像信号の処理を行い、その後に、順位データで示される順に他の機能操作ユニットの操作データを設定して処理を行うものであり、機能操作が適切な順序で行われるようにできる。

以下、図面を参照しながら、この発明の実施の形態について説明する。図１は、実施の形態としてのテレビ受信機１００の構成例を示している。

このテレビ受信機１００は、システムコントローラ１０１と、リモコン信号受信部１０２と、リモコン（リモートコントローラ）５００とを有している。また、このテレビ受信機１００は、受信アンテナ１１１と、チューナ１１２と、外部入力端子１１３と、切換スイッチ１１４と、セレクタ１１５と、ＤＲＣ−ボリウム処理部１１６と、パン・チルト・ズーム／追尾ズーム処理部１１７とを有している。また、このテレビ受信機１００は、ダイナミックレンジ／周波数解析部１１８と、オブジェクト検出部１１９と、動き位置検出部１２３と、ＯＳＤ（on-screen display）部１２０と、合成部１２１と、ディスプレイ部１２２とを有している。

システムコントローラ１０１は、テレビ受信機１００の各部の動作を制御する。このシステムコントローラ１０１は、例えば、ＭＰＵ(Micro Processing Unit)、このＭＰＵの動作プログラム等が記憶されたＲＯＭ(Read Only Memory)、このＭＰＵの作業領域を構成するＲＡＭ（RandomAccess Memory）等を備えている。

このシステムコントローラ１０１には、リモコン信号受信部１０２が接続されている。このリモコン信号受信部１０２は、リモコン５００からユーザの操作に応じて出力されるリモコン信号ＲＭを受信し、そのリモコン信号ＲＭに含まれる送信データをシステムコントローラ１０１に供給する。

また、受信アンテナ１１１は、テレビ放送信号を受信する。チューナ１１２は、受信アンテナ１１１で受信された放送信号に対して選局処理等を行って、ＳＤ信号Ｖ１（５２５ｉ信号）を得る。外部入力端子１１３は、外部よりＳＤ信号Ｖ２（５２５ｉ信号）を入力する端子である。切換スイッチ１１４は、チューナ１１２で得られたＳＤ信号Ｖ１と外部入力端子１１３から入力されたＳＤ信号Ｖ２を入力とし、これらＳＤ信号Ｖ１，Ｖ２のいずれかを選択的に出力する。

セレクタ１１５は、切換スイッチ１１４から出力されたＳＤ信号またはパン・チルト・ズーム／追尾ズーム処理部１１７から出力されたＳＤ信号のいずれかを選択的に取り出して出力する。

ＤＲＣ−ボリウム処理部１１６は、画像信号処理部（画質調整機能部）を構成している。このＤＲＣ−ボリウム処理部１１６は、入力された画像信号が画質パラメータの値に応じた画質の画像信号となるように処理を行う。システムコントローラ１０１から処理部１１６に送られる制御信号ＳＣａには、ユーザによって設定された、あるいは自動的に設定された、解像度を示す画質パラメータｒの値およびノイズ除去度（ノイズ抑圧度）を示す画質パラメータｚの値が含まれる。このＤＲＣ−ボリウム処理部１１６の詳細については、後述する。

パン・チルト・ズーム／追尾ズーム処理部１１７は、画像信号処理部（パン・チルト・ズーム機能部、追尾ズーム機能部）を構成している。このパン・チルト・ズーム／追尾ズーム処理部１１７は、入力された画像信号による画像のうち、ユーザによって指定された位置を中心とするズーム処理を行う。この場合、ユーザがズーム処理の中心位置を水平方向に移動操作する場合、ズーム画像の中心が水平方向に順次移動していくパン状態となる。同様に、ユーザがズーム処理の中心位置を垂直方向に移動操作する場合、ズーム画像の中心が垂直方向に順次移動していくチルト状態となる。

また、パン・チルト・ズーム／追尾ズーム処理部１１７は、入力された画像信号による画像に含まれる所定のオブジェクトを示すオブジェクト情報を取得し、このオブジェクト情報に基づいて、入力された画像信号に対して追尾ズーム処理を行う。

システムコントローラ１０１からパン・チルト・ズーム／追尾ズーム処理部１１７に送られる制御信号ＳＣｂには、ユーザによって指定されたズーム位置情報、ユーザによって、あるいは自動的に設定されたズーム率情報、ユーザによって指定された追尾対象のオブジェクト情報等が含まれる。このパン・チルト・ズーム／追尾ズーム処理部１１７の詳細については、後述する。

ダイナミックレンジ／周波数解析部１１８は、パン・チルト・ズーム／追尾ズーム処理部１１７で得られた画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得し、システムコントローラ１０１に供給する。

ダイナミックレンジ／周波数解析部１１８は、例えば、フレーム画像信号（輝度信号）に対して、８画素×８画素のブロック切り出しを行い、各ブロック内の画素信号の最小値および最大値の差分の平均値を求めて、ダイナミックレンジ情報ＤＩとする。

また、ダイナミックレンジ／周波数解析部１１８は、例えば、フレーム画像信号（輝度信号）に対して、８画素×８画素のブロック切り出しを行い、各ブロックに対してＤＣＴ変換処理を行う。そして、ダイナミックレンジ／周波数解析部１１８は、例えば、各ブロックの高域側の１／４の領域にある１６個のＤＣＴ係数の絶対値をそれぞれ加算し、その後に１６個の加算値の平均値を求めて、周波数情報ＦＩとする。

オブジェクト検出部１１９は、パン・チルト・ズーム／追尾ズーム処理部１１７で得られた画像信号による画像に含まれるオブジェクトを検出し、オブジェクト情報ＯＩを取得し、システムコントローラ１０１に供給する。オブジェクト検出部１１９は、例えば、フレーム画像信号に対して隣接画素差分を求めて画面内輪郭を検出することで、画像に含まれるオブジェクトを検出する。

動き位置検出部１２３は、パン・チルト・ズーム／追尾ズーム処理部１１７で得られた画像信号による画像の動き位置を検出し、動き位置情報ＭＩをシステムコントローラ１０１に供給する。動き位置検出部１２３は、例えば、８画素×８画素のブロック毎にブロックマッチング法等によって動きベクトルを求め、動きベクトルの大きな部分を動き位置として検出する。

ＯＳＤ（On ScreenDisplay）部１２０は、ディスプレイ部１２２に、画像に重ねて表示されるユーザインタフェース画面用の表示信号ＳＣＨを発生する。合成部１２１は、ＤＲＣ−ボリウム処理部１１６から出力されるＨＤ信号に表示信号ＳＣＨを合成してディスプレイ部１２２に供給する。ディスプレイ部１２２は、例えばＣＲＴ（cathode-ray tube)ディスプレイ、あるいはＬＣＤ（liquidcrystal display）等のフラットパネルディスプレイで構成されている。

次に、テレビ受信機１００を構成するリモコン５００について説明する。テレビ受信機１００は、図２に示すように、このリモコン５００と、操作対象機器としての受信機本体部１００Ａとからなっている。リモコン５００は、リモコン信号ＳＭの送信部５１０ａを有するベースユニット５１０と、追尾ズーム用ユニット５２０と、画質調整用ユニットとしての解像度・ノイズ感調整用ユニット５３０と、パン・チルト・ズーム用ユニット５４０とを有している。ユニット５２０，５３０，５４０は、機能操作ユニットを構成している。

ベースユニット５１０は、各ユニットからの操作データを集約し、送信部５１０ａから例えば赤外線のリモコン信号ＳＭを出力する。追尾ズーム用ユニット５２０は、上述したパン・チルト・ズーム／追尾ズーム処理部１１７における追尾ズーム機能を操作する。左のボタンを押し下げると、明示的に追尾ズーム機能がオンとなる。また、真中および右のボタンは、追尾ズームのパラメータを切り換えるためのものである。

解像度・ノイズ感調整用ユニット５３０は、上述したＤＲＣ−ボリウム処理部１１６における画質調整機能を操作する。左の押しボタンを押し下げすると、明示的に画質調整機能がオンとなる。真中の上下キーで解像度感を調整でき、右の上下キーでノイズ感を調整できる。

パン・チルト・ズーム用ユニット５４０は、上述したパン・チルト・ズーム／追尾ズーム処理部１１７におけるパン・チルト・ズーム機能を操作する。真中の押しボタンを押し下げすると、明示的にパン・チルト・ズーム機能がオンとなる。左のスティックでパン、チルトを調整でき、右のスティックでズーム率を調整できる。

リモコン５００において、ベースユニット５１０は一番上に配置されるが、その他のユニットは自由に入れ替えることができる構造になっている。すなわち、ベースユニット５１０の下部には接合凹部５１０ｂが設けられている。また、ユニット５２０，５３０，５４０の上部には接合凸部５２０ａ，５３０ａ，５４０ａが設けられ、ユニット５２０，５３０，５４０の下部には接合凹部５２０ｂ，５３０ｂ，５４０ｂが設けられている。これら接合凹部および接合凸部は、他のユニットと電気的および機械的な結合を行うためのものである。

図３は、リモコン５００のユニット間の配線模式図を示している。ベースユニット５１０はバッテリ（電源）５１０ｃを備えている。ベースユニット５１０の電源Ｖｃｃおよび接地ＧＮＤは、それぞれ、電源ライン５５２および接地ライン５５３を通じて、各ユニットに供給される。

ユニット５１０〜５４０の下部の接合凹部５１０ｂ〜５４０ｂには、それぞれ、電極部５１１〜５４１が設けられている。電極部５１１〜５４１は、それぞれ、ユニット５１０〜５４０を特定するデータ（固有のＩＤ）を供給する。電極部５１１〜５４１は、それぞれ、データ供給部を構成している。ここで、各電極部は、２つの電極で構成されており、２ビットのデータを供給する。

この実施の形態において、ベースユニット５１０の電極部５１１は、双方の電極が接地ＧＮＤに接続され、２ビットのデータ「００」を供給する。また、追尾ズーム用ユニット５２０の電極部５２１は、一方の電極は接地ＧＮＤに接続され、他方の電極は電源Ｖｃｃに接続され、２ビットのデータ「０１」を供給する。また、解像度・ノイズ感調整用ユニット５３０の電極部５３１は、一方の電極は電源Ｖｃｃに接続され、他方の電極は接地ＧＮＤに接続され、２ビットのデータ「１０」を供給する。また、パン・チルト・ズーム用ユニット５４０の電極部５４１は、双方の電極が電源Ｖｃｃに接続され、２ビットのデータ「１１」を供給する。

なお、この実施の形態におけるリモコン５００においては、ベースユニット５１０に、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０およびパン・チルト・ズーム用ユニット５４０から選択された一部または全部が接続された状態で使用される。そのため、４個のユニット５１０〜５４０の識別が可能であればよいことから、各電極部は２つの電極で構成され、２ビットのデータを供給するようになっている。

ユニット５２０〜５４０の上部の接合凹部５２０ａ〜５４０ａには、それぞれ、電極部５２２〜５４２が設けられている。電極部５２２〜５４２は、それぞれ、接続時に、自身のユニットの上にあるユニットを特定するデータ（固有のＩＤ）を取得する。電極部５２２〜５４２は、それぞれ、データ取得部を構成している。ここで、各電極部は、２つの電極で構成されており、２ビットのデータを取得する。

追尾ズーム用ユニット５２０は、電極部５２２で取得されたデータを、データライン５６１，５６２を通じてベースユニット５１０のＭＰＵ（Micro Processing Unit）５１０ｄに、供給する。この場合、ＭＰＵ５１０ｄは、データライン５６１，５６２で供給される２ビットのデータ（固有のＩＤ）は、追尾ズーム用ユニット５２０の電極部５２２で取得されたデータであって、この２ビットのデータに基づいて、追尾ズーム用ユニット５２０の上にあるユニットを特定できる。

また、解像度・ノイズ感調整用ユニット５３０は、電極部５３２で取得されたデータを、データライン５６４，５６５を通じてベースユニット５１０のＭＰＵ５１０ｄに、供給する。この場合、ＭＰＵ５１０ｄは、データライン５６４，５６５で供給される２ビットのデータ（固有のＩＤ）は、解像度・ノイズ感調整用ユニット５３０の電極部５３２で取得されたデータであって、この２ビットのデータに基づいて、解像度・ノイズ感調整用ユニット５３０の上にあるユニットを特定できる。

また、パン・チルト・ズーム用ユニット５４０は、電極部５４２で取得されたデータを、データライン５６７，５６８を通じてベースユニット５１０のＭＰＵ５１０ｄに、供給する。この場合、ＭＰＵ５１０ｄは、データライン５６７，５６８で供給される２ビットのデータ（固有のＩＤ）は、パン・チルト・ズーム用ユニット５４０の電極部５４２で取得されたデータであって、この２ビットのデータに基づいて、パン・チルト・ズーム用ユニット５４０の上にあるユニットを特定できる。

リモコン５００においては、ベースユニット５１０に、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０およびパン・チルト・ズーム用ユニット５４０から選択された一部または全部が接続された状態で使用されるが、ベースユニット５１０を上側として、下側に行くほど優先順位が高いユニットとされる。

上述したように、ユニット５２０，５３０，５４０からデータライン（５６１，５６２）、（５６４，５６５）、（５６７，５６８）を通じて供給されるデータは、それぞれ各ユニットの上にあるユニットを特定できるデータである。したがって、このデータは、ユニット５２０，５３０，５４０の接続順を示すデータであって、各ユニットの優先順位を示す順位データをも構成している。

ユニット５２０〜５４０の電源Ｖｃｃは、それぞれ、データライン５６３，５６６，５６９を通じて、ベースユニット５１０のＭＰＵ５１０ｄに接続されている。ＭＰＵ５１０ｄにおいて、データライン５６３，５６６，５６９が接続されたポートは、接地ＧＮＤにプルダウンされている。

例えば、追尾ズーム用ユニット５２０が接続され、リモコン５００の構成ユニットとなっている場合、ベースユニット５１０の電源（バッテリ）５１０ｃは、追尾ズーム用ユニット５０からデータライン５６３を通じてＭＰＵ５１０ｄに伝わる。そのため、ＭＰＵ５１０ｄは、追尾ズーム用ユニット５２０が接続されていると認識する。逆に、追尾ズーム用ユニット５２０が接続されていない場合、ベースユニット５１０の電源（バッテリ）５１０ｃはデータライン５６３を通じてＭＰＵ５１０ｄに伝わらない。このＭＰＵ５１０ｄは、追尾ズーム用ユニット５２０が接続されていないと認識する。

このように、ベースユニット５１０のＭＰＵ５１０ｄは、追尾ズーム用ユニット５２０が接続されているか否かを容易に認識できる。なお、詳細説明は省略するが、ベースユニット５１０のＭＰＵ５１０ｄは、他のユニット（解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）に関しても、同様にして、接続されているか否かを容易に認識できる。

ユニット５２０〜５４０は、バスライン５７０を通じて、ベースユニット５１０のＭＰＵ５１０ｄに接続される。バスライン５７０は、ユニット５２０〜５４０からの、ボタン押し下げデータ、スティック操作データ等の操作データを、ベースユニット５１０のＭＰＵ５１０ｄに送るためのバスラインである。ユニット５２０〜５４０には、操作データをI2C（Inter-Integrated Circuit）データに変換するためのＬＳＩ５２３〜５４３が搭載されている。

なお、ユニット５２０〜５４０において、電源ライン５５２、接地ライン５５３、データライン５６１〜５６９およびバスライン５７０は、図３に示すように、それぞれのユニットを上部側から下部側に貫くように配線されている。また、図３においては、上述の各ラインをユニット間で連続した状態で示しているが、これら各ラインは、ユニットの接続があって初めてユニット間で接続された状態となることは勿論である。

次に、リモコン５００のベースユニット５１０の送信部５１０ａから送信されるリモコン信号ＳＭに含まれる送信データについて説明する。図４は、送信データの構造例を示している。送信データは、例えば、８ビットのカテゴリデータ、１０ビットの接続状態データ、それぞれ８ビットのデータ１〜データ４および８ビットのチェックサムにより構成されている。

カテゴリデータは、操作対象機器であるテレビ受信機、ビデオレコーダ等を示すデータである。接続状態データは、リモコン５００が、ベースユニット５１０にいずれの機能操作ユニットが接続されているか、各機能操作ユニットの接続順序がどのようであるかを示すデータである。この接続状態データは、例えば、その下位あるいは上位の９ビットのデータとして、ベースユニット５１０のＭＰＵ５１０ｄにデータライン５６１から５６９で供給される９ビットのデータが配置されて構成される。

上述したように、ユニット５２０，５３０，５４０からデータライン（５６１，５６２）、（５６４，５６５）、（５６７，５６８）を通じて供給されるデータは各機能操作ユニットの接続順を示すデータであって、各機能操作ユニットの優先順位を示す順位データをも構成している。したがって、送信データは、各ユニットの操作データと共に、各機能操作ユニットの優先順位を示す順位データを含んだ構造となっている。

データ１〜データ４は、それぞれ、ユニット５１０〜５４０の操作による操作データである。ユーザによりベースユニット５１０が操作される場合、その操作データはデータ１に配置される。この場合、データ２〜データ４は「ＮＵＬＬ」の状態とされる。また、ユーザにより追尾ズーム用ユニット５２０が操作される場合、その操作データはデータ２に配置される。この場合、データ１，データ３，データ４は「ＮＵＬＬ」の状態とされる。

また、ユーザにより解像度・ノイズ感調整用ユニット５３０が操作される場合、その操作データはデータ３に配置される。この場合、データ１，データ２，データ４は「ＮＵＬＬ」の状態とされる。また、ユーザによりパン・チルト・ズーム用ユニット５４０が操作される場合、その操作データはデータ４に配置される。この場合、データ１〜データ３は「ＮＵＬＬ」の状態とされる。

次に、テレビ受信機１００のＤＲＣ−ボリウム処理部１１６の詳細を説明する。図５は、ＤＲＣ−ボリウム処理部１１６の構成例を示している。

このＤＲＣ−ボリウム処理部１１６は、画像信号Ｖａが入力される入力端子２０１と、この入力端子２０１に入力された画像信号Ｖａを処理する処理本体部２０２と、この処理本体部２０２で得られた画像信号Ｖｂを出力する出力端子２０３と、処理本体部２０２の動作を制御する制御部２０４と、制御信号ＳＣａが入力される入力端子２０６とを有している。

制御部２０４は、入力端子２０６に入力される制御信号ＳＣａに基づいて、処理本体部２０２の動作を制御する。例えば、制御部２０４は、ＭＰＵ、このＭＰＵの動作プログラム等が記憶されたＲＯＭ、このＭＰＵの作業領域を構成するＲＡＭ等を備えた構成とされている。

この処理本体部２０２は、５２５ｉ信号というＳＤ(Standard Definition)信号である画像信号Ｖａを、１０５０ｉ信号というＨＤ(High Definition)信号である画像信号Ｖｂに変換する。５２５ｉ信号は、１フレームのライン数が５２５本である、インタレース方式の画像信号である。１０５０ｉ信号は、１フレームのライン数が１０５０本である、インタレース方式の画像信号である。

図６は、５２５ｉ信号および１０５０ｉ信号の、あるフレーム（Ｆ）の画素位置関係を示すものであり、奇数（ｏ）フィールドの画素位置を実線で示し、偶数（ｅ）フィールドの画素位置を破線で示している。大きなドットが５２５ｉ信号の画素であり、小さいドットが１０５０ｉ信号の画素である。図６から分かるように、１０５０ｉ信号の画素データとしては、５２５ｉ信号のラインに近い位置のラインデータＬ１，Ｌ１′と、５２５ｉ信号のラインから遠い位置のラインデータＬ２，Ｌ２′とが存在する。ここで、Ｌ１，Ｌ２は奇数フィールドのラインデータ、Ｌ１′，Ｌ２′は偶数フィールドのラインデータである。また、１０５０ｉ信号の各ラインの画素数は、５２５ｉ信号の各ラインの画素数の２倍である。

図５に戻って、処理本体部２０２は、バッファメモリ２１１と、予測タップ選択部２１２と、クラスタップ選択部２１３とを有している。バッファメモリ２１１は、入力端子２０１に入力された画像信号Ｖａを一時的に記憶する。タップ選択部２１２，２１３は、それぞれ、バッファメモリ２１１に記憶されている画像信号Ｖａに基づいて、画像信号Ｖｂにおける注目位置の周辺に位置する複数の画素データを、予測タップ、クラスタップのデータとして選択的に抽出する。

図７（ａ）は、予測タップのデータとして抽出される複数の画素データのパターン例を示している。図７（ｂ）は、クラスタップのデータとして抽出される複数の画素データ（実線部分）のパターン例を示している。なお、この図７（ａ），（ｂ）では、注目位置が存在する現フィールドから予測タップ、クラスタップのデータとしての複数の画素データを抽出するようになっているが、さらに時間方向の前後の所定数のフィールドから抽出することも考えられる。

また、処理本体部２０２は、クラス検出部２１４を有している。このクラス検出部２１４は、クラスタップ選択部２１３で抽出されたクラスタップのデータとしての複数の画素データに対してデータ圧縮処理を施して、画像信号Ｖｂにおける注目位置の画素データが属するクラスを示すクラスコードＣＬを取得する。例えば、データ圧縮処理としては、ＡＤＲＣ(Adaptive Dynamic Range Coding)、ＤＰＣＭ（予測符号化）、ＶＱ（ベクトル量子化）等を利用できる。本実施の形態では、ＡＤＲＣ、例えば１ビットＡＤＲＣを利用している。

まず、ＫビットＡＤＲＣを利用する場合について説明する。この場合、クラスタップに含まれる画素データの最大値ＭＡＸと最小値ＭＩＮの差分であるダイナミックレンジＤＲ＝ＭＡＸ−ＭＩＮを検出し、またクラスタップに含まれるそれぞれの画素データについて、その画素データから最小値ＭＩＮを減算し、その減算値をＤＲ／２^Kで除算（量子化）し、クラスタップを構成するそれぞれの画素データをＫビットに再量子化し、それを所定の順番で並べたビット列をクラスコードＣＬとする。

したがって、１ビットＡＤＲＣを利用する場合には、クラスタップに含まれるそれぞれの画素データについて、その画素データから最小値ＭＩＮを減算し、その減算値をＤＲ／２で除算し、クラスタップに含まれるそれぞれの画素データを１ビットに再量子化し、それを所定の順番で並べたビット列をクラスコードＣＬとして出力する。

また、処理本体部２０２は、係数データ生成部２１５と、記憶部としてのＲＯＭ２１６とを有している。ＲＯＭ２１６は、各クラスの係数種データを記憶している。後述する推定予測演算部２１７では、予測タップとしての複数の画素データｘｉと、係数データＷｉとを用い、（１）式の推定式に基づいて、画像信号Ｖｂにおける注目位置の画素データｙが求められる。この（１）式において、ｎは、予測タップとしての複数の画素データｘｉの個数である。

ＲＯＭ２１６に記憶される係数種データは、上述した推定式の係数データＷｉを生成するための、画質パラメータｒ，ｚを含む生成式の係数データである。（２）式は、その生成式の一例を示しており、ｗi0〜ｗi9が係数種データである。ここで、画質パラメータｒは解像度を決めるパラメータであり、画質パラメータｚはノイズ除去度（ノイズ抑圧度）を決めるパラメータである。この係数種データｗi0〜ｗi9は、画像信号Ｖａを（５２５ｉ信号）を、画像信号Ｖｂ（１０５０ｉ信号）に変換するための情報である。

上述の図６に示すように、５２５ｉ信号を１０５０ｉ信号に変換する場合、奇数、偶数のそれぞれのフィールドにおいて、５２５ｉ信号の１画素に対応して１０５０ｉ信号の４画素を得る必要がある。

図８は、奇数、偶数フィールドにおける１０５０ｉ信号を構成する２×２の単位画素ブロックＵＢ内の４画素における中心予測タップからの位相ずれを示している。奇数フィールドの場合、単位画素ブロックＵＢ内の４画素ＨＤ１〜ＨＤ４の位置は、それぞれ、中心予測タップＳＤ０の位置から、水平方向にｋ１〜ｋ４、垂直方向にｍ１〜ｍ４だけずれている。偶数フィールドの場合、単位画素ブロックＵＢ内の４画素ＨＤ１′〜ＨＤ４′の位置は、それぞれ、中心予測タップＳＤ０′の位置から、水平方向にｋ１′〜ｋ４′、垂直方向にｍ１′〜ｍ４′だけずれている。

そのため、上述した各クラスの係数種データｗi0〜ｗi9は、８種類の出力画素（HD1〜HD4,HD1′〜HD4′）にそれぞれ対応した係数種データｗi0〜ｗi9からなっている。結局、ＲＯＭ２１６には、クラスおよび出力画素の組み合わせ毎に、係数種データｗi0〜ｗi9が格納されている。

この係数種データｗi0〜ｗi9は、画像信号Ｖｂに対応した教師信号としての画像信号Ｖｂ′と画像信号Ｖａに対応した生徒信号としての画像信号Ｖａ′とから学習によって予め生成されたものである。この係数種データｗi0〜ｗi9の生成方法の詳細については後述する。

係数データ生成部２１５は、奇数、偶数の各フィールドにおいて、クラス検出部２１４で得られたクラスコードＣＬが表すクラスの、４出力画素（図８のHD1〜HD4、またはHD1′〜HD4′）にそれぞれ対応した４画素分の係数種データｗi0〜ｗi9をＲＯＭ２１６から取得し、さらに制御部２０４から供給される画質パラメータｒ，ｚの値を用い、（２）式の生成式に基づいて、４画素分の係数データＷｉを生成する。

ここで、画質パラメータｒは解像度を示し、画質パラメータｚはノイズ抑圧度を示す。これら画質パラメータｒ，ｚは、ユーザによって設定され、あるいはシステムコントローラ１０１により自動的に設定される。

また、処理本体部２０２は、推定予測演算部２１７を有している。この推定予測演算部２１７は、画像信号Ｖｂにおける注目位置に存在する単位画素ブロックＵＢ毎に画素データを求める。すなわち、推定予測演算部２１７は、予測タップ選択部２１２で抽出される単位画素ブロックＵＢ内の４画素（注目画素）に対応した、予測タップのデータｘｉ、および係数データ生成部２１５で生成される、その単位画素ブロックＵＢ内の４画素に対応した４画素分の係数データＷｉを用い、その単位画素ブロックＵＢを構成する４画素の画素データｙ1〜ｙ4を、それぞれ上述した（１）式の推定式で、個別に演算する。

また、処理本体部２０２は、後処理部２１８を有している。この後処理部２１８は、推定予測演算部２１７より順次出力される、単位画素ブロックＵＢ内の４画の画素データｙ1〜ｙ4を線順次化し、１０５０ｉ信号のフォーマットで出力する。

次に、図５に示すＤＲＣ−ボリウム処理部１１６の動作を説明する。ＳＤ信号である画像信号Ｖａが入力端子２０１に入力され、この画像信号Ｖａはバッファメモリ２１１に一時的に記憶される。そして、この画像信号Ｖａに基づき、クラス分類適応処理により、画像信号Ｖｂを構成する各画素データが生成される。

すなわち、クラスタップ選択部２１３では、バッファメモリ２１１に記憶されている画像信号Ｖａに基づいて、画像信号Ｖｂにおける注目位置の周辺に位置する複数の画素データが、クラスタップのデータとして選択的に抽出される。この複数の画素データは、クラス検出部２１４に供給される。

クラス検出部２１４では、クラスタップのデータとしての複数の画素データに、例えば１ビットＡＤＲＣのデータ圧縮処理が施されて、画像信号Ｖｂにおける注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる。このクラスコードＣＬは係数データ生成部２１５に供給される。

この係数データ生成部２１５では、奇数、偶数の各フィールドにおいて、クラスコードＣＬで示されるクラスの、４出力画素（図８のHD1〜HD4、またはHD1′〜HD4′）にそれぞれ対応した４画素分の係数種データｗi0〜ｗi9が、ＲＯＭ２１６から取得される。また、この係数データ生成部２１５には、制御部２０４から画質パラメータｒ，ｚの値が供給される。そして、この係数データ生成部２１５では、各フィールドにおいて、４画素分の係数種データｗi0〜ｗi9および画質パラメータｒ，ｚの値が用いられ、上述の（２）式の生成式に基づいて、４出力画素分の係数データＷｉが生成される。この係数データＷｉは、推定予測演算部２１７に供給される。

また、予測タップ選択部２１２では、バッファメモリ２１１に記憶されている画像信号Ｖａに基づいて、画像信号Ｖｂにおける注目位置の周辺に位置する複数の画素データｘｉが、予測タップのデータとして選択的に抽出される。この複数の画素データｘｉは、推定予測演算部２１７に供給される。推定予測演算部２１７では、予測タップ選択部２１２で抽出された予測タップのデータとしての複数の画素データｘｉと、係数データ生成部２１５で生成された４出力画素分の係数データＷｉとから、画像信号Ｖｂにおける注目位置に存在する単位画素ブロックＵＢ内の４画素（注目画素）の画素データｙ1〜ｙ4が、上述の（１）式の推定式に基づいて、個別に演算される。

この推定予測演算部２１７より順次出力される、画像信号Ｖｂを構成する各単位画素ブロックＵＢ内の４画素の画素データｙ1〜ｙ4は、後処理部２１８に供給される。この後処理部２１８では、推定予測演算部２１７より順次供給される単位画素ブロックＵＢ内の４画素のデータｙ1〜ｙ4が線順次化され、１０５０ｉ信号のフォーマットで出力される。つまり、後処理部２１８からは画像信号Ｖｂ（０５０ｉ信号）が得られ、この画像信号Ｖｂは出力端子２０３に出力される。

次に、上述した処理本体部２０２のＲＯＭ２１６に記憶される、係数種データの生成方法について説明する。この係数種データは、学習によって生成される。ここでは、（２）式の生成式における係数データである係数種データｗi0〜ｗi9を求める例を示すものとする。

ここで、以下の説明のため、（３）式のように、ｔj（ｊ＝０〜９）を定義する。
ｔ0＝１，ｔ1＝ｒ，ｔ2＝ｚ，ｔ3＝ｒ2，ｔ4＝ｒｚ，ｔ5＝ｚ2，ｔ6＝ｒ3，
ｔ7＝ｒ2ｚ，ｔ8＝ｒｚ2，ｔ9＝ｚ3

・・・（３）

この（３）式を用いると、（２）式は、（４）式のように書き換えられる。
最終的に、学習によって未定係数ｗijを求める。すなわち、クラスおよび出力画素の組み合わせ毎に、複数の学習データを用いて、二乗誤差を最小にする係数値を決定する。いわゆる最小二乗法による解法である。学習数をｍ、ｋ（１≦ｋ≦ｍ）番目の学習データにおける残差をｅk、二乗誤差の総和をＥとすると、（１）式および（２）式を用いて、Ｅは（５）式で表される。ここで、ｘikはＳＤ信号のｉ番目の予測タップ位置におけるｋ番目の画素データ、ｙkはそれに対応するｋ番目のＨＤ信号の画素データを表している。

最小二乗法による解法では、（５）式のｗijによる偏微分が０になるようなｗijを求める。これは、（６）式で示される。

ここで、（７）式、（８）式のように、Ｘipjq、Ｙipを定義すると、（６）式は、行列を用いて、（９）式のように書き換えられる。

この（９）式が、係数種データｗi0〜ｗi9を算出するための正規方程式である。この正規方程式を掃き出し法（Gauss-Jordanの消去法）等の一般解法で解くことにより、係数種データｗi0〜ｗi9を求めることができる。

図９は、上述した係数種データの生成方法の概念を示している。教師信号としてのＨＤ信号から、生徒信号としての複数のＳＤ信号を生成する。ここで、ＨＤ信号からＳＤ信号を生成する際に使用する間引きフィルタの周波数特性を変えることにより、解像度の異なるＳＤ信号を生成する。

解像度の異なるＳＤ信号によって、解像度を上げる効果の異なる係数種データを生成できる。例えばボケ具合の大きな画像が得られるＳＤ信号とボケ具合の小さな画像が得られるＳＤ信号があった場合、ボケ具合の大きな画像が得られるＳＤ信号による学習で、解像度を上げる効果の強い係数種データが生成され、ボケ具合の小さな画像が得られるＳＤ信号による学習で、解像度を上げる効果の弱い係数種データが生成される。

また、解像度の異なるＳＤ信号の各々に対してノイズを加えることで、ノイズの加わったＳＤ信号を生成する。ノイズを加える量を可変することでノイズ量が異なるＳＤ信号が生成され、それによってノイズ除去効果の異なる係数種データが生成される。例えばノイズをたくさん加えたＳＤ信号とノイズを少し加えたＳＤ信号とがあった場合、ノイズをたくさん加えたＳＤ信号による学習でノイズ除去効果の強い係数種データが生成され、ノイズを少し加えたＳＤ信号による学習でノイズ除去効果の弱い係数種データが生成される。

ノイズを加える量としては、例えば（１０）式のように、ＳＤ信号の画素値ｘに対して、ノイズｎを加えてノイズの加わったＳＤ信号の画素値ｘ′を生成する場合、Ｇを可変することでノイズ量を調整する。

ｘ′＝ｘ＋Ｇ・ｎ・・・（１０）

例えば、周波数特性を可変する画質パラメータｒの値を０〜１．０まで０．１のステップで１１段階に可変し、ノイズを加える量を可変する画質パラメータｚの値を０〜１．０まで０．１のステップで１１段階に可変し、合計１２１種類のＳＤ信号を生成する。このようにして生成した複数のＳＤ信号とＨＤ信号との間で学習を行って係数種データを生成する。この画質パラメータｒ，ｚは、図５の係数データ生成部２１５に供給される画質パラメータｒ，ｚに対応したものである。

次に、上述した係数種データｗ_i0〜ｗ_i9を生成するための係数種データ生成装置２５０について説明する。図１０は、この係数種データ生成装置２５０の構成を示している。

この係数種データ生成装置２５０は、入力端子２５１と、ＳＤ信号生成部２５２とを有している。入力端子２５１は、上述した画像信号Ｖｂに対応した、教師信号としての画像信号Ｖｂ′を入力するための端子である。ＳＤ信号生成部２５２は、この画像信号Ｖｂ′に対して、水平および垂直の間引き処理を行って、上述した画像信号Ｖａに対応した、生徒信号としての画像信号Ｖａ′を生成する。このＳＤ信号生成部２５２には、画質パラメータｒ，ｚが供給される。画質パラメータｒの値に対応して、画像信号Ｖｂ′から画像信号Ｖａ′を生成する際に使用する間引きフィルタの周波数特性が可変される。また、画質パラメータｚの値に対応して、画像信号Ｖａ′に加えるノイズの量が可変される。

また、係数種データ生成装置２５０は、予測タップ選択部２５３と、クラスタップ選択部２５４とを有している。これらタップ選択部２５３，２５４は、それぞれ、ＳＤ信号生成部２５２で生成された画像信号Ｖａ′に基づいて、画像信号Ｖｂ′における注目位置の周辺に位置する複数の画素データを、予測タップ、クラスタップのデータとして選択的に抽出する。これらタップ選択部２５３，２５４は、それぞれ、上述した処理本体部２０２のタップ選択部２１２，２１３に対応している。

また、係数種データ生成装置２５０は、クラス検出部２５５を有している。このクラス検出部２５５は、クラスタップ選択部２５４で選択的に抽出されたクラスタップのデータとしての複数の画素データを処理して、画像信号Ｖｂ′における注目位置の画素データが属するクラスを示すクラスコードＣＬを生成する。このクラス検出部２５５は、上述した処理本体部２０２のクラス検出部２１４に対応している。

また、係数種データ生成装置２５０は、教師タップ選択部２５６を有している。この教師タップ選択部２５６は、画像信号Ｖｂ′に基づいて、当該画像信号Ｖｂ′における注目位置の画素データを選択的に抽出する。

また、係数種データ生成装置２５０は、正規方程式生成部２５７を有している。この正規方程式生成部２５７は、教師タップ選択部２５６で選択的に抽出された、画像信号Ｖｂ′における各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応して予測タップ選択部２５３で選択的に抽出された、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙにそれぞれ対応してクラス検出部２５５で生成されたクラスコードＣＬと、画質パラメータｒ，ｚの値とから、クラス毎に、係数種データｗ_i0〜ｗ_i9を得るための正規方程式（（９）式参照）を生成する。

この場合、１個の画素データｙとそれに対応する複数個の画素データｘｉとの組み合わせで１個の学習データが生成される。教師信号としての画像信号Ｖｂ′と、それに対応した生徒信号としての画像信号Ｖａ′との間で、クラス毎に、多くの学習データが生成されていく。これにより、正規方程式生成部２５７では、各クラスの係数種データｗ_i0〜ｗ_i9を得るための正規方程式がそれぞれ生成される。

またこの場合、正規方程式生成部２５７では、出力画素（図８のHD1〜HD4，HD1′〜HD4′）毎に、正規方程式が生成される。すなわち、ＨＤ１〜ＨＤ４，ＨＤ１′〜ＨＤ４′に対応した正規方程式は、それぞれ、中心予測タップＳＤ０，ＳＤ０′からのずれ値がＨＤ１〜ＨＤ４，ＨＤ１′〜ＨＤ４′と同じ関係にある画素データｙから構成される学習データを用いて生成される。結局、正規方程式生成部２５７では、クラスおよび出力画素の組み合わせ毎に、係数種データｗ_i0〜ｗ_i9を得るための正規方程式が生成される。

また、係数種データ生成装置２５０は、係数種データ決定部２５８と、係数種メモリ２５９とを有している。係数種データ決定部２５８は、正規方程式生成部２５７から正規方程式のデータの供給を受け、当該正規方程式を掃き出し法等によって解き、クラスおよび出力画素の組み合わせ毎に、係数種データｗ_i0〜ｗ_i9を求める。係数種メモリ２５９は、係数種データ決定部２５８で求められた係数種データｗ_i0〜ｗ_i9を格納する。

次に、図１０に示す係数種データ生成装置２５０の動作を説明する。
入力端子２５１には、教師信号としての画像信号Ｖｂ′が入力される。この画像信号Ｖｂ′に対して、ＳＤ信号生成部２５２で水平および垂直の間引き処理が行われて、生徒信号としての画像信号Ｖａ′が生成される。この場合、ＳＤ信号生成部２５２には画質パラメータｒ，ｚが制御信号として供給され、周波数特性およびノイズ加算量が段階的に変化した複数の画像信号Ｖａ′が順次生成されていく。

クラスタップ選択部２５４では、画像信号Ｖａ′に基づいて、画像信号Ｖｂ′における注目位置の周辺に位置する複数の画素データがクラスタップのデータとして選択的に抽出される。この複数の画素データはクラス検出部２５５に供給される。そして、クラス検出部２５５では、各画素データに対してＡＤＲＣ等のデータ圧縮処理が施されて、画像信号Ｖｂ′における注目位置の画素データが属するクラスを示すクラスコードＣＬが生成される。このクラスコードＣＬは、正規方程式生成部２５７に供給される。

予測タップ選択部２５３では、画像信号Ｖａ′に基づいて、画像信号Ｖｂ′における注目位置の周辺に位置する複数の画素データｘｉが予測タップのデータとして選択的に抽出される。この複数の画素データｘｉは、正規方程式生成部２５７に供給される。また、教師タップ選択部２５６では、画像信号Ｖｂ′に基づいて、当該画像信号Ｖｂ′における注目位置の画素データｙが選択的に抽出される。この画素データｙは、正規方程式生成部２５７に供給される。

正規方程式生成部２５７では、画像信号Ｖｂ′における各注目位置を対象として、当該各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応した、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙが属するクラスを示すクラスコードＣＬと、ＳＤ信号生成部２５２に供給されている画質パラメータｒ，ｚの値とから、クラスおよび出力画素の組み合わせ毎に、係数種データｗ_i0〜ｗ_i9を得るための正規方程式（（９）式参照）が生成される。

そして、係数種データ決定部２５８では、正規方程式生成部２５７から正規方程式のデータが供給され、当該正規方程式が掃き出し法等によって解かれ、クラスおよび出力画素の組み合わせ毎に、係数種データｗ_i0〜ｗ_i9が求められる。この係数種データｗ_i0〜ｗ_i9は、係数種メモリ２５９に格納される。

このように、図１０に示す係数種データ生成装置２５０においては、上述した処理本体部２０２のＲＯＭ２１６に格納すべき、クラスおよび出力画素の各組み合わせの係数種データｗ_i0〜ｗ_i9を生成できる。

次に、パン・チルト・ズーム／追尾ズーム処理部１１７の詳細を説明する。図１１は、パン・チルト・ズーム／追尾ズーム処理部１１７の構成例を示している。
パン・チルト・ズーム／追尾ズーム処理部１１７は、画像信号が入力される入力端子３０１と、この入力端子３０１に入力された画像信号を処理する処理本体部３０２と、この処理本体部３０２で得られた画像信号を出力する出力端子３０３と、処理本体部３０２の動作を制御する制御部３０４と、制御信号ＳＣｂが入力される入力端子３０５とを有している。

制御部３０４は、入力端子３０５に入力される制御信号ＳＣｂに基づいて、処理本体部３０２の動作を制御する。例えば、制御部３０４は、ＭＰＵ、このＭＰＵの動作プログラム等が記憶されたＲＯＭ、このＭＰＵの作業領域を構成するＲＡＭ等を備えた構成とされている。処理本体部３０２は、バッファメモリ３１１と、検出領域決定部３１２と、オブジェクト特定部３１３と、動きベクトル検出部３１４と、ズーム処理部３１５とを有している。

バッファメモリ３１１は、入力端子３０１に入力された画像信号を一時的に記憶する。検出領域決定部３１２は、制御部３０４から供給される、制御信号ＳＣｂに含まれているオブジェクト領域指定情報ＯＡＡに基づいて、単独で、あるいはオブジェクト特定部３１３との共働で、オブジェクト領域情報を生成する。このオブジェクト領域情報は、例えばオブジェクト領域に対応した画素位置にフラグが立つようにされたフラグ情報である。

ここで、ユーザのオブジェクト領域の指定動作を説明する。ユーザがオブジェクト領域の指定動作を行う場合、バッファメモリ３１１に記憶されている画像信号が出力端子３０３に出力され、ディスプレイ部１２２の画面上にその画像信号による画像が表示される。この状態で、ユーザがリモコン操作によりオブジェクトＯＢに対応した所定点Ｐを指定することで、図１２に示すように、当該所定点Ｐを中心とした円形または楕円形の枠ＦＬが表示される。この枠ＦＬを表示するための表示信号は、図示せずも、例えばズーム処理部３１５の部分で画像信号に重畳される。ユーザは、この枠ＦＬの大きさを予め調整できる。また、枠ＦＬの形状は、円形または楕円形でなく、その他の形状であってもよい。

例えば、このようにオブジェクトＯＢに対応して枠ＦＬが表示されることでオブジェクト領域の指定が確定し、システムコントローラ１０１からパン・チルト・ズーム／追尾ズーム処理部１１７に、上述したオブジェクト領域指定情報ＯＡＡとして、確定時における枠位置情報が供給される。検出領域決定部３１２は、当該枠位置情報に基づいて枠内領域をオブジェクト領域に決定する。

動きベクトル検出部３１４は、バッファメモリ３１１に記憶されている画像信号に基づいて、各フレームで、画素毎に動きベクトルを検出する。この動きベクトルの検出は、詳細説明は省略するが、従来周知のブロックマッチング法、勾配法などを用いて行われる。オブジェクト特定部３１３は、検出領域決定部３１２で生成されたオブジェクト領域情報および動きベクトル検出部３１４で検出された動きベクトルＭＶに基づいて、オブジェクト領域の重心位置情報ＷＡＩを生成する。

すなわち、オブジェクト特定部３１３は、検出領域決定部３１２でオブジェクト領域が決定されたフレームである初期フレームでは、当該検出領域決定部３１２で生成されたオブジェクト領域情報に基づいて、当該初期フレームにおけるオブジェクト領域の重心位置を求めて、初期フレームにおけるオブジェクト領域の重心位置情報ＷＡＩを生成すると共に、オブジェクト領域内の各画素に対応して動きベクトル検出部３１４で検出された各動きベクトルに基づいて次のフレームで使用するオブジェクトＯＢの動き情報を取得する。例えば、このオブジェクトＯＢの動き情報は、各動きベクトルを平均した平均動きベクトルとされる。また例えば、このオブジェクトＯＢの動き情報は、各動きベクトルのうち最大頻度を示す動きベクトルとされる。

オブジェクト特定部３１３は、初期フレームに続くフレームでは、初期フレームで求められたオブジェクト領域の重心位置を初期フレームで取得されていたオブジェクトＯＢの動き情報を用いて移動させて当該フレームにおけるオブジェクト領域の重心位置を求め、重心位置情報ＷＡＩを生成する。また、オブジェクト特定部３１３は、初期フレームに続くフレームでは、初期フレームで求められたオブジェクト領域を初期フレームで取得されていたオブジェクトＯＢの動き情報を用いて移動させて当該フレームにおけるオブジェクト領域を決定し、オブジェクト領域内の各画素に対応して動きベクトル検出部３１４で検出された各動きベクトルに基づいて次のフレームで使用するオブジェクトＯＢの動き情報を取得する。

オブジェクト特定部３１３は、以降の各フレームでは、同様にして、前のフレームで取得されていたオブジェクトＯＢの動き情報を用いて、オブジェクト領域の重心位置情報ＷＡＩを生成すると共に、当該フレームにおけるオブジェクト領域を決定し、次のフレームで使用するオブジェクトＯＢの動き情報を取得する。

上述の検出領域決定部３１２、オブジェクト特定部３１３および動きベクトル検出部３１４は、追尾ズーム機能がオンとされている場合に動作する。そして、オブジェクト特定部３１３で生成されたオブジェクト領域の重心位置情報ＷＡＩがズーム処理部３１５に供給されて、追尾ズーム処理が行われる。

ズーム処理部３１５は、オブジェクト特定部３１３で生成されたオブジェクト領域の重心位置情報ＷＡＩ、あるいは制御部３０４から供給されるズーム位置情報ＺＡＩと、制御部３０４から供給される倍率情報ＭＧＩに基づいて、バッファメモリ３１１に記憶されている画像信号に対してズーム処理（パン・チルト・ズーム機能）、または追尾ズーム処理（追尾ズーム機能）を行う。

すなわち、ズーム処理部３１５は、追尾ズーム処理では、オブジェクト特定部３１３からの重心位置情報ＷＡＩで示されるオブジェクト領域の重心位置を中心とする画像領域を、制御部３０４からの倍率情報ＭＧＩで示される倍率で拡大する処理を行う。この場合、重心位置情報ＷＡＩで示されるオブジェクト領域の重心位置の移動に伴って、ズーム画像の中心が順次移動していく追尾ズーム状態となる。

なお、この追尾ズーム処理では、上述したようにオブジェクト特定部３１３では初期フレームを最初とする各フレームでオブジェクト領域の重心位置情報ＷＡＩが順次取得されるが、ズーム処理部３１５では、オブジェクト特定部３１３で順次取得される各フレームの重心位置情報ＷＡＩに基づいて、順次対応するフレームの画像信号がバッファメモリ３１１から読み出されて処理される。
また、ズーム処理部３１５は、ズーム処理では、制御部３０４から供給されるズーム位置情報ＺＡＩで示されるズーム処理の中心位置を中心とする画像領域を、制御部３０４からの倍率情報ＭＧＩで示される倍率で拡大する処理を行う。この場合、ユーザがズーム処理の中心位置を水平方向に移動操作する場合、ズーム画像の中心が水平方向に順次移動していくパン状態となる。同様に、ユーザがズーム処理の中心位置を垂直方向に移動操作する場合、ズーム画像の中心が垂直方向に順次移動していくチルト状態となる。

図１１に示すパン・チルト・ズーム／追尾ズーム処理部１１７の動作を説明する。まず、パン・チルト・ズーム機能におけるズーム処理の動作について説明する。入力端子３０１に入力される画像信号はバッファメモリ３１１に供給されて一時的に記憶される。ユーザがズーム位置を指定することで、制御部３０４からズーム処理部３１５に、ズーム処理の中心位置を示すズーム位置情報ＺＡＩが供給される。このズーム処理部３１５には、制御部３０４から、倍率情報ＭＧＩも供給される。

ズーム処理部３１５では、制御部３０４から供給されるズーム位置情報ＺＡＩで示されるズーム処理の中心位置を中心とする画像領域を、制御部３０４からの倍率情報ＭＧＩで示される倍率で拡大する処理が行われる。このズーム処理部３１５で得られた画像信号は出力端子３０３に供給される。

次に、追尾ズーム機能における追尾ズーム処理の動作について説明する。入力端子３０１に入力される画像信号はバッファメモリ３１１に供給されて一時的に記憶される。ユーザがオブジェクトＯＢに対応した所定点Ｐを指定することで、当該所定点Ｐを中心とした円形または楕円形の枠ＦＬが表示され（図１２参照）、この枠位置情報がオブジェクト領域指定情報ＯＡＡとして、制御部３０４から検出領域決定部３１２に供給される。検出領域決定部３１２では、当該枠位置情報に基づいて枠内領域がオブジェクト領域に決定される。このオブジェクト領域情報は、オブジェクト特定部３１３に供給される。

動きベクトル検出部３１４では、バッファメモリ３１１に記憶されている画像信号に基づいて、各フレームで、画素毎に動きベクトルが検出される。このように各フレームで検出される画素毎の動きベクトルは、オブジェクト特定部３１３に供給される。

オブジェクト特定部３１３では、検出領域決定部３１２でオブジェクト領域が決定されたフレームである初期フレームにおいては、この検出領域決定部３１２で生成されたオブジェクト領域情報に基づいて、この初期フレームにおけるオブジェクト領域の重心位置が求められ、初期フレームにおけるオブジェクト領域の重心位置情報ＷＡＩが生成されると共に、オブジェクト領域内の各画素に対応して動きベクトル検出部３１４で検出された各動きベクトルに基づいて次のフレームで使用されるオブジェクトＯＢの動き情報が取得される。

また、オブジェクト特定部３１３では、初期フレームに続くフレームにおいては、初期フレームで求められたオブジェクト領域の重心位置を初期フレームで取得されたオブジェクトＯＢの動き情報を用いて移動させて当該フレームにおけるオブジェクトの重心位置情報ＷＡＩが生成されると共に、初期フレームにおけるオブジェクト領域をこの初期フレームで取得されたオブジェクトＯＢの動き情報で移動させて当該フレームにおけるオブジェクト領域が求められ、このオブジェクト領域内の各画素に対応して動きベクトル検出部３１４で検出された各動きベクトルに基づいて次のフレームで使用されるオブジェクトＯＢの動き情報が取得される。

また、オブジェクト特定部３１３では、以降の各フレームにおいては、同様にして、前のフレームで取得されたオブジェクトＯＢの動き情報を用いて、当該フレームにおけるオブジェクト領域の重心位置情報ＷＡＩが生成されると共に、次のフレームで使用されるオブジェクトＯＢの動き情報が取得される。

このようにオブジェクト特定部３１３では、初期フレームを最初とする各フレームでオブジェクト領域の重心位置情報ＷＡＩが順次取得される。この各フレームで取得されたオブジェクト領域の重心位置情報ＷＡＩはズーム処理部３１５に供給される。このズーム処理部３１５には、制御部３０４から、倍率情報ＭＧＩも供給される。

ズーム処理部３１５では、オブジェクト領域の重心位置情報ＷＡＩおよび倍率情報ＭＧＩに基づいて、オブジェクト領域の重心位置を含む所定領域を拡大するズーム処理が行われる。この場合、各フレームにおけるオブジェクト領域の重心位置はオブジェクトＯＢの移動と共に移動するので、拡大処理を行う所定領域がオブジェクトＯＢの動きに伴って移動する追尾ズーム処理が行われる。このズーム処理部３１５で得られた画像信号は出力端子３０３に供給される。

次に、パン・チルト・ズーム／追尾ズーム処理部１１７を構成するズーム処理部３１５について説明する。

図１３は、ズーム処理部３１５の構成を示している。ズーム処理部３１５は、画像信号Ｖｃが入力される入力端子４０１と、この入力端子４０１に入力された画像信号Ｖｃを処理する処理本体部４０２と、この処理本体部４０２で得られた画像信号Ｖｄを出力する出力端子４０３と、処理本体部４０２の動作を制御する制御部４０４とを有している。また、ズーム処理部３１５は、動きベクトル検出部３１４で検出された動きベクトルＭＶが入力される入力端子４０５と、オブジェクト領域の重心位置情報ＷＡＩが入力される入力端子４０６と、倍率情報ＭＧＩが入力される入力端子４０７と、ズーム位置情報ＺＡＩが入力される入力端子４０８とを有している。

制御部４０４は、入力端子４０６に入力されるオブジェクト領域の重心位置情報ＷＡＩ、あるいは入力端子４０８に入力されるズーム位置情報ＺＡＩ、および入力端子４０７に入力される倍率情報ＭＧＩに基づいて、処理本体部４０２の動作を制御する。例えば、制御部４０４は、ＭＰＵ、このＭＰＵの動作プログラム等が記憶されたＲＯＭ、このＭＰＵの作業領域を構成するＲＡＭ等を備えた構成とされている。

処理本体部４０２は、予測タップ選択部４１１と、クラスタップ選択部４１２と、空間クラス検出部４１３と、動きクラス検出部４１４と、クラス統合部４１５と、係数データ生成部４１６と、ＲＯＭ４１７と、推定予測演算部４１８と、バッファメモリ４１９とを有している。

予測タップ選択部４１１、クラスタップ選択部４１２は、それぞれ、画像信号Ｖｃから、画像信号Ｖｄにおける注目位置の周辺に位置する複数の画素データを、予測タップ、クラスタップのデータとして選択的に抽出する。予測タップ、クラスタップのパターンは、入力端子４０５に入力される、例えば中心予測タップにおける画素の動きベクトルの大きさに応じて、変更される。例えば、予測タップ、クラスタップは、動きベクトルの大きさが小さい場合には、現フレームの空間方向（水平方向、垂直方向）の他に、時間方向に存在する現フレームにも張られるが、動きベクトルの大きさが大きい場合には、現フレームの空間方向のみに張られる。

空間クラス検出部４１３は、クラスタップ選択部４１２で選択的に抽出されるクラスタップのデータとしての複数の画素データに対してデータ圧縮処理を施して、画像信号Ｖｄにおける注目位置の画素データが属する空間クラスを示すクラスコードＣＬａを取得する。この空間クラス検出部４１３は、図５に示すＤＲＣ−ボリウム処理部１１６の処理本体部２０２におけるクラス検出部２１４と同様に、例えば１ビットＡＤＲＣを利用した構成とされている。

動きクラス検出部４１４は、入力端子４０５に入力される、例えば中心予測タップにおける画素の動きベクトルＭＶの大きさをクラス分けし、画像信号Ｖｄにおける注目位置の画素データが属する動きクラスを表すクラスコードＣＬｂを取得する。クラス統合部４１５は、上述した空間クラス検出部４１３で取得されたクラスコードＣＬａおよび動きクラス検出部４１４で取得されたクラスコードＣＬｂとを統合して、画像信号Ｖｄにおける注目位置の画素データが属するクラスを示すクラスコードＣＬを取得する。

ＲＯＭ４１７は、各クラスの係数種データを記憶している。後述する推定予測演算部４１８では、予測タップとしての複数の画素データｘｉと、係数データＷｉとを用い、（１１）式の推定式に基づいて、画像信号Ｖｄにおける注目位置の画素データｙが求められる。この（１１）式において、ｎは、予測タップとしての複数の画素データｘｉの個数である。

ＲＯＭ４１７に記憶される係数種データは、上述した推定式の係数データＷｉ（ｉ＝１〜ｎ）を生成するための、位相情報ｈ，ｖをパラメータとする生成式の係数データである。（１２）式は、その生成式の一例を示している。ここで、位相情報ｈは水平方向の位相情報であり、位相情報ｖは垂直方向の位相情報である。

ＲＯＭ４１７には、例えば、（１２）式の生成式における係数データである係数種データｗi0〜ｗi9（ｉ＝１〜ｎ）が、クラス毎に、記憶されている。この係数種データの生成方法については後述する。

係数データ生成部４１６は、クラス統合部４１５で得られたクラスコードＣＬが表すクラスの係数種データｗi0〜ｗi9をＲＯＭ４１７から読み出し、さらに制御部４０４から供給される、画像信号Ｖｄにおける注目位置の位相情報ｈ，ｖの値を用い、（１２）式の生成式に基づいて、係数データＷｉを生成する。この場合、処理前の画像信号Ｖｃに対する、処理後の画像信号Ｖｄの各画素の位置は、倍率情報ＭＧＩに応じて変化する。

例えば、図１４は、倍率情報ＭＧIで示す倍率が１．２５倍であるときの入力（画像信号Ｖｃ）と出力（画像信号Ｖｄ）の画素位置関係を示している。なお、図１４では、大きなドットが入力の画素であり、小さなドットが出力の画素を示しており、また奇数フィールドの画素位置を実線で示し、偶数フィールドの画素位置を破線で示している。

制御部４０４は、倍率情報ＭＧＩに基づき、奇数、偶数のフィールドのそれぞれに対応して、画像信号Ｖｄにおける注目位置の位相情報ｈ，ｖを発生する。この場合、例えば、画像信号Ｖｃの水平方向、垂直方向の画素間隔をそれぞれ１６とし、画像信号Ｖｄにおける注目位置から水平方向、垂直方向にそれぞれ最も近い位置にある画像信号Ｖｃにおける画素（最短画素）までの距離を、位相情報ｈ，ｖとしている。

ここで、位相情報ｈに関しては、注目位置が最短画素より左方に位置するときは負の値とされ、逆に注目位置が最短画素より右方に位置するときは正の値とされる。同様に、位相情報ｖに関しては、注目位置が最短画素より上方に位置するときは負の値とされ、逆に注目位置が最短画素より下方に位置するときは正の値とされる。

推定予測演算部４１８は、予測タップ選択部４１１で選択的に抽出された予測タップのデータとしての複数の画素データｘｉと、係数データ生成部４１６で生成された係数データＷｉとを用い、上述の（１１）式の推定式に基づいて、画像信号Ｖｄにおける注目位置の画素データｙを算出する。バッファメモリ４１９は、推定予測演算部４１８で算出された、画像信号Ｖｄを構成する各画素データを、一時的に記憶し、その後に適宜なタイミングで出力端子４０３に出力する。

なお、上述した画像信号Ｖｄの各注目位置の画素データを得るための画像信号Ｖｃの処理領域は、倍率に応じて変化する。図１５は、倍率と画像信号Ｖｃの処理領域との関係を示している。倍率が大きくなる程、画像信号Ｖｃの処理領域は小さくなっていく。水平、垂直のそれぞれの方向において、画像信号Ｖｃの全体領域を１とするとき、例えば倍率が１であるとき画像信号Ｖｃの処理領域は１であり、倍率が２であるとき画像信号Ｖｃの処理領域は１／２となる。一般的に、画像の拡大率がＴであるとき、画像信号Ｖｃの処理領域を１／Ｔとなる。

追尾ズーム処理の場合、この処理領域は、常に、オブジェクト領域の重心位置を含み、その重心位置の水平、垂直の内分比が、画像信号Ｖｃの全体領域におけるその重心位置の水平、垂直の内分比と同一となるように設定される。

図１６（ａ）〜（ｃ）は、倍率が２である場合におけるオブジェクト領域の重心位置と処理領域との関係例を示している。この図１６（ａ）〜（ｃ）において、数字は内分比を表している。このように画像信号Ｖｃの処理領域を設定することで、オブジェクト領域の重心位置が画面の端部に移動した場合に、画像信号Ｖｃの処理領域を十分に確保できず、出力画像に欠けが発生することを防止できる。

また、ズーム処理の場合も、上述した追尾ズーム処理の場合と同様に、この処理領域は、常に、ズーム処理の中心位置を含み、その中心位置の水平、垂直の内分比が、画像信号Ｖｃの全体領域におけるその重心位置の水平、垂直の内分比と同一となるように設定される。

次に、図１３に示すズーム処理部３１５の動作を説明する。処理対象である画像信号Ｖｃが入力端子４０１に入力され、処理本体部４０２では、この画像信号Ｖｃの、オブジェクト領域の重心位置、あるはズーム処理の中心位置に対応し、かつ倍率に応じた大きさの所定領域に対してズーム処理が行われ、画像信号Ｖｄを構成する各画素データが生成される。

クラスタップ選択部４１２では、画像信号Ｖｃに基づいて、画像信号Ｖｄにおける注目位置の周辺に位置する複数の画素データがクラスタップのデータとして選択的に抽出される。この複数の画素データは空間クラス検出部４１３に供給される。この空間クラス検出部４１３では、クラスタップのデータとしての複数の画素データに、例えば１ビットＡＤＲＣのデータ圧縮処理が施されて、画像信号Ｖｄにおける注目位置の画素データが属する空間クラスを表すクラスコードＣＬａが得られる。

また、動きクラス検出部４１４には、入力端子４０５から、例えば中心予測タップにおける画素の動きベクトルＭＶが供給される。この動きクラス検出部４１４では、その動きベクトルＭＶの大きさがクラス分けされ、注目位置の画素データが属する動きクラスを表すクラスコードＣＬｂが得られる。

空間クラス検出部４１３で取得されたクラスコードＣＬａおよび動きクラス検出部４１４で取得されたクラスコードＣＬｂは、それぞれクラス統合部４１５に供給される。このクラス統合部４１５では、クラスコードＣＬａ，ＣＬｂが統合され、画像信号Ｖｄにおける注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる。このクラスコードＣＬは係数データ生成部４１６に供給される。

この係数データ生成部４１６には、制御部４０４から、画像信号Ｖｄにおける注目位置の位相情報ｈ，ｖが供給される。これにより、係数データ生成部４１６では、画像信号Ｖｄにおける注目位置に対応して、ＲＯＭ４１７からクラスコードＣＬが表すクラスの係数種データｗi0〜ｗi9が読み出され、位相情報ｈ，ｖの値を用いて、（１２）式の生成式に基づいて、係数データＷｉが生成される。この係数データＷｉは、推定予測演算部４１８に供給される。

予測タップ選択部４１１では、画像信号Ｖｃに基づいて、画像信号Ｖｄにおける注目位置の周辺に位置する複数の画素データｘｉが予測タップのデータとして選択的に抽出される。この複数の画素データは推定予測演算部４１８に供給される。

推定予測演算部４１８では、予測タップのデータとしての複数の画素データｘｉと、係数データＷｉとを用い、（１１）式の推定式に基づいて、画像信号Ｖｄにおける注目位置の画素データｙが算出される。この場合、注目位置を、画像信号Ｖｄの全画素位置に順次変化させていくことで、画像信号Ｖｄの全画素位置の画素データｙが求められる。

推定予測演算部４１８で求められた画像信号Ｖｄの全画素位置の画素データｙは、バッファメモリ４１９に供給されて一時的に記憶される。このバッファメモリ４１９に記憶された画像信号Ｖｄを構成する各画素データは、その後に適宜なタイミングで読み出されて出力端子４０３に出力される。

次に、上述した処理本体部４０２のＲＯＭ４１７に記憶される、係数種データの生成方法について説明する。この係数種データは、学習によって生成される。ここでは、（１２）式の生成式における係数データである係数種データｗi0〜ｗi9を求める例を示すものとする。

ここで、以下の説明のため、（１３）式のように、ｔj（ｊ＝０〜９）を定義する。

ｔ0＝１，ｔ1＝ｖ，ｔ2＝ｈ，ｔ3＝ｖ2，ｔ4＝ｖｈ，ｔ5＝ｈ2，ｔ6＝ｖ3，
ｔ7＝ｖ2ｈ，ｔ8＝ｖｈ2，ｔ9＝ｈ3
・・・（１３）

この（１３）式を用いると、（１２）式は、（１４）式のように書き換えられる。

最終的に、学習によって未定係数ｗijを求める。すなわち、クラス毎に、生徒信号の画素データと教師信号の画素データとを用いて、二乗誤差を最小にする係数値を決定する。いわゆる最小二乗法による解法である。学習数をｍ、ｋ（１≦ｋ≦ｍ）番目の学習データにおける残差をｅk、二乗誤差の総和をＥとすると、（１１）式および（１２）式を用いて、Ｅは（１５）式で表される。ここで、ｘikは生徒画像のｉ番目の予測タップ位置におけるｋ番目の画素データ、ｙkはそれに対応する教師画像のｋ番目の画素データを表している。

最小二乗法による解法では、（１５）式のｗijによる偏微分が０になるようなｗijを求める。これは、（１６）式で示される。

以下、（１７）式、（１８）式のように、Ｘipjq、Ｙipを定義すると、（１６）式は、行列を用いて（１９）式のように書き換えられる。

この方程式は一般に正規方程式と呼ばれている。この正規方程式は、掃き出し法（Gauss-Jordanの消去法）等を用いて、ｗijについて解かれ、係数種データが算出される。

図１７は、上述した係数種データの生成方法の概念を示している。教師信号としてのＨＤ信号（１０５０ｉ信号）から生徒信号としてのＳＤ信号（５２５ｉ信号）を生成する。５２５ｉ信号は、ライン数が５２５本でインタレース方式の画像信号を意味している。１０５０ｉ信号は、ライン数が１０５０本でインタレース方式の画像信号を意味している。

図１８は、ＳＤ信号（５２５ｉ信号）とＨＤ信号（１０５０ｉ信号）の画素位置関係を示している。ここで、大きなドットが５２５ｉ信号の画素であり、小さなドットが１０５０ｉ信号の画素である。また、奇数フィールドの画素位置を実線で示し、偶数フィールドの画素位置を破線で示している。

このＳＤ信号の位相を垂直方向に８段階、水平方向に８段階にシフトさせて、８×８＝６４種類のＳＤ信号ＳＤ1〜ＳＤ64を生成する。位相シフトの方法の例として、例えばオーバーサンプリングフィルタから欲しい位相だけを抜き出す方法がある。

図１９は、垂直方向への８段階の位相シフト状態Ｖ１〜Ｖ８を示している。ここでは、ＳＤ信号の垂直方向の画素間隔は１６であり、下方向が正の方向とされている。また、「ｏ」は奇数フィールドを、「ｅ」は偶数フィールドを表している。

Ｖ１の状態はＳＤ信号のシフト量が０とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、４，０，−４，−８の位相を持つようになる。Ｖ２の状態はＳＤ信号のシフト量が１とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、７，３，−１，−５の位相を持つようになる。Ｖ３の状態はＳＤ信号のシフト量が２とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、６，２，−２，−６の位相を持つようになる。Ｖ４の状態はＳＤ信号のシフト量が３とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、５，１，−３，−７の位相を持つようになる。

Ｖ５の状態はＳＤ信号のシフト量が４とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、４，０，−４，−８の位相を持つようになる。Ｖ６の状態はＳＤ信号のシフト量が５とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、７，３，−１，−５の位相を持つようになる。Ｖ７の状態はＳＤ信号のシフト量が６とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、６，２，−２，−６の位相を持つようになる。Ｖ８の状態はＳＤ信号のシフト量が７とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、５，１，−３，−７の位相を持つようになる。

図２０は、水平方向への８段階の位相シフト状態Ｈ１〜Ｈ８を示している。ここではＳＤ信号の水平方向の画素間隔は１６であり、右方向が正の方向とされている。

Ｈ１の状態はＳＤ信号のシフト量が０とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、０,−８の位相を持つようになる。Ｈ２の状態はＳＤ信号のシフト量が１とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、７,−１の位相を持つようになる。Ｈ３の状態はＳＤ信号のシフト量が２とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、６,−２の位相を持つようになる。Ｈ４の状態はＳＤ信号のシフト量が３とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、５，−３の位相を持つようになる。

Ｈ５の状態はＳＤ信号のシフト量が４とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、４，−４の位相を持つようになる。Ｈ６の状態はＳＤ信号のシフト量が５とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、３，−５の位相を持つようになる。Ｈ７の状態はＳＤ信号のシフト量が６とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、２，−６の位相を持つようになる。Ｈ８の状態はＳＤ信号のシフト量が７とされたものであり、この場合、ＨＤ信号の画素は、ＳＤ信号の画素に対して、１,−７の位相を持つようになる。

図２１は、上述したように垂直方向に８段階、水平方向に８段階にシフトさせて得られた６４種類のＳＤ信号に関し、ＳＤ信号の画素を中心とした場合のＨＤ信号の位相を示している。すなわち、ＳＤ信号の画素に対して、ＨＤ信号の画素は図中の「●」で示す位相を持つようになる。

図２２は、上述した概念で係数種データを生成する係数種データ生成装置４５０の構成を示している。

この係数種データ生成装置４５０は、教師信号としてのＨＤ信号（１０５０i信号）が入力される入力端子４５１と、位相シフト回路４５２とを有している。この位相シフト回路４５２は、入力端子４５１に入力されたＨＤ信号に対して、水平および垂直方向にオーバーサンプリングフィルタをかけ、欲しい位相を抜き出して、生徒信号としてのＳＤ信号（５２５ｉ信号）を取得する。この位相シフト回路４５２には、水平方向、垂直方向への位相シフト量を指定するパラメータＨ，Ｖが入力される。この場合、位相シフト回路４５２では、ＳＤ信号の位相が、垂直方向に８段階、水平方向に８段階にシフトするようにされ、合計６４種類のＳＤ信号が生成される（図１７参照）。

また、係数種データ生成装置４５０は、予測タップ選択部４５３と、クラスタップ選択部４５４とを有している。これら予測タップ選択部４５３およびクラスタップ選択部４５４は、それぞれ、位相シフト回路４５２より出力されるＳＤ信号に基づいて、ＨＤ信号おける注目位置の周辺に位置する複数の画素データを選択的に抽出する。これら予測タップ選択部４５３、クラスタップ選択部４５４は、それぞれ、上述した処理本体部４０２（図１３参照）の予測タップ選択部４１１、クラスタップ選択部４１２に対応するものである。

また、係数種データ生成装置４５０は、動きベクトル検出部４５５を有している。この動きベクトル検出部４５５は、位相シフト回路４５２より出力されるＳＤ信号に基づいて、中心予測タップにおける画素の動きベクトルＭＶを検出する。上述したタップ選択部４５３，４５４における予測タップ、クラスタップのパターンは、動きベクトルＭＶに応じて変更される。

また、係数種データ生成装置４５０は、空間クラス検出部４５６を有している。この空間クラス検出部４５６は、クラスタップ選択部４５４で選択的に抽出されるクラスタップのデータとしての複数の画素データを処理して、ＨＤ信号における注目位置の画素データが属する空間クラスを表すクラスコードＣＬａを取得する。この空間クラス検出部４５６は、上述した処理本体部４０２の空間クラス検出部４１３に対応するものである。

また、係数種データ生成装置４５０は、動きクラス検出部４５７と、クラス統合部４５８とを有している。この動きクラス検出部４５７は、動きベクトル検出部４５５で検出された中心予測タップにおける画素の動きベクトルＭＶの大きさをクラス分けし、ＨＤ信号における注目位置の画素データが属する動きクラスを表すクラスコードＣＬｂを取得する。

クラス統合部４５８は、上述した空間クラス検出部４５６で取得されたクラスコードＣＬａおよび動きクラス検出部４５７で取得されたクラスコードＣＬｂとを統合して、ＨＤ信号における注目位置の画素データが属するクラスを示すクラスコードＣＬを取得する。これら動きクラス検出部４５７およびクラス統合部４５８は、それぞれ、上述した処理本体部４０２の動きクラス検出部４１４およびクラス統合部４１５に対応するものである。

また、係数種データ生成装置４５０は、教師タップ選択部４５９を有している。この教師タップ選択部４５９は、ＨＤ信号から、注目位置の画素データを選択的に抽出する。

また、係数種データ生成装置４５０は、正規方程式生成部４６０を有している。この正規方程式生成部４６０は、教師タップ選択部４５９で選択的に抽出された、ＨＤ信号における各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応して予測タップ選択部４５３で選択的に抽出された、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙにそれぞれ対応してクラス統合部４５８で得られたクラスコードＣＬと、各注目位置の画素データｙの水平、垂直の位相ｈ，ｖとから、クラス毎に、係数種データｗi0〜ｗi9を得るための正規方程式（（１９）式参照）を生成する。

この場合、一個の画素データｙとそれに対応するｎ個の画素データｘｉとの組み合わせで一個の学習データが生成される。位相シフト回路４５２へのパラメータＨ，Ｖが順次変更されていき、垂直、水平の位相シフト値が段階的に変化した６４種類のＳＤ信号が順次生成されていく。これにより、正規方程式生成部４６０では、多くの学習データが登録された正規方程式が生成される。このようにＳＤ信号を順次生成して学習データを登録することで、水平、垂直の任意の位相の画素データを得るための係数種データを求めることが可能となる。

また、係数種データ生成装置４５０は、係数種データ決定部４６１と、係数種メモリ４６２とを有している。係数種データ決定部４６１は、正規方程式生成部４６０から正規方程式のデータの供給を受け、当該正規方程式を掃き出し法等によって解き、クラス毎に、係数種データｗi0〜ｗi9を求める。係数種メモリ４６２は、この係数種データｗi0〜ｗi9を格納する。

図２２に示す係数種データ生成装置４５０の動作を説明する。力端子４５１には教師信号としてのＨＤ信号（１０５０ｉ信号）が入力される。このＨＤ信号に対して、位相シフト回路４５２では、水平および垂直方向にオーバーサンプリングフィルタがかけられ、欲しい位相が抜き出されてＳＤ信号（５２５ｉ信号）が得られる。この場合、ＳＤ信号として垂直方向に８段階、水平方向に８段階にシフトされたものが順次生成される。

クラスタップ選択部４５４では、位相シフト回路４５２で生成される各ＳＤ信号から、ＨＤ信号における注目位置の周辺に位置する複数の画素データが、クラスタップのデータとして選択的に抽出される。この複数の画素データは、空間クラス検出部４５６に供給される。そして、空間クラス検出部４５６では、各画素データに対してＡＤＲＣ等のデータ圧縮処理が施されて、ＨＤ信号における注目位置の画素データが属する空間クラスを表すクラスコードＣＬａが生成される。このクラスコードＣＬａは、クラス統合部４５８に供給される。

また、動きクラス検出部４５７には、動きベクトル検出部４５５で得られた中心予測タップにおける画素の動きベクトルＭＶが供給される。この動きクラス検出部４５７では、その動きベクトルＭＶの大きさがクラス分けされ、ＨＤ信号における注目位置の画素データが属する動きクラスを表すクラスコードＣＬｂが得られる。このクラスコードＣＬｂは、クラス統合部４５８に供給される。

クラス統合部４５８では、クラスコードＣＬａ，ＣＬｂが統合され、ＨＤ信号における注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる。このクラスコードＣＬは正規方程式生成部４６０に供給される。

予測タップ選択部４５３では、位相シフト回路４５２で生成される各ＳＤ信号から、ＨＤ信号における注目位置の周辺に位置する複数の画素データｘｉが、予測タップのデータとして選択的に抽出される。この複数の画素データｘｉは、正規方程式生成部４６０に供給される。また、教師タップ選択部４５９では、ＨＤ信号から、注目位置の画素データが選択的に抽出される。この画素データｙは、正規方程式生成部４６０に供給される。

そして、正規方程式生成部４６０では、教師タップ選択部４５９で選択的に抽出された、ＨＤ信号における各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応して予測タップ選択部４５３で選択的に抽出された、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙにそれぞれ対応してクラス統合部４５８で得られたクラスコードＣＬと、各注目位置の画素データｙの水平、垂直の位相ｈ，ｖとから、クラス毎に、係数種データｗi0〜ｗi9を得るための正規方程式（（１９）式参照）が生成される。

そして、係数種データ決定部４６１でその正規方程式が解かれ、各クラスの係数種データｗi0〜ｗi9が求められ、その係数種データｗi0〜ｗi9はクラス別にアドレス分割された係数種メモリ４６２に記憶される。

このように、図２２に示す係数種データ生成装置４５０においては、図１３に示すズーム処理部３１５の処理本体部４０２におけるＲＯＭ４１７に記憶される、各クラスの係数種データｗi0〜ｗi9を生成できる。

次に、図１に示すテレビ受信機１００の動作例について説明する。

「実施例１」
図２３は、この実施例１における、リモコン５００の構成を示している。この場合、リモコン５００は、ベースユニット５１０に、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０およびパン・チルト・ズーム用ユニット５４０が、この順に接続されて構成されている。この場合の優先順位は、パン・チルト・ズーム用ユニット５４０、解像度・ノイズ感調整用ユニット５３０および追尾ズーム用ユニット５２０の順となる。

上述したように、リモコン５００の各ユニットが操作される際にベースユニット５１０の送信部５１０ａから出力されるリモコン信号ＳＭに含まれる送信データ（図４参照）には、操作データと共に、各機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）の接続順を示すデータが含まれており、このデータは、受信機本体部１００Ａにおいては、各機能操作ユニットの優先順位を示す順位データとして機能する。

いま、パン・チルト・ズーム用ユニット５４０のモードボタンが押され、パン・チルト・ズームモードに入った場合を考える。ズームレバー（右のスティック）を上方向に倒し、ズーム位置レバー（左のスティック）を調整すると、所望のズーム位置がズーム（拡大）されてディスプレイ部１２２の画面に表示される。一般に、ズームされると、解像度感が低下し、ノイズが目立ってくる傾向がある。

そこで、ユーザは解像度・ノイズ感調整用ユニット５３０を操作し、解像度を高める操作およびノイズを除去（抑圧）する操作を行う。この操作方法は、全てユーザの意思で行なうものであるが、この発明においては、パラメータ調整の自動化を試みる。

ユーザがリモコン５００を組み立てる際、図２３のように、パン・チルト・ズーム用ユニット５４０のすぐ上に解像度・ノイズ感調整用ユニット５３０を配置し、その上に追尾ズーム用ユニット５２０を配置するということは、パン・チルト・ズーム操作の次に解像度・ノイズ感の調整に関心があり、その次に追尾ズーム操作に関心がある可能性が高いと考えられる。

つまり、図２３に示すように組み立てられたリモコン５００で、ユーザがパン・チルト・ズームの操作を行った場合、出力されたズーム画像（拡大画像）に最適な解像度・ノイズ感調整を自動で行ない、次に追尾ズームの処理を施すことができれば、ユーザの満足度はより高いものとなる。

実施例１は、ユーザがパン・チルト・ズーム操作を行なうだけで解像度・ノイズ感が自動調整され、さらに追尾点の提示も自動で行われる例である。つまり、パン・チルト・ズーム用操作ユニット５４０による操作があった場合、このパン・チルト・ズーム用ユニット５４０を起点（最優先）とし、その上に接続された解像度・ノイズ感調整用ユニット５３０を第二優先、さらにその上に接続された追尾ズーム用ユニット５２０を第三優先と考え、受信機本体部１００Ａでは、優先順位に従って処理が行われていく。

図２４のフローチャートは、リモコン５００が図２３に示すように組み立てられており、パン・チルト・ズーム用ユニット５４０によるパン・チルト・ズーム操作があった場合における、受信機本体部１００Ａの処理手順を示している。

まず、受信機本体部１００Ａは、ステップＳＴ１において、パン・チルト・ズーム／追尾ズーム処理部１１７で、パン・チルト・ズーム用ユニット５４０の操作データに基づいて、パン・チルト・ズーム処理を行う。この場合、パン・チルト・ズーム／追尾ズーム処理部１１７で処理されたＳＤ信号は、セレクタ１１５を通じてＤＲＣ−ボリウム１１６に供給されて、ＨＤ信号に変換される。これにより、ディスプレイ部１２２には、パン・チルト・ズーム処理された画像信号による画像が表示される。

次に、受信機本体部１００Ａは、ステップＳＴ２において、ダイナミックレンジ／周波数解析部１１８で、パン・チルト・ズーム処理された画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。

次に、受信機本体部１００Ａは、ステップＳＴ３において、システムコントローラ１０１で、ステップＳＴ２で取得されたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、ＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚを変更して、解像度・ノイズ感を調整する。

ここで、ダイナミックレンジは解像度感を、周波数はノイズ感を示す指標となる。ダイナミックレンジが大きい場合は、表示画像の解像度感が高いと判断され、解像度感を下げる方向に画質パラメータｒが変更される。逆に、ダイナミックレンジが小さい場合は、表示画像の解像度感が低いと判断され、解像度感を上げる方向に画質パラメータｒが変更される。また、高域成分が多い場合はノイズ感が高いと判断され、ノイズを抑圧する方向に画質パラメータｚが変更される。逆に、高域成分が少ない場合はノイズ感が低いと判断され、ノイズを抑圧しない方向に画質パラメータｚが変更される。

このようにシステムコントローラ１０１で変更された画質パラメータｒ，ｚは、図２５に矢印Ｐ１で示すように、ディスプレイ部１２２の画面上に、画像に重ねて表示される。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、画質パラメータｒ，ｚを表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

次に、受信機本体部１００Ａは、ステップＳＴ４において、動き位置検出部１２３で、パン・チルト・ズーム処理された画像信号から動き位置を検出し、動き位置情報ＭＩを取得する。そして、受信機本体部１００Ａは、ステップＳＴ５において、ステップＳＴ４で取得された動き位置情報ＭＩに基づいて、図２５に矢印Ｐ２で示すように、ディスプレイ部１２２の画面上の動き位置に対応して、画像に重ねて、追尾候補点を示すカーソル（図２５では「＋」のマーク）を表示する。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、追尾候補点を示すカーソルを表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

なお、図２５においては、追尾候補点を１個だけ示しているが、動き位置情報ＭＩに複数個の位置情報が含まれる場合には、複数個の追尾候補点が表示される。このように追尾候補点が表示されている状態で、ユーザが、例えば、追尾ズーム用ユニット５２０により所定の追尾操作点を選択して追尾開始の操作を行うことで、追尾が開始される。すなわち、パン・チルト・ズーム／追尾ズーム処理部１１７は、パン・チルト・ズーム機能におけるズーム処理から、追尾ズーム機能における追尾ズーム処理に移る。

図２６のフローチャートは、図２４のフローチャートのステップＳＴ２およびステップＳＴ３の処理の詳細を示している。

まず、受信機本体部１００Ａは、ステップＳＴ１１において、処理を開始し、その後に、ステップＳＴ１２の処理に移る。このステップＳＴ１２において、受信機本体部１００Ａは、ダイナミックレンジ／周波数解析部１１８で、検出対象のフレーム画像信号（輝度信号）に対して、８画素×８画素のブロック切り出しを行う。なお、この例では、ブロックサイズを８画素×８画素としたが、システムの計算能力に応じてブロックサイズを変更してもよい。

そして、受信機本体部１００Ａは、ステップＳＴ１３において、ダイナミックレンジ／周波数解析部１１８で、ブロック内のダイナミックレンジおよび高域周波数成分を検出してメモリに蓄積する。例えば、ブロック内のダイナミックレンジは、ブロック内の画素信号の最小値および最大値の差分である。また、例えば、ブロック内の高域周波数成分は、ブロックに対してＤＣＴ変換処理を行って得られた高域側の１／４の領域にある１６個のＤＣＴ係数である。

次に、受信機本体部１００Ａは、ステップＳＴ１４において、現在のブロックが最後のブロックであるか否かを判定する。最後のブロックでないとき、受信機本体部１００Ａは、ステップＳＴ１２の処理に戻り、次の、ブロックの処理に移る。ステップＳＴ１４で現在のブロックが最後のブロックであるとき、受信機本体部１００Ａは、ステップＳＴ１５の処理に移る。

このステップＳＴ１５において、受信機本体部１００Ａは、ダイナミックレンジ／周波数解析部１１８で、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを求める。この場合、ダイナミックレンジ／周波数解析部１１８は、メモリに蓄積されている各ブロック内の画素信号の最小値および最大値の差分の平均値を求めて、ダイナミックレンジ情報ＤＩとする。また、ダイナミックレンジ／周波数解析部１１８は、メモリに蓄積されている各ブロックの高域側の１／４の領域にある１６個のＤＣＴ係数の絶対値をそれぞれ加算し、その後に１６個の加算値の平均値を求めて、周波数情報ＦＩとする。

次に、受信機本体部１００Ａは、ステップＳＴ１６において、システムコントローラ１０１で、ステップＳＴ１５で求めたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、画質パラメータｒ，ｚの値を決定する。上述したように、画質パラメータｒは解像度を決めるパラメータであり、画質パラメータｚはノイズ除去度（ノイズ抑圧度）を決めるパラメータである。ここで、パラメータｒ，ｚは０〜１の値をとるものとする。

例えば、システムコントローラ１０１は、ステップＳＴ１５で求めたダイナミックレンジ情報ＤＩを最大値が１となるように正規化し、正規化後の値がＤＩ′であるとき、（１−ＤＩ′）をパラメータｒとする。これにより、ダイナミックレンジが大きいときは解像度値が小さく、逆にダイナミックレンジが小さいときは解像度値が大きく設定される。

また、例えば、システムコントローラ１０１は、ステップＳＴ１５で求めた周波数情報ＦＩを最大値が１となるように正規化し、正規化後の値をＦＩ′であるとき、ＦＩ′をパラメータｚとする。これにより、ノイズが多いときにはノイズ抑圧値が大きく、逆にノイズが少ないときにはノイズ抑圧値が小さく設定される。

次に、受信機本体部１００Ａは、ステップＳＴ１７において、システムコントローラ１０１で、ＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚの値を、ステップＳＴ１６で決定した値とする。そして、その後、受信機本体部１００Ａは、ステップＳＴ１８において、処理を終了する。

なお、図２４のフローチャートにおいて、ステップＳＴ２およびステップＳＴ３の処理の後に、ステップＳＴ４およびステップＳＴ５の処理が行われるように説明したが、ステップＳＴ２およびステップＳＴ３の処理は、例えば、ステップＳＴ４およびステップＳＴ５の処理が行われる際にも並行して行われるようにしてもよい。その場合、図２６のフローチャートに示す処理は、フレーム毎、あるいはシーンチェンジ毎など所定フレーム毎に行われ、システムコントローラ１０１からＤＲＣ−ボリウム処理部１１６に供給される画質パラメータｒ，ｚの値は、画像内容に応じて順次更新される。

図２７のフローチャートは、図２４のフローチャートのステップＳＴ４およびステップＳＴ５の処理の詳細を示している。

まず、受信機本体部１００Ａは、ステップＳＴ２１において、処理を開始し、その後に、ステップＳＴ２２の処理に移る。このステップＳＴ２２において、受信機本体部１００Ａは、ダイナミックレンジ／周波数解析部１１８で、検出対象のフレーム画像信号（輝度信号）に対して、８画素×８画素のブロック切り出しを行う。なお、この例では、ブロックサイズを８画素×８画素としたが、システムの計算能力に応じてブロックサイズを変更してもよい。

そして、受信機本体部１００Ａは、ステップＳＴ２３において、動き位置検出部１２３で、ステップＳＴ２２で切り出したブロック（注目ブロック）に関して、前フレームの同一箇所付近のブロック探索を行う。ブロック探索の手法として、例えばブロック間差分等を用いる。動き位置検出部１２３は、注目ブロックの周辺に存在する前フレームの数ブロックを探索し、差分が閾値以下で、かつ最小となる周辺ブロックを検出して動きベクトルを求め、注目ブロックの位置情報と動きベクトルとをメモリに蓄積しておく。なお、動き位置検出部１２３は、上述の注目ブロックの周辺に存在する前フレームの数ブロックの探索において、差分が閾値以下となる周辺ブロックがないときは、当該注目ブロックは無効とする。

次に、受信機本体部１００Ａは、ステップＳＴ２４において、現在のブロックが最後のブロックであるか否かを判定する。最後のブロックでないとき、受信機本体部１００Ａは、ステップＳＴ１２の処理に戻り、次の、ブロックの処理に移る。ステップＳＴ２４で現在のブロックが最後のブロックであるとき、受信機本体部１００Ａは、ステップＳＴ２５の処理に移る。

このステップＳＴ２５において、受信機本体部１００Ａは、動き位置検出部１２３で、メモリに蓄積されている各ブロックから追尾候補点を決定する。この場合、動き位置検出部１２３は、動きベクトルが大きい、例えば上位１０ブロックを追尾候補点として決定し、その追尾候補点の位置情報を含む動き位置情報ＭＩをシステムコントローラ１０１に供給する。

次に、受信機本体部１００Ａは、ステップＳＴ２６において、システムコントローラ１０１で、ディスプレイ部１２２の画面上に、画像に重ねて、追尾候補点をカーソルで表示する。この場合、システムコントローラ１０１は、動き位置検出部１２３から供給される動き位置情報ＭＩに基づいて、ＯＳＤ部１２０から追尾候補点を表示する表示信号ＳＣＨを発生させて、画像信号に合成（重畳）する。

受信機本体部１００Ａは、ステップＳＴ２６の処理の後、ステップＳＴ２７において、処理を終了する。

なお、図２７のフローチャートに示す処理も、上述した図２６のフローチャートに示す処理と同様に、フレーム毎、あるいはシーンチェンジ毎など所定フレーム毎に行われ、ディスプレイ部１２２の画面上に、画像に重ねて表示される追尾候補点を示すカーソルの位置は順次更新される。

図２８は、実施例１および後述する他の実施例で処理される内容の一覧を示している。上述の場合は、通常モード１５１からパン・チルト・ズーム手動調整１５７が行なわれる。その後、解像度・ノイズ感自動調整１５３が行なわれ、動きベクトルによる追尾候補点表示１５８が行われる。

なお、通常モード(追尾ズーム／解像度・ノイズ感調整／パン・チルト・ズームのいずれでもないモード)から解像度・ノイズ感調整モードに入った場合、受信機本体部１００Ａは、上述したような優先処理は行なわず、解像度・ノイズ感処理のみ行なう。また、通常モードから追尾ズームモードに入った場合も同様に、追尾ズーム処理のみ行なう。図２８でいえば、通常モード１５１から解像度・ノイズ感手動調整１５４、あるいは通常モード１５１から追尾ズーム手動調整１５９の処理が行われる。

また、パン・チルト・ズームモードに入っている状態で、ユーザが解像度・ノイズ感調整操作を行なった場合、受信機本体部１００Ａは、通常の解像度・ノイズ感調整と同様に、調整値をそのまま反映させる。その後、受信機本体部１００Ａは、自動的に、図２４のフローチャートのステップＳＴ４およびステップＳＴ５の処理に移行し、追尾候補点を表示する。また、パン・チルト・ズームモードに入っている状態で、ユーザが追尾ズーム操作を行なった場合、通常の追尾ズームモードと同様に、受信機本体部１００Ａは、追尾されたオブジェクトを画面中央に表示する。

「実施例２」
図２９は、この実施例２における、リモコン５００の構成を示している。この場合、リモコン５００は、ベースユニット５１０に、解像度・ノイズ感調整用ユニット５３０、追尾ズーム用ユニット５２０およびパン・チルト・ズーム用ユニット５４０が、この順に接続されて構成されている。この場合の優先順位は、パン・チルト・ズーム用ユニット５４０、追尾ズーム用ユニット５２０および解像度・ノイズ感調整用ユニット５３０の順となる。

上述したように、リモコン５００の各ユニットが操作される際にベースユニット５１０の送信部５１０ａから出力されるリモコン信号ＳＭに含まれる送信データ（図４参照）には、操作データと共に、各機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）の接続順を示すデータが含まれており、このデータは、受信機本体部１００Ａにおいては、各機能操作ユニットの優先順位を示す順位データとして機能する。

ユーザがリモコン５００を組み立てる際、図２９のように、パン・チルト・ズーム用ユニット５４０のすぐ上に追尾ズーム用ユニット５２０を配置し、その上に解像度・ノイズ感調整用ユニット５３０を配置するということは、パン・チルト・ズーム操作の次に追尾ズーム操作に関心があり、その次に解像度・ノイズ感の調整に関心がある可能性が高いと考えられる。

実施例２は、ユーザがパン・チルト・ズーム操作を行なうだけで、追尾候補点の提示および画質パラメータｒ，ｚの推奨値の提示が自動で行われる例である。つまり、パン・チルト・ズーム用操作ユニット５４０による操作があった場合、このパン・チルト・ズーム用ユニット５４０を起点（最優先）とし、その上に接続された追尾ズーム用ユニット５２０を第二優先、さらにその上に接続された解像度・ノイズ感調整用ユニット５３０を第三優先と考え、受信機本体部１００Ａでは、優先順位に従って処理が行われていく。

図３０のフローチャートは、リモコン５００が図２９に示すように組み立てられており、パン・チルト・ズーム用ユニット５４０によるパン・チルト・ズーム操作があった場合における、受信機本体部１００Ａの処理手順を示している。

まず、受信機本体部１００Ａは、ステップＳＴ３１において、パン・チルト・ズーム／追尾ズーム処理部１１７で、パン・チルト・ズーム用ユニットの操作データに基づいて、パン・チルト・ズーム処理を行う。この場合、パン・チルト・ズーム／追尾ズーム処理部１１７で処理されたＳＤ信号は、セレクタ１１５を通じてＤＲＣ−ボリウム１１６に供給されて、ＨＤ信号に変換される。これにより、ディスプレイ部１２２には、パン・チルト・ズーム処理された画像信号による画像が表示される。

次に、受信機本体部１００Ａは、ステップＳＴ３２において、動き位置検出部１２３で、パン・チルト・ズーム処理された画像信号から動き位置を検出し、動き位置情報ＭＩを取得する。そして、受信機本体部１００Ａは、ステップＳＴ３３において、ステップＳＴ３２で取得された動き位置情報ＭＩに基づいて、図３０に矢印Ｐ３で示すように、ディスプレイ部１２２の画面上の動き位置に対応して、画像に重ねて、追尾候補点を示すカーソル（図２５では「＋」のマーク）を表示する。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、追尾候補点を示すカーソルを表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

なお、図３０においては、追尾候補点を１個だけ示しているが、動き位置情報ＭＩに複数個の位置情報が含まれる場合には、複数個の追尾候補点が表示される。このように追尾候補点が表示されている状態で、ユーザが、例えば、追尾ズーム用ユニット５２０により所定の追尾候補点を選択して追尾開始の操作を行うことで、追尾が開始される。すなわち、パン・チルト・ズーム／追尾ズーム処理部１１７は、パン・チルト・ズーム機能におけるズーム処理から、追尾ズーム機能における追尾ズーム処理に移る。

なお、上述のステップＳＴ３２およびステップＳＴ３３の処理の詳細は、図２７のフローチャートに示す通りである。

次に、受信機本体部１００Ａは、ステップＳＴ３４において、ダイナミックレンジ／周波数解析部１１８で、パン・チルト・ズーム処理された画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。

次に、受信機本体部１００Ａは、ステップＳＴ３５において、システムコントローラ１０１で、ステップＳＴ３４で取得されたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、解像度・ノイズ感を調整するためにＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚの推奨値を提示する。

ここで、ダイナミックレンジは解像度感を、周波数はノイズ感を示す指標となる。ダイナミックレンジが大きい場合は、表示画像の解像度感が高いと判断され、解像度感を下げる方向に画質パラメータｒの推奨値が決定される。逆に、ダイナミックレンジが小さい場合は、表示画像の解像度感が低いと判断され、解像度感を上げる方向に画質パラメータｒの推奨値が決定される。また、高域成分が多い場合はノイズ感が高いと判断され、ノイズを抑圧する方向に画質パラメータｚの推奨値が決定される。逆に、高域成分が少ない場合はノイズ感が低いと判断され、ノイズを抑圧しない方向に画質パラメータｚの推奨値が決定される。

このようにシステムコントローラ１０１で決定された画質パラメータｒ，ｚの推奨値は、図３０に矢印Ｐ４で示すように、ディスプレイ部１２２の画面上に、画像に重ねて表示される。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、画質パラメータｒ，ｚの推奨値を表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

なお、上述のステップＳＴ３４およびステップＳＴ３５の処理の詳細は、図２６のフローチャートにおける処理と以下の点を除き、同じである。すなわち、ステップＳＴ１７の画質パラメータｒ，ｚの設定が、画質パラメータｒ，ｚの推奨値の提示に変わるだけである。このように画質パラメータｒ，ｚの推奨値が表示されている状態で、ユーザが、例えば、解像度・ノイズ感調整ユニット５３０により、当該画質パラメータｒ，ｚの推奨値を採用する操作を行うことで、当該画質パラメータｒ，ｚの推奨値がシステムコントローラ１０１からＤＲＣ−ボリウム処理部１１６に設定され、解像度・ノイズ感の調整が行われる。

上述の処理を、図２８で説明する。通常モード１５１からパン・チルト・ズーム手動調整１５７が行なわれる。その後、動きベクトルによる追尾候補点表示１５８が行なわれ、解像度・ノイズ感推奨値提示１５２が行われる。

なお、通常モード(追尾ズーム／解像度・ノイズ感調整／パン・チルト・ズームのいずれでもないモード)から解像度・ノイズ感調整モードに入った場合、受信機本体部１００Ａは、上述したような優先処理を行なわず、解像度・ノイズ感処理のみ行なう。通常モードから追尾ズームモードに入った場合も同様に、追尾ズーム処理のみ行なう。図２８でいえば、通常モード１５１から解像度・ノイズ感手動調整１５４、あるいは通常モード１５１から追尾ズーム手動調整１５９の処理が実行されることになる。

また、パン・チルト・ズームモードに入っている状態で、ユーザが追尾ズーム操作を行なった場合、受信機本体部１００Ａは、通常の追尾ズームモードと同様、追尾されたオブジェクトを画面中央に拡大表示する。その後、受信機本体部１００Ａは、自動的に、図３０のフローチャートのステップＳＴ３４およびステップＳＴ３５の処理に移行し、解像度・ノイズ感の推奨値を提示する。

また、パン・チルト・ズームモードに入っている状態で、ユーザが解像度・ノイズ感調整操作を行なった場合、受信機本体部１００Ａは、通常の解像度・ノイズ感調整と同様に、調整値をそのまま反映させる。

「実施例３」
図３２は、この実施例３における、リモコン５００の構成を示している。この場合、リモコン５００は、ベースユニット５１０に、パン・チルト・ズーム用ユニット５４０、追尾ズーム用ユニット５２０および解像度・ノイズ感調整用ユニット５３０が、この順に接続されて構成されている。この場合の優先順位は、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０およびパン・チルト・ズーム用ユニット５４０の順となる。

上述したように、リモコン５００の各ユニットが操作される際にベースユニット５１０の送信部５１０ａから出力されるリモコン信号ＳＭに含まれる送信データ（図４参照）には、操作データと共に、各機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）の接続順を示すデータが含まれており、このデータは、受信機本体部１００Ａにおいては、各機能操作ユニットの優先順位を示す順位データとして機能する。

いま、追尾ズーム用ユニット５２０のモードボタンが押され、追尾ズームモードに入った場合を考える。ユーザが追尾すべきオブジェクトに対応した所定点を指定することで、オブジェクトの追尾が行われ、当該オブジェクトがズーム（拡大）されてディスプレイ部１２２の画面に表示される。一般に、追尾ズームされると、解像度感が低下し、ノイズが目立ってくる傾向がある。

そこで、ユーザは解像度・ノイズ感調整用ユニット５３０を操作し、解像度を高める操作およびノイズを除去（抑圧）する操作を行う。この操作方法は、全てユーザの意思で行なうものであるが、この発明においては、パラメータ調整の自動化を試みる。

ユーザがリモコン５００を組み立てる際、図３２のように、追尾ズーム用ユニット５２０のすぐ上に解像度・ノイズ感調整用ユニット５３０を配置し、その上にパン・チルト・ズーム用ユニット５４０を配置するということは、追尾ズーム操作の次に解像度・ノイズ感の調整に関心があり、その次にパン・チルト・ズーム操作に関心がある可能性が高いと考えられる。

つまり、図３２に示すように組み立てられたリモコン５００で、ユーザが追尾ズームの操作を行った場合、出力されたズーム画像（拡大画像）に最適な解像度・ノイズ感調整を自動で行ない、次にパン・チルト・ズームの処理を施すことができれば、ユーザの満足度はより高いものとなる。

実施例３は、ユーザが追尾ズーム操作を行なうだけで、解像度・ノイズ感が自動調整され、さらに推奨ズーム率の提示が自動で行われる例である。つまり、追尾ズーム用操作ユニット５２０による操作があった場合、この追尾ズーム用ユニット５２０を起点（最優先）とし、その上に接続された解像度・ノイズ感調整用ユニット５３０を第二優先、さらにその上に接続されたパン・チルト・ズーム用ユニット５４０を第三優先と考え、受信機本体部１００Ａでは、優先順位に従って処理が行われていく。

図３３のフローチャートは、リモコン５００が図３２に示すように組み立てられており、追尾ズーム用ユニット５２０による追尾ズーム操作があった場合における、受信機本体部１００Ａの処理手順を示している。

まず、受信機本体部１００Ａは、ステップＳＴ４１において、パン・チルト・ズーム／追尾ズーム処理部１１７で、追尾ズーム用ユニット５２０の操作データに基づいて、追尾ズーム処理を行う。この場合、パン・チルト・ズーム／追尾ズーム処理部１１７で処理されたＳＤ信号は、セレクタ１１５を通じてＤＲＣ−ボリウム１１６に供給されて、ＨＤ信号に変換される。これにより、ディスプレイ部１２２には、図３４（ａ）に矢印Ｐ５で示すように、追尾されているオブジェクトが常に中央に表示される。

次に、受信機本体部１００Ａは、ステップＳＴ４２において、ダイナミックレンジ／周波数解析部１１８で、追尾ズーム処理された画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。

次に、受信機本体部１００Ａは、ステップＳＴ４３において、システムコントローラ１０１で、ステップＳＴ４２で取得されたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、ＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚを変更して、解像度・ノイズ感を調整する。

ここで、ダイナミックレンジは解像度感を、周波数はノイズ感を示す指標となる。ダイナミックレンジが大きい場合は、表示画像の解像度感が高いと判断され、解像度感を下げる方向に画質パラメータｒが変更される。逆に、ダイナミックレンジが小さい場合は、表示画像の解像度感が低いと判断され、解像度感を上げる方向に画質パラメータｒが変更される。また、高域成分が多い場合はノイズ感が高いと判断され、ノイズを抑圧する方向に画質パラメータｚが変更される。逆に、高域成分が少ない場合はノイズ感が低いと判断され、ノイズを抑圧しない方向に画質パラメータｚが変更される。

このようにシステムコントローラ１０１で変更された画質パラメータｒ，ｚは、図２５（ａ）に矢印Ｐ６で示すように、ディスプレイ部１２２の画面上に、画像に重ねて表示される。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、画質パラメータｒ，ｚを表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

なお、上述のステップＳＴ４２およびステップＳＴ４３の処理の詳細は、図２６のフローチャートに示す通りである。

次に、受信機本体部１００Ａは、ステップＳＴ４４において、ダイナミックレンジ／周波数解析部１１８で、ズーム率毎のダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。この場合、ダイナミックレンジ／周波数解析部１１８は、パン・チルト・ズーム／追尾ズーム処理部１１７から複数段階のズーム率で処理された画像信号の供給を受けて解析処理を行う。

次に、受信機本体部１００Ａは、ステップＳＴ４５において、システムコントローラ１０１で、ステップＳＴ４４の解析処理結果に基づいて、推奨ズーム率を決定して提示する。この場合、例えば、ダイナミックレンジ情報ＤＩが閾値以上で、かつ周波数情報ＦＩが閾値以下であることを満足するズーム率のうち、最大のズーム率を推奨ズーム率に決定する。また、推奨ズーム率の提示は、例えば、図３４（ｂ）に矢印Ｐ７で示すように、推奨ズーム率に対応したズーム枠を追尾対象のオブジェクト上に表示することで、行われる。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、ズーム枠を表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

この状態で、ユーザが推奨ズーム率の採用を選択するとき、システムコントローラ１０１からパン・チルト・ズーム／追尾ズーム処理部１１７に与えられるズーム率情報ＭＧＩは推奨ズーム率を示すように変更される。これにより、ディスプレイ部１２２には、図３４（ｃ）に矢印Ｐ８で示すように、推奨ズーム率に対応したズーム枠内の画像が画面全体に拡大されて表示される。

図３５のフローチャートは、図３３のフローチャートのステップＳＴ４４およびステップＳＴ４５の処理の詳細を示している。

まず、受信機本体部１００Ａは、ステップＳＴ５１において、処理を開始し、その後に、ステップＳＴ５２の処理に移る。このステップＳＴ５２において、受信機本体部１００Ａは、システムコントローラ１０１で、追尾ズーム処理された画像を基準として、ズーム率を設定する。最初は、０．１倍おきの複数段階のズーム率のうち、最低のズーム率（ズーム率１＝等倍）に設定する。

次に、受信機本体部１００Ａは、ステップＳＴ５３において、ダイナミックレンジ／周波数解析部１１８で、検出対象のフレーム画像信号（輝度信号）に対して、８画素×８画素のブロック切り出しを行う。なお、この例では、ブロックサイズを８画素×８画素としたが、システムの計算能力に応じてブロックサイズを変更してもよい。

そして、受信機本体部１００Ａは、ステップＳＴ５４において、ダイナミックレンジ／周波数解析部１１８で、ブロック内のダイナミックレンジおよび高域周波数成分を検出してメモリに蓄積する。例えば、ブロック内のダイナミックレンジは、ブロック内の画素信号の最小値および最大値の差分である。また、例えば、ブロック内の高域周波数成分は、ブロックに対してＤＣＴ変換処理を行って得られた高域側の１／４の領域にある１６個のＤＣＴ係数である。

次に、受信機本体部１００Ａは、ステップＳＴ５５において、現在のブロックが最後のブロックであるか否かを判定する。最後のブロックでないとき、受信機本体部１００Ａは、ステップＳＴ５３の処理に戻り、次の、ブロックの処理に移る。ステップＳＴ５５で現在のブロックが最後のブロックであるとき、受信機本体部１００Ａは、ステップＳＴ５６の処理に移る。

このステップＳＴ５６において、受信機本体部１００Ａは、現在のズーム率が最高倍率（例えば、３倍）であるか否かを判定する。最高倍率でないとき、受信機本体部１００Ａは、ステップＳＴ５２の処理に戻り、システムコントローラ１０１で、倍率を０．１だけアップした次の段階のズーム率を設定し、上述したと同様の処理を行う。

ステップＳＴ５６で現在のズーム率が最高倍率であるとき、受信機本体部１００Ａは、ステップＳＴ５７の処理に移る。このステップＳＴ５７において、受信機本体部１００Ａは、ダイナミックレンジ／周波数解析部１１８で、倍率毎に、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを求める。この場合、ダイナミックレンジ／周波数解析部１１８は、各段階の倍率毎に、メモリに蓄積されている各ブロック内の画素信号の最小値および最大値の差分の平均値を求めて、ダイナミックレンジ情報ＤＩとする。また、ダイナミックレンジ／周波数解析部１１８は、倍率毎に、メモリに蓄積されている各ブロックの高域側の１／４の領域にある１６個のＤＣＴ係数の絶対値をそれぞれ加算し、その後に１６個の加算値の平均値を求めて、周波数情報ＦＩとする。

次に、受信機本体部１００Ａは、ステップＳＴ５８において、システムコントローラ１０１で、ステップＳＴ５７で求めた各倍率のダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、推奨のズーム倍率を決定する。この場合、システムコントローラ１０１は、例えば、ダイナミックレンジ情報ＤＩが閾値以上で、かつ周波数情報ＦＩが閾値以下であることを満足するズーム率のうち、最大のズーム率を推奨ズーム率に決定する。

次に、受信機本体部１００Ａは、ステップＳＴ５９において、ユーザに、ステップＳＴ５８で決定した推奨ズーム率を提示する。この場合、システムコントローラ１０１は、ＯＳＤ部１２０から、推奨ズーム率に対応したズーム枠を表示するための表示信号ＳＣＨを発生させ、合成部１２１で画像信号に合成（重畳）する。

受信機本体部１００Ａは、ステップＳＴ５９の処理の後、ステップＳＴ６０において、処理を終了する。

なお、図３３のフローチャートにおいて、ステップＳＴ４２およびステップＳＴ４３の処理の後に、ステップＳＴ４４およびステップＳＴ４５の処理が行われるように説明したが、ステップＳＴ４２およびステップＳＴ４３の処理は、例えば、ステップＳＴ４４およびステップＳＴ４５の処理が行われる際にも並行して行われるようにしてもよい。

その場合、図２６のフローチャートに示す処理は、フレーム毎、あるいはシーンチェンジ毎など所定フレーム毎に行われ、システムコントローラ１０１からＤＲＣ−ボリウム処理部１１６に供給される画質パラメータｒ，ｚの値は、画像内容に応じて順次更新される。

上述の処理を、図２８で説明する。通常モード１５１から追尾ズーム手動調整１５９が行なわれる。その後、解像度・ノイズ感自動調整１５３が行なわれ、推奨ズーム率提示・選択１５５が実行される。

なお、通常モード(追尾ズーム／解像度・ノイズ感調整／パン・チルト・ズームのいずれでもないモード)から解像度・ノイズ感調整モードに入った場合、受信機本体部１００Ａは、上述したような優先処理を行なわず、解像度・ノイズ感処理のみ行なう。また、通常モードからパン・チルト・ズームモードに入った場合も同様に、受信機本体部１００Ａは、パン・チルト・ズーム処理のみ行なう。図２８でいえば、通常モード１５１から解像度・ノイズ感手動調整１５４、あるいは通常モード１５１からパン・チルト・ズーム手動調整１５７の処理が実行されることになる。

また、追尾ズームモードに入っている状態で、ユーザがパン・チルト・ズーム操作を行なった場合、受信機本体部１００Ａは、ディスプレイ部１２２に表示する画像をユーザの操作通りに変化させ、操作値をそのまま反映させる。図２８でいえば、追尾ズーム手動調整１５９を行なっている最中に、パン・チルト・ズーム手動調整１５７の処理が実行されることになる。

また、追尾ズームモードに入っている状態で、ユーザが解像度・ノイズ感調整操作を行なった場合、受信機本体部１００Ａは、その後、自動的に、図３３のフローチャートのステップＳＴ４４およびステップＳＴ４５の処理に移行し、推奨ズーム率を提示する。図２８でいえば、追尾ズーム手動調整1５９を行なっている最中に、解像度・ノイズ感手動調整１５４が行なわれる。その後、推奨ズーム率提示・選択１５５が行われる。

「実施例４」
図３６は、この実施例４における、リモコン５００の構成を示している。この場合、リモコン５００は、ベースユニット５１０に、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０および追尾ズーム用ユニット５２０が、この順に接続されて構成されている。この場合の優先順位は、追尾ズーム用ユニット５２０、パン・チルト・ズーム用ユニット５４０および解像度・ノイズ感調整用ユニット５３０の順となる。

上述したように、リモコン５００の各ユニットが操作される際にベースユニット５１０の送信部５１０ａから出力されるリモコン信号ＳＭに含まれる送信データ（図４参照）には、操作データと共に、各機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）の接続順を示すデータが含まれており、このデータは、受信機本体部１００Ａにおいては、各機能操作ユニットの優先順位を示す順位データとして機能する。

ユーザがリモコン５００を組み立てる際、図３６のように、追尾ズーム用ユニット５２０のすぐ上にパン・チルト・ズーム用ユニット５４０を配置し、その上に解像度・ノイズ感調整用ユニット５３０を配置するということは、追尾ズーム操作の次にパン・チルト・ズーム操作に関心があり、その次に解像度・ノイズ感の調整に関心がある可能性が高いと考えられる。

実施例４は、ユーザが追尾ズーム操作を行なうだけで、ズーム候補の提示および画質パラメータｒ，ｚの推奨値の提示が自動で行われる例である。つまり、追尾ズーム用操作ユニット５２０による操作があった場合、この追尾ズーム用ユニット５２０を起点（最優先）とし、その上に接続されたパン・チルト・ズーム用ユニット５４０を第二優先、さらにその上に接続された解像度・ノイズ感調整用ユニット５３０を第三優先と考え、受信機本体部１００Ａでは、優先順位に従って処理が行われていく。

図３７のフローチャートは、リモコン５００が図３６に示すように組み立てられており、追尾ズーム用ユニット５２０による追尾ズーム操作があった場合における、受信機本体部１００Ａの処理手順を示している。

まず、受信機本体部１００Ａは、ステップＳＴ６１において、パン・チルト・ズーム／追尾ズーム処理部１１７で、追尾ズーム用ユニット５２０の操作データに基づいて、追尾ズーム処理を行う。この場合、パン・チルト・ズーム／追尾ズーム処理部１１７で処理されたＳＤ信号は、セレクタ１１５を通じてＤＲＣ−ボリウム１１６に供給されて、ＨＤ信号に変換される。これにより、ディスプレイ部１２２には、図３８（ａ）に矢印Ｐ９で示すように、追尾されているオブジェクトが常に中央に表示される。

次に、受信機本体部１００Ａは、ステップＳＴ６２において、オブジェクト検出部１１９で、追尾ズーム処理された画像信号に基づいて、画像に含まれているオブジェクトを検出し、オブジェクト情報ＯＩを取得する。この場合、オブジェクト検出部１１９は、例えば、フレーム画像信号に対して隣接画素差分を求めて画面内輪郭を検出することで、画像に含まれるオブジェクトを検出する。

次に、受信機本体部１００Ａは、ステップＳＴ６３において、ステップＳＴ６２で取得されたオブジェクト情報ＯＩに基づいて、ズーム候補を提示する。ズーム候補の提示は、例えば、図３８（ａ）に矢印Ｐ１０で示すように、画像上に、検出されたオブジェクトを含むズーム枠を表示することで、行われる。この場合、システムコントローラ１０１は、ＯＳＤ部１２０から、ズーム候補を示すズーム枠を表示するための表示信号ＳＣＨを発生させ、合成部１２１で画像信号に合成（重畳）する。

なお、図３８（ａ）においては、ズーム候補を１個だけ示しているが、ステップＳＴ６２で取得されるオブジェクト情報ＯＩに複数個のオブジェクト情報が含まれる場合には、複数個のズーム候補（ズーム枠）が表示される。

このようにズーム候補が表示されている状態で、ユーザが、例えば、パン・チルト・ズーム用ユニット５４０により所定のズーム候補を選択することで、図３８（ｂ）に矢印Ｐ１１で示すように、ディスプレイ部１２２に、選択されたズーム候補のオブジェクトが画面全体に拡大表示される。

次に、受信機本体部１００Ａは、ステップＳＴ６４において、ダイナミックレンジ／周波数解析部１１８で、追尾ズーム処理された画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。

次に、受信機本体部１００Ａは、ステップＳＴ６５において、システムコントローラ１０１で、ステップＳＴ６４で取得されたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、解像度・ノイズ感を調整するためにＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚの推奨値を提示する。

ここで、ダイナミックレンジは解像度感を、周波数はノイズ感を示す指標となる。ダイナミックレンジが大きい場合は、表示画像の解像度感が高いと判断され、解像度感を下げる方向に画質パラメータｒの推奨値が決定される。逆に、ダイナミックレンジが小さい場合は、表示画像の解像度感が低いと判断され、解像度感を上げる方向に画質パラメータｒの推奨値が決定される。また、高域成分が多い場合はノイズ感が高いと判断され、ノイズを抑圧する方向に画質パラメータｚの推奨値が決定される。逆に、高域成分が少ない場合はノイズ感が低いと判断され、ノイズを抑圧しない方向に画質パラメータｚの推奨値が決定される。

このようにシステムコントローラ１０１で決定された画質パラメータｒ，ｚの推奨値は、図３８（ｃ）に矢印Ｐ１２で示すように、ディスプレイ部１２２の画面上に、画像に重ねて表示される。この場合、システムコントローラ１０１の制御により、ＯＳＤ部１２０から、画質パラメータｒ，ｚの推奨値を表示するための表示信号ＳＣＨが発生され、この表示信号ＳＣＨは合成部１２１で画像信号に合成（重畳）される。

なお、上述のステップＳＴ６４およびステップＳＴ６５の処理の詳細は、図２６のフローチャートにおける処理と以下の点を除き、同じである。すなわち、ステップＳＴ１７の画質パラメータｒ，ｚの設定が、画質パラメータｒ，ｚの推奨値の提示に変わるだけである。このように画質パラメータｒ，ｚの推奨値が表示されている状態で、ユーザが、例えば、解像度・ノイズ感調整ユニット５３０により、当該画質パラメータｒ，ｚの推奨値を採用する操作を行うことで、当該画質パラメータｒ，ｚの推奨値がシステムコントローラ１０１からＤＲＣ−ボリウム処理部１１６に設定され、解像度・ノイズ感の調整が行われる。

図３９のフローチャートは、図３７のフローチャートのステップＳＴ６２およびステップＳＴ６３の処理の詳細を示している。

まず、受信機本体部１００Ａは、ステップＳＴ７１において、処理を開始し、その後に、ステップＳＴ７２の処理に移る。このステップＳＴ７２において、受信機本体部１００Ａは、オブジェクト検出部１１９で、フレーム画像信号に対して隣接画素差分を求めて画面内輪郭を検出することで、画像に含まれるオブジェクトを検出する。そして、受信機本体部１００Ａは、ステップＳＴ７３において、オブジェクト検出部１１９で、ステップＳＴ７２で検出されたオブジェクトのサイズを計算する。

次に、受信機本体部１００Ａは、ステップＳＴ７４において、オブジェクト検出部１１９で、ステップＳＴ７２で検出されたオブジェクトのうち、サイズの大きな方から所定個数をズーム候補に決定し、オブジェクト情報ＯＩを得る。

次に、受信機本体部１００Ａは、ステップＳＴ７５において、ステップＳＴ７４で決定したズーム候補を提示する。この場合、システムコントローラ１０１は、ＯＳＤ部１２０から、ズーム候補のオブジェクトを含むズーム枠を表示するための表示信号ＳＣＨを発生させ、合成部１２１で画像信号に合成（重畳）する。

受信機本体部１００Ａは、ステップＳＴ７５の処理の後、ステップＳＴ７６において、処理を終了する。

上述の処理を、図２８で説明する。通常モード１５１から追尾ズーム手動調整１５９が行なわれる。その後、ズーム候補提示・選択１５６の処理が行なわれ、解像度・ノイズ感推奨値提示１５２が行われる。

なお、通常モード(追尾ズーム／解像度・ノイズ感調整／パン・チルト・ズームのいずれでもないモード)から解像度・ノイズ感調整モードに入った場合、受信機本体部１００Ａは、上述したような優先処理は行なわず、解像度・ノイズ感調整処理のみ行なう。また、通常モードからパン・チルト・ズームモードに入った場合も同様に、受信機本体部１００Ａは、パン・チルト・ズーム処理のみ行なう。図２８でいえば、通常モード１５１から解像度・ノイズ感手動調整１５４、あるいは通常モード１５１からパン・チルト・ズーム手動調整１５７の処理が行われることになる。

また、追尾ズームモードに入っている状態で、ユーザがパン・チルト・ズーム操作を行なった場合、受信機本体部１００Ａは、ディスプレイ部１２２に表示する画像をユーザの操作通りに変化させ、操作値をそのまま反映させる。図２８でいえば、追尾ズーム手動調整１５９を行なっている最中に、パン・チルト・ズーム手動調整１５７の処理が実行されることになる。

この場合、受信機本体部１００Ａは、新たに中央に位置したオブジェクトを追尾する状態となる。さらに、その後、受信機本体部１００Ａは、図３７のフローチャートのステップＳＴ６４およびステップＳＴ６５の処理を行って、パン・チルト・ズーム処理によって変更された画面に最適な画質パラメータｒ，ｚが設定される。図２８でいえば、追尾ズーム手動調整１５９が行われている最中に、パン・チルト・ズーム手動調整１５７が実行されると、画面中央に位置したオブジェクトが追尾され、さらに、解像度・ノイズ感自動調整１５３が行われる。

また、追尾ズームモードに入っている状態で、ユーザが画質パラメータｒ，ｚを変更した場合、受信機本体部１００Ａは、その操作値がそのまま反映させる。図２８でいえば、追尾ズーム手動調整１５９が行われている最中に、解像度・ノイズ感手動調整１５４の処理が行われる。

「実施例５」
上述の実施例１から実施例４は、リモコン５００が、ベースユニット５１０と、３個の機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）により構成された場合を示した。しかし、リモコン５００が、ベースユニット５１０と、２個の機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０のうち２個）により構成される場合も考えられる。実施例５は、リモコン５００が、ベースユニット５１０と、２個の機能操作ユニットにより構成される場合の例である。

図４０は、実施例５における、リモコン５００の構成を示している。この場合、リモコン５００は、ベースユニット５１０に、解像度・ノイズ感調整用ユニット５３０およびパン・チルト・ズーム用ユニット５４０が、この順に接続されて構成されている。この場合の優先順位は、パン・チルト・ズーム用ユニット５４０および解像度・ノイズ感調整用ユニット５３０の順となる。

図４１のフローチャートは、リモコン５００が図４０に示すように組み立てられており、パン・チルト・ズーム用ユニット５４０によるパン・チルト・ズーム操作があった場合における、受信機本体部１００Ａの処理手順を示している。

まず、受信機本体部１００Ａは、ステップＳＴ８１において、パン・チルト・ズーム／追尾ズーム処理部１１７で、パン・チルト・ズーム用ユニット５４０の操作データに基づいて、パン・チルト・ズーム処理を行う。この場合、パン・チルト・ズーム／追尾ズーム処理部１１７で処理されたＳＤ信号は、セレクタ１１５を通じてＤＲＣ−ボリウム１１６に供給されて、ＨＤ信号に変換される。これにより、ディスプレイ部１２２には、パン・チルト・ズーム処理された画像信号による画像が表示される。

次に、受信機本体部１００Ａは、ステップＳＴ８２において、ダイナミックレンジ／周波数解析部１１８で、パン・チルト・ズーム処理された画像信号を解析し、ダイナミックレンジ情報ＤＩおよび周波数情報ＦＩを取得する。

次に、受信機本体部１００Ａは、ステップＳＴ８３において、システムコントローラ１０１で、ステップＳＴ８２で取得されたダイナミックレンジ情報ＤＩおよび周波数情報ＦＩに基づいて、ＤＲＣ−ボリウム処理部１１６に供給する画質パラメータｒ，ｚを変更して、解像度・ノイズ感を調整する。

なお、図４１のフローチャートのステップＳＴ８１からステップＳＴ８３は、上述の図２４のフローチャートのステップＳＴ１〜ステップＳＴ３に対応しており、各ステップにおける処理の詳細は、図２４のフローチャートで説明したと同様である。

以上説明したように、図１に示すテレビ受信機１００においては、リモコン５００からは、各ユニットの操作データと共に、機能操作ユニット（追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０）の優先順位を示す順位データが含まれる送信データが送信される。また、操作対象の機器としての受信機本体部１００Ａでは、送信データに含まれる操作データが最優先の機能操作ユニットの操作データであるとき、この操作データに基づいて画像信号の処理が行われ、その後に、順位データで示される順に他の機能操作ユニットの操作データが設定されて処理が行われる。したがって、テレビ受信機１００の受信機本体部１００Ａでは、機能操作が適切な順序で行われ、ユーザにとって、快適、かつ正確な操作が可能となる。

また、図１に示すテレビ受信機１００において、リモコン５００は、ベースユニット５１０に対する、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０の接続順によって、各機能操作ユニットの優先順位が設定される。このように、接続順によって優先順位が設定されるものにあっては、ユーザは、各機能操作ユニットの接続順を変更するだけで、優先順位を容易に変更できる。

なお、各機能操作ユニットの優先順位が、各機能操作ユニットに設定される優先順位設定値に基づいて設定される構成としてもよい。図４２は、その場合における、リモコン５００のユニット間の配線模式図を示している。この図４２において、図３と対応する部分には同一符号を付して示している。

図４２に示すリモコン５００においては、追尾ズーム用ユニット５２０、解像度・ノイズ感調整用ユニット５３０、パン・チルト・ズーム用ユニット５４０のそれぞれに優先順位を設定するための例えばディップスイッチ等の設定手段５２５，５３５，５４５が備えられる。追尾ズーム用ユニット５２０の設定手段５２５で設定された２ビットの設定データは、データライン５６１，５６２を介して、ベースユニット５１０のＭＰＵ５１０ｄに供給される。また、解像度・ノイズ感調整用ユニット５３０の設定手段５３５で設定された２ビットの設定データは、データライン５６４，５６５を介して、ベースユニット５１０のＭＰＵ５１０ｄに供給される。さらに、パン・チルト・ズーム用ユニット５４０の設定手段５３５で設定された２ビットの設定データは、データライン５６７，５６８を介して、ベースユニット５１０のＭＰＵ５１０ｄに供給される。

このように、各機能操作ユニットに備えられる設定手段により優先順位が設定されるものにあっては、ユーザは、各機能操作ユニットの接続順を変更することなく、設定手段により優先順位を任意に変更できる。

なお、上述実施の形態においては、この発明をテレビ受信機１００に適用したものを示したが、この発明は、リモコンを用いた操作を行うその他のビデオ機器、あるいはオーディオ機器等にも同様に適用できることは勿論である。

この発明は、リモコン操作が可能なビデオ機器、オーディオ機器等に適用できる。

この発明の実施の形態としてのテレビ受信機の構成例を示すブロック図である。 テレビ受信機を構成するリモコン（リモートコントローラ）を説明するための図である。 リモコンを構成する各ユニット間の配線模式図を示す図である。 リモコンのベースユニットの送信部から送信されるリモコン信号に含まれる送信データの構造例を示す図である。 テレビ受信機の受信機本体部内のＤＲＣ−ボリウム処理部の構成例を示すブロック図である。 ＳＤ信号（５２５ｉ信号）とＨＤ信号（１０５０ｉ信号）の画素位置関係を示す図である。 予測タップ、クラスタップのパターン例を示す図である。 ＨＤ信号の単位画素ブロック内の４画素の中心予測タップからの位相ずれを示す図である。 ＤＲＣ−ボリウム処理部で使用する係数種データの生成方法を説明するための図である。 ＤＲＣ−ボリウム処理部内のＲＯＭに格納される係数種データの生成装置の構成例を示すブロック図である。 テレビ受信機の受信機本体部内のパン・チルト・ズーム／追尾ズーム処理部の構成例を示すブロック図である。 追尾ズーム処理時におけるオブジェクト領域の指定動作を説明するための図である。 パン・チルト・ズーム／追尾ズーム処理部内のズーム処理部の構成例を示すブロック図である。 倍率情報で示す倍率が１．２５倍であるときの入力（画像信号Ｖｃ）と出力（画像信号Ｖｄ）の画素位置関係を示す図である。 ズーム倍率と、出力（画像信号Ｖｄ）の各注目位置の画素データを得るための入力（画像信号Ｖｃ）の処理領域との関係を示す図である。 ズーム倍率が２である場合におけるオブジェクト領域の重心位置と処理領域との関係例を示す図である。 ズーム処理部で使用する係数種データの生成方法を説明するための図である。 ＳＤ信号（５２５ｉ信号）とＨＤ信号（１０５０ｉ信号）の画素位置関係を示す図である。 ＳＤ信号の垂直方向への８段階の位相シフト状態Ｖ１〜Ｖ８を示す図である。 ＳＤ信号の水平方向への８段階の位相シフト状態Ｈ１〜Ｈ８を示す図である。 垂直方向に８段階、水平方向に８段階にシフトさせて得られた６４種類のＳＤ信号（５２５ｉ信号）に関し、ＳＤ信号の画素を中心とした場合のＨＤ信号（１０５０ｉ信号）の位相を示す図である。 ズーム処理部内のＲＯＭに格納される係数種データの生成装置の構成例を示すブロック図である。 リモコンの組み立て構成例を示す図である。 ベースユニットに、追尾ズーム用ユニット、解像度・ノイズ感調整用ユニットおよびパン・チルト・ズーム用ユニットがこの順に接続されて構成されたリモコンを使用する場合であって、パン・チルト・ズーム用ユニットによるパン・チルト・ズーム操作があった場合における受信機本体部の処理手順を示すフローチャートである。 ディスプレイ部の表示例を示す図である。 ダイナミックレンジ情報、周波数情報の取得および解像度・ノイズ感の自動調整の処理手順を示すフローチャートである。 動き位置検出および追尾候補点表示の処理手順を示すフローチャートである。 各実施例においてテレビ受信機の受信機本体部で処理される内容を示す図である。 リモコンの組み立て構成例を示す図である。 ベースユニットに、解像度・ノイズ感調整用ユニット、追尾ズーム用ユニットおよびパン・チルト・ズーム用ユニットがこの順に接続されて構成されたリモコンを使用する場合であって、パン・チルト・ズーム用ユニットによるパン・チルト・ズーム操作があった場合における受信機本体部の処理手順を示すフローチャートである。 ディスプレイ部の表示例を示す図である。 リモコンの組み立て構成例を示す図である。 ベースユニットに、パン・チルト・ズーム用ユニット、解像度・ノイズ感調整用ユニットおよび追尾ズーム用ユニットがこの順に接続されて構成されたリモコンを使用する場合であって、追尾ズーム用ユニットによる追尾ズーム操作があった場合における受信機本体部の処理手順を示すフローチャートである。 ディスプレイ部の表示例を示す図である。 ズーム率毎のダイナミックレンジ情報、周波数情報の取得および推奨ズーム率提示の処理手順を示すフローチャートである。 リモコンの組み立て構成例を示す図である。 ベースユニットに、解像度・ノイズ感調整用ユニット、パン・チルト・ズーム用ユニットおよび追尾ズーム用ユニットがこの順に接続されて構成されたリモコンを使用する場合であって、追尾ズーム用ユニットによる追尾ズーム操作があった場合における受信機本体部の処理手順を示すフローチャートである。 ディスプレイ部の表示例を示す図である。 画面内オブジェクト検出およびズーム候補提示の処理手順を示すフローチャートである。 リモコンの組み立て構成例を示す図である。 ベースユニットに、解像度・ノイズ感調整用ユニットおよびパン・チルト・ズーム用ユニットがこの順に接続されて構成されたリモコンを使用する場合であって、パン・チルト・ズーム用ユニットによるパン・チルト・ズーム操作があった場合における受信機本体部の処理手順を示すフローチャートである。 リモコンを構成する各ユニット間の配線模式図を示す図である。

符号の説明

１００・・・テレビ受信機、１００Ａ・・・受信機本体部、１０１・・・システムコントローラ、１０２・・・リモコン信号受信部、１１１・・・受信アンテナ、１１２・・・チューナ、１１３・・・外部入力端子、１１４・・・切換スイッチ、１１５・・・セレクタ、１１６・・・ＤＲＣ−ボリウム処理部、１１７・・・パン・チルト・ズーム／追尾ズーム処理部、１１８・・・ダイナミックレンジ／周波数解析部、１１９・・・オブジェクト検出部、１２０・・・ＯＳＤ部、１２１・・・合成部、１２２・・・ディスプレイ部、１２３・・・動き位置検出部、２０１・・・入力端子、２０２・・・処理本体部、２０３・・・出力端子、２０４・・・制御部、１０６・・・入力端子、２１１・・・バッファメモリ、２１２・・・予測タップ選択部、２１３・・・クラスタップ選択部、２１４・・・クラス検出部、２１５・・・係数データ生成部、２１６・・・ＲＯＭ、２１７・・・推定予測演算部、２１８・・・後処理部、３０１・・・入力端子、３０２・・・処理本体部、３０３・・・出力端子、３０４・・・制御部、３０５・・・入力端子、３１１・・・バッファメモリ、３１２・・・検出領域決定部、３１３・・・オブジェクト特定部、３１４・・・動きベクトル検出部、３１５・・・ズーム処理部、４０１・・・入力端子、４０２・・・処理本体部、４０３・・・出力端子、４０４・・・制御部、４０５〜４０８・・・入力端子、４１１・・・予測タップ選択部、４１２・・・クラスタップ選択部、４１３・・・空間クラス検出部、４１４・・・動きクラス検出部、４１５・・・クラス統合部、４１６・・・係数データ生成部、４１７・・・ＲＯＭ、４１８・・・推定予測演算部、４１９・・・バッファメモリ、５００・・・リモコン（リモートコントローラ）、５１０・・・ベースユニット、５１０ａ・・・送信部、５１０ｂ・・・接合凹部、５１０ｃ・・・バッテリ（電源）、５１０ｄ・・・ＭＰＵ、５１１・・・電極部、５２０・・・追尾ズーム用ユニット、５２０ａ・・・接合凸部、５２０ｂ・・・接合凹部、５２１，５２２・・・電極部、５２３・・・ＬＳＩ、５２５・・・設定手段、５３０・・・解像度・ノイズ感調整用ユニット、５３１，５３２・・・電極部、５３３・・・ＬＳＩ、５３５・・・設定手段、５４０・・・パン・チルト・ズーム用ユニット、５４１，５４２・・・電極部、５４３・・・ＬＳＩ、５４５・・・設定手段、５５２・・・電源ライン、５５３・・・接地ライン、５６１〜５６９・・・データライン、５７０・・・バスライン

Claims (12)

1. リモートコントロール信号の送信部を有するベースユニットと、
   上記ベースユニットに接続され、互いに異なる機能を操作する複数の機能操作ユニットと、
   上記複数の機能操作ユニットの優先順位を設定する優先順位設定部とを備え、
   上記ベースユニットの送信部は、上記各ユニットが操作されるとき、操作データと共に、上記優先順位設定部で設定された上記複数の機能操作ユニットの優先順位を示す順位データを含む送信データを送信する
   リモートコントローラ。
2. 上記優先順位設定部は、上記ベースユニットに対する上記複数の機能操作ユニットの接続順に基づいて優先順位を設定する
   請求項１に記載のリモートコントローラ。
3. 上記機能操作ユニットは、
   自身が接続するユニットから、該ユニットを特定するデータを取得するデータ取得部と、
   自身に接続されるユニットに、自身を特定するデータを供給するデータ供給部とを有し、
   上記複数の機能操作ユニットの優先順位を示す順位データは、上記複数の機能操作ユニットのデータ取得部で取得されたデータにより構成される
   請求項２に記載のリモートコントローラ。
4. 上記複数の機能操作ユニットは、互いに異なるラインにより、上記データ取得部で取得されたデータを上記ベースユニットに送る
   請求項３に記載のリモートコントローラ。
5. 上記優先順位設定部は、上記複数の機能操作ユニットの優先順位設定値に基づいて優先順位を設定する
   請求項１に記載のリモートコントローラ。
6. 操作データおよび複数の機能操作ユニットの優先順位を示す順位データを含む送信データを受信する送信データ受信部と、
   入力画像信号を処理して出力画像信号を得る画像信号処理部と、
   上記送信データ受信部で受信された送信データに基づいて、上記画像信号処理部の動作を制御する制御部とを備え、
   上記制御部は、
   上記送信データに含まれる順位データに基づいて上記送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断するとき、
   該操作データに基づいて上記画像信号処理部の動作を制御し、その後に、上記順位データで示される順に他の機能操作ユニットの操作データを設定して処理する
   画像信号処理装置。
7. 上記制御部は、少なくとも、上記生成した他の機能操作ユニットの操作データに基づいて、上記画像信号処理部の動作を制御するか、あるいは上記生成した他の機能操作ユニットの操作データをユーザに提示する表示信号を上記出力画像信号に重畳する
   請求項６に記載の画像信号処理装置。
8. 上記画像信号処理部は、画質調整機能部と、パン・チルト・ズーム機能部と、追尾ズーム機能部とを有し、
   上記送信データ受信部で受信される送信データに含まれる順位データがパン・チルト・ズーム用ユニット、画質調整用ユニットおよび追尾ズーム用ユニットの順の優先順位を示し、上記送信データ受信部で受信された操作データが上記パン・チルト・ズーム用ユニットの操作データであるとき、
   上記制御部は、上記送信データに含まれる操作データに基づいて、上記画像信号処理部の上記パン・チルト・ズーム機能の動作を制御し、
   その後に、上記出力画像信号を解析して、上記画質調整用ユニットの操作データを作成し、該操作データに基づいて上記画像信号処理部の画質調整機能を制御し、
   その後に、上記出力画像信号に基づいて画面内の各部の動きから、追尾候補点を検出し、該追尾候補点を表示する表示信号を上記出力画像信号に重畳する
   請求項７に記載の画像信号処理装置。
9. 上記画像信号処理部は、画質調整機能部と、パン・チルト・ズーム機能部と、追尾ズーム機能部とを有し、
   上記送信データ受信部で受信される送信データに含まれる順位データがパン・チルト・ズーム用ユニット、追尾ズーム用ユニットおよび画質調整用ユニットの順の優先順位を示し、上記送信データ受信部で受信された操作データが上記パン・チルト・ズーム用ユニットの操作データであるとき、
   上記制御部は、上記送信データに含まれる操作データに基づいて、上記画像信号処理部の上記パン・チルト、ズーム機能の動作を制御し、
   その後に、上記出力画像信号に基づいて画面内の各部の動きから、追尾候補点を検出し、該追尾候補点を表示する表示信号を上記出力画像信号に重畳し、
   その後に、上記出力画像信号を解析して、上記画質調整用ユニットの推奨操作データを作成し、該推奨操作データを表示する表示信号を上記出力画像信号に重畳する
   請求項７に記載の画像信号処理装置。
10. 上記画像信号処理部は、画質調整機能部と、パン・チルト・ズーム機能部と、追尾ズーム機能部とを有し、
    上記送信データ受信部で受信される送信データに含まれる順位データが追尾ズーム用ユニット、画質調整用ユニットおよびパン・チルト・ズーム用ユニットの順の優先順位を示し、上記送信データ受信部で受信された操作データが上記追尾ズーム用ユニットの操作データであるとき、
    上記制御部は、上記送信データに含まれる操作データに基づいて、上記画像信号処理部の上記追尾ズーム機能の動作を制御し、
    その後に、上記出力画像信号を解析して、上記画質調整用ユニットの操作データを作成し、該操作データに基づいて上記画像信号処理部の画質調整機能を制御し、
    その後に、ズーム率毎の画像信号を順次作成して解析し、推奨ズーム率を求め、該推奨ズーム率を表示する表示信号を上記出力画像信号に重畳する
    請求項７に記載の画像信号処理装置。
11. 上記画像信号処理部は、画質調整機能と、パン・チルト・ズーム機能と、追尾ズーム機能とを有し、
    上記送信データ受信部で受信される送信データに含まれる順位データが追尾ズーム用ユニット、パン・チルト・ズーム用ユニットおよび画質調整用ユニットの順の優先順位を示し、上記送信データ受信部で受信された操作データが上記追尾ズーム用ユニットの操作データであるとき、
    上記制御部は、上記送信データに含まれる操作データに基づいて、上記画像信号処理部の上記追尾ズーム機能の動作を制御し、
    その後に、上記出力画像信号に基づいて、オブジェクトを抽出して、ズーム候補を表示する表示信号を上記出力画像信号に重畳し、
    その後、上記表示されたズーム候補のいずれかが選択されたとき、上記出力画像信号を解析して、上記画質調整用ユニットの推奨操作データを作成し、該推奨操作データを表示する表示信号を上記出力画像信号に重畳する
    請求項７に記載の画像信号処理装置。
12. 操作データおよび複数の機能操作ユニットの優先順位を示す順位データを含む送信データを受信する送信データ受信ステップと、
    入力画像信号を処理して出力画像信号を得る画像信号処理ステップとを有し、
    上記画像信号処理ステップでは、上記送信データ受信ステップで受信された上記送信データに含まれる順位データに基づいて、該送信データに含まれる操作データが最優先の機能操作ユニットの操作データであると判断するとき、該操作データに基づいて処理をし、その後に、上記順位データで示される順に他の機能操作ユニットの操作データを設定して処理をする
    画像信号処理方法。