JP2001245297A - 動画像画像符号化装置および動画像復号化装置および動画像符号化方法および動画像復号化方法 - Google Patents

Abstract

(57)【要約】 【課題】動き補償予測（ＭＣ）と離散コサイン変換（Ｄ
ＣＴ）を用いた動画像符号化方式において、大幅な画質
の劣化を伴わずに符号化処理の高速化を図る。 【解決手段】入力画像から得た動きベクトル(VT)と符号
化処理済み画像データを再生した画像とから動き補償予
測(MC)を行い、得たMC信号はフレーム内符号化処理の実
施に利用し、MC信号を用いないフレーム間符号化処理と
併用して入力画像を逐次処理し、これを直交変換(DCT)
して得た変換係数を量子化し可変長符号化する動画像符
号化装置において、VTを検出する手段105Aは、少なくと
も2N×2N画素(N：自然数）のブロック毎に整数画素精度
のVTを検出する手段と半画素精度のVTを検出する手段を
有し変換係数の量子化に用いる量子化幅を判定する判定
手段を設けて判定結果が所定レベルを超える粗い量子化
幅での量子化と判定した場合には半画素精度VT検出を行
わずに整数画素精度VT検出にて得たVTを採用し他は半画
素精度VT検出によるVTを採用する構成とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画像符号化の国
際標準方式、例えばＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２
９WＧ１１のＭＰＥＧ１(Motion Picture Experts Group
１)，ＭＰＥＧ２、(Motion Picture Experts Group ２)
およびＭＰＥＧ４(Motion Picture Experts Group ４)
やＩＴＵ−Ｔの Ｈ．２６３に採用されている、動き補
償予測（ＭＣ）と離散コサイン変換（ＤＣＴ）を用いた
ハイブリッド符号化方式において、大幅な画質の劣化を
伴わずに符号化処理および復号化処理の高速化を図るこ
とができるようにした動画像符号化装置および動画像復
号化装置に関する。

【０００２】

【従来の技術】動画像符号化の国際標準方式であるＭＰ
ＥＧ１，ＭＰＥＧ２およびＭＰＥＧ４では、符号化の基
本方式としてＭＣ＋ＤＣＴ方式が採用されている。以
下、参考文献（三木編著、“ＭＰＥＧ−４のすべて”第
３章、工業調査会、１９９８）を参照して、ＭＰＥＧ４
検証（Verification）モデルに従って説明する。

【０００３】＜ＭＣ＋ＤＣＴ方式の概要＞まずはじめ
に、ＭＣ＋ＤＣＴ方式の符号化法の概要を、図８と図９
を用いて説明する。

【０００４】ＭＣ＋ＤＣＴ方式の動画像符号化装置は、
図８に示されるように、差分値算出部１０１、動き補償
予測部（ＭＣ）１０２、フレーム内／フレーム間（Ｉｎ
ｔｒａ／Ｉｎｔｅｒ）切り替え部１０３、フレームメモ
リ（ＦＭ）１０４、動きベクトル検出部（ＭＥ）１０
５、離散コサイン 変換部（ＤＣＴ）１０６、量子化部
（Ｑ）１０７、可変長符号化部（ＶＬＣ）１０８、逆量
子化部（ＩＱ）１０９、逆離散コサイン変換部（ＩＤＣ
Ｔ）１１０、加算部１１１、出力バッファ（Ｂｕｆｆｅ
ｒ）１１２、レート制御部（Rate Control）１１３とか
ら構成される。

【０００５】画像信号入力線１１には、図９（ａ）に示
されるように、マクロブロック（ＭＢ）化された画像信
号が供給される。

【０００６】図９の例では、ＭＢには、８×８画素で構
成されるブロックが、輝度信号（Ｙ）には４つ、色差信
号（ＵあるいはＶ）には各々１つずつ含まれる。差分値
算出部１０１において、画像信号入力線１１を介して供
給される画像信号と、信号線１２を介して供給される動
き補償予測信号との差分が計算され、この差分信号は信
号線１３を介して離散コサイン変換部１０６に供給され
る。

【０００７】信号線１２には、フレーム内符号化（Ｉｎ
ｔｅｒ）モードの場合には、動き補償予測部（ＭＣ）１
０２で生成される動き補償予測信号がフレーム内／フレ
ーム間切り替え部１０３を介して供給されるが、フレー
ム間符号化（Ｉnｔｒａ）モードの場合には、信号が供
給されない。

【０００８】つまり、信号線１３には差分信号ではな
く、画像信号入力線１１の信号がそのまま供給される。
Intra ／Inter モードの切り替えは、後述するように動
きベクトル検出部１０５で判定され、この判定結果が信
号線１４を介して切り替え信号としてフレーム内／フレ
ーム間切り替え部１０３に供給されることで、この判定
結果対応にフレーム内／フレーム間切り替え部１０３が
動き補償予測部１０２の出力をスイッチングすることに
より行われる。

【０００９】動き補償予測部（ＭＣ）１０２で生成され
る動き補償予測信号は、フレームメモリ１０４に蓄積さ
れている既に符号化済みのフレームの信号から、動きベ
クトル検出部１０５で検出された動きベクトル情報にし
たがって生成される。

【００１０】離散コサイン変換部（ＤＣＴ）1０６で
は、信号線１３を介して供給される信号を離散コサイン
変換し、この離散コサイン変換して得られた信号は量子
化部１０７に供給される。量子化部１０７で量子化され
た離散コサイン変換係数は、可変長符号化部１０８に供
給され、可変長符号化されると共に、逆量子化部（Ｉ
Ｑ）１０９に供給され、ここで逆量子化される。逆量子
化部１０９で逆量子化されることにより得られた変換係
数は、逆離散コサイン変換部（ＩＤＣＴ）１１０に供給
されて信号線１３に対する再生信号が生成され、加算部
１１１に供給される。

【００１１】加算部１１１では、逆離散コサイン変換部
１１０か ら供給される信号と、信号線１２を介して供
給される信号とを加算して画像信号を再生した後、フレ
ームメモリ１０４に送られてこのフレームメモリ１０４
に蓄積させる。

【００１２】可変長符号化部１０８では、量子化部
（Ｑ）１０７で量子化された離散コサイン変換 係数や
動きベクトル情報（図示せず）などを符号化した後、多
重化してビットストリームを生成し、出力バッファ１１
２に供給する。出力バッファ１１２では、信号線１５を
介してネットワークや蓄積媒体へ、その特性に応じたビ
ットストリームとして出力する。

【００１３】出力バッファ１１２からはレート制御部１
１３にビットストリーム蓄積量の情報が信号線１６を介
して与えられており、レート制御部１１３では、このバ
ッファのビットストリーム蓄積量に応じて、量子化パラ
メータを決定し、信号線１７を介して量子化部１０７と
逆量子化部１０９に供給する。

【００１４】ここで、バッファ内の蓄積量が大きくなっ
てきた場合は、量子化パラメータを大きくして発生符号
量を少なくし、バッファ内の蓄積量が小さくなってきた
場合は、量子化パラメータを小さくすることで、発生符
号量が一定になるように制御される。

【００１５】以上が、ＭＣ＋ＤＣＴ方式の動画像符号化
装置の概要である。

【００１６】次に、ＭＣ＋ＤＣＴ方式の動画像符号化装
置の重要な構成要素である動きベクトル検出部（ＭＥ）
１０５について説明する。

【００１７】＜動きベクトル検出部の詳細＞図１０、図
１１および図１２を用いて動きベクトル検出部（ＭＥ）
１０５の説明をする。

【００１８】図１０は、動きベクトル検出部１０５の処
理内容を示す一般的なフローチャートであり、各ＭＢの
輝度信号に対して該フローに従った処理が実行される。
まず、ステップＳ２０１において、動きベクトル（Ｍ
Ｖ）を初期化する。これは動きベクトルの初期値をゼロ
べクトルとする処理である。

【００１９】次に、ステップＳ２０２において、ゼロべ
クトルでの動き補償予測誤差信号の絶対値和（ＳＡＤ
０）が、予め設定されているしきい値（ＴＨ０）よりも
大きいか否かを判定する。そして、このステップＳ２０
２での判定の結果、ゼロべクトルでの動き補償予測誤差
信号の絶対値和（ＳＡＤ０）が、しきい値（ＴＨ０）よ
りも小さかったならば、ゼロべクトルが検出されたもの
として終了する。

【００２０】一方、ステップＳ２０２での判定の結果、
ゼロべクトルでの動き補償予測誤差信号の絶対値和（Ｓ
ＡＤ０）が、しきい値（ＴＨ０）よりも大きかったなら
ば、ステップＳ２０３において整数画素精度の動きベク
トル（ＭＶint ）を検出すると共に、次のステップＳ２
０４において該ＭＢの輝度信号のブロック内アクティビ
ティ（ＡＣＴ）を算出する。

【００２１】ここで、ブロック内アクティビティ（ＡＣ
Ｔ）とは、例えば、ブロック内の平均値とブロック内の
各画素値との差分の絶対値和である。

【００２２】次に、次にステップＳ２０５の処理に移
り、ＭＶint での動き補償予測誤差信号の絶対値和（Ｓ
ＡＤｉ）が、ＡＣＴよりも小さいか否かを判定する。そ
して、当該ステップＳ２０５での判定の結果、ＳＡＤｉ
の方がＡＣＴよりも大きかった場合には、ステップＳ２
０６の処理に移り、ここで該ＭＢの符号化モードをＩｎ
ｔｒａとして動きベクトル検出を終了する。

【００２３】ここで、Ｓ２０６で該ＭＢの符号化モード
がＩｎｔｒａにセットされない場合は、該ＭＢの符号化
モードはＩｎtｅｒになる。

【００２４】一方、ステップＳ２０５での判定の結果、
ＳＡＤｉの方がＡＣＴより小さかった場合には、ステッ
プＳ２０７の処理に移り、ここで半画素精度の動きベク
トル（ＭＶhalf）を検出した後、ステップＳ２０８にお
いて８×８画素毎の動きベクトル（ＭＶ４ｍｖ）を検出
する。

【００２５】なお、半画素精度の動きベクトル検出の結
果として、整数画素位置の動きベクトルが検出される場
合もある（図１２におけるＯ印）。

【００２６】また、図１１に示されるように、１６×１
６画素毎の動きベクトル検出を１ＭＶモード、８×８画
素毎の動きベクトル検出を４ＭＶモードと呼び、４ＭＶ
モードでも半画素精度の動きベクトル検出が行われる。

【００２７】次に、ステップＳ２０９では、ＭＶ４ｍｖ
での予測誤差信号の絶対値和（ＳＡＤ４ｍｖ）が、ＭＶ
halfでの予測誤差信号の絶対値和（ＳＡＤhalf）よりも
大きいか否かを判定する。そして、このステップＳ２０
９での判定の結果、ＳＡＤ4mv がＳＡＤhalfより大きか
った場合には、ステップＳ２１０の処理に移り、ＭＶha
lfを検出されたＭＶとし、動きベクトル検出を終了す
る。

【００２８】一方、ステップＳ２０９での判定の結果、
ＳＡＤ4mv がＳＡＤhalfより小さかった場合には、ステ
ップＳ２１１の処理に移り、ＭＶ4mv を検出されたＭＶ
とし、動きベクトル検出を終了する。

【００２９】図１２は、半画素精度動き補償を説明する
図である。図１２において、半画素位置（△あるいは
×）の予測値は、整数画素位置（Ｏ）の画素値を用いて
求められる。例えば、画素ｅの倍および画素ｆの値は、
次式にて求められる。

【００３０】ｅ=（ａ＋ｂ＋ｃ＋ｄ＋２−ｒｃ）／２ ｆ=（ｃ＋ｄ＋１−ｒｃ）／２ ここで、図１２（ｂ）に図１２（ａ）の部分拡大図で示
すように、ｅはΔの画素位置であり、ａ，ｂ，ｃ，ｄは
ｅの周囲の整数画素位置であり、ｆは整数画素位置間の
画素位置であって、それぞれその画素位置での予測値を
示し、また、ｒｃ＝０ or １である。ｒｃの値は固定
値でも良いし、周期的に切り替えても良い。つまり、動
きベクトル検出において半画素位置の画素値を求めるに
は上記のような演算が必要となり、処理時間がかかって
しまう問題がある。従って、半画素精度の動きベクトル
を検出する際の処理量と、半画素精度動き補償予測によ
る予測効率向上とのトレードオフを図る必要がある。

【００３１】以上が、ＭＣ＋ＤＣＴ方式の動画像符号化
装置における動きベクトル検出部（ＭＥ）１０５の処理
内容である。

【００３２】

【発明が解決しようとする課題】ところで、動画像を上
述したＭＣ＋ＤＣＴ方式によって符号化した場合に、量
子化幅が粗いと、その再生画像にはブロック状の歪が発
生し、見た目が悪くなることが良く知られている。この
歪の影響を低減するために、デコーダ（動画像復号化装
置）において再生画像に対してフィルタ処理を施すこと
が良く行われるが、これがポストフィルタである。

【００３３】しかしながら、フィルタ処理を施すと、見
た目は良くなるものの、そのための処理量が増大するの
で再生処理系での負担が増大するという問題点がある。

【００３４】また、量子化幅を細かくすればブロック歪
みは目立たなくなるが、逆にＭＣやＤＣＴ変換などを含
めて符号化処理に至る系統での処理負荷が重くなり、円
滑な動画像符号化ができなくなる心配がある。

【００３５】また、動画像符号化装置では、量子化部で
量子化された離散コサイン変換 係数や動きベクトル情
報などを可変長符号化部において符号化した後、多重化
してビットストリームを生成し、圧縮動画像データとし
てこれを出力バッファに一旦、蓄積する。そして、出力
バッファでは、ネットワークや蓄積媒体へ、その特性に
応じて当該圧縮動画像データのビリトストリームを出力
することとなる。

【００３６】このとき、レート制御部では、出力バッフ
ァのビットストリーム蓄積量に応じて、量子化パラメー
タＱｐを決定し、量子化部と逆量子化部に供給して符号
量を調整する。

【００３７】すなわち、バッファ内の蓄積量が大きくな
ってきた場合は、量子化パラメータＱｐを大きくして発
生符号量を少なくし、出力バッファ内の蓄積量が小さく
なってきた場合は、量子化パラメータＱｐを小さくする
ことで、発生符号量が一定になるように制御する。

【００３８】そのため、状況により量子化処理に使用す
る量子化幅が変化する。このことは、符号化段階での画
質に元々差があることを意味する。すなわち、量子化幅
が小さい場合は、高画質であるが、量子化幅が大きくな
ると画質が粗くなる。この画質にばらつきがあるのに、
動き補償予測に用いる動きベクトル検出の精度をそれ相
応に反映させなければ、無用に処理負荷を負担させる結
果となり、無駄である。

【００３９】処理負荷の適正化は、動画像符号化／復号
化処理系に用いるプロセッサなどのデバイスを必要以上
に高性能なものとする必要が生じて、コストアップとな
り、また、能力が低ければ、動画像の符号化や再生に円
滑さを欠くこととなって、問題である。

【００４０】従って、動画像符号化処理系や復号化処理
系での処理負荷の軽減が図れると共に、再生に際してフ
ィルタ処理の負担を最小限にとどめることができ、しか
も、ブロック状の歪みの発生を抑制できるようにする動
画像符号化／復号化技術の開発が嘱望される。

【００４１】そこで、本発明の目的とするところは、動
き補償予測（ＭＣ）と離散コサイン変換（ＤＣＴ）を用
いたハイブリッド符号化方式において、大幅な画質の劣
化を伴わずに符号化処理の高速化を図ることができるよ
うにした動画像符号化装置および動画像復号化装置およ
び動画像符号化／復号化方法を提供することにある。

【００４２】

【課題を解決するための手段】上記目的を達成するた
め、本発明は次のように構成する。すなわち、第１に
は、［１］動き補償予測と離散コサイン変換を用いた動
画像符号化方式における動きベク トル検出手段であっ
て、動きベクトル検出手段は、少なくとも２Ｎ×２Ｎ画
素 （Ｎ：自然数）のブロック無に整数画素精度の動き
ベクトルを検出する手段と半画素精度の動きベクトルを
検出する手段を有し、離散コサイン変換係数を量子化す
るための量子化パラメータが、あるしきい値よりも大き
いか否かを判定する手段と、上記判定手段の結果が偽
（NO）の場合には、半画素精度の動きベクトル検出を行
わずに整数画素精度の動きベクトル検出手段により得ら
れる動きベクトルを結果として出力する手段と、上記判
定手段の結果が真（YES）の場合には、半画素精度の動
きベクトル検出手段により得られる動きベクトルを結果
として出力する手段を有する構成とする。

【００４３】本発明では動きベクトル検出をどこまで実
施するかを適用する量子化幅と符号量から決定し、段階
段階で動きベクトル検出を切り上げることで、動きベク
トル検出処理の負荷軽減を図るようにした。

【００４４】量子化幅は発生符号量調整のために、逐次
変更され、画質は用いる量子化幅にに密接に関係するか
ら、量子化幅と符号量対応に動きベクトル検出の精度を
適正化することで、画質を損なうことなく、適正に処理
負荷を軽減できるようになる。

【００４５】また本発明は、上記目的を達成するため、
第２には、［２］動き補償予測と離散コサイン変換を用
いた動画像符号化手段において、動き補償予測誤差信号
からブロックアクティビティを算出する手段と、出力バ
ッファの内容量に応じて変化するしきい値を設定する手
段と、ブロックアクティビティが上記しきい値よりも大
きいか否かを判定する手段と、上記判定手段が偽（NO）
の場合には、該ブロックを強制的に無意ブロックとして
符号化することで離散コサイン変換等の処理を省く手段
を有する構成とする。

【００４６】この構成によれば、予測誤差信号を解析し
て、予め処理対象のブロックが無意ブロックとなると推
定される場合にはそのブロックを強制的に無意ブロック
としてしまうようにした。これにより、画質の劣化を伴
うことなく、ＤＣＴや量子化の処理を省くことができる
ようになり、負荷を低減することが可能になる。

【００４７】このように、第２の具体例は、処理を施す
必要がないブロックである無意ブロックについては、は
じめから処理をしないようにして、処理の無駄を省くこ
とにより、画質の劣化を伴うことなく、ＤＣＴや量子化
の処理を省くことができるようになり、負荷を低減する
ことが可能になる。

【００４８】また本発明は、上記目的を達成するため、
第３には、［３］動き補償予測と離散コサイン変換を用
いた動画像符号化手段において符号化されたデータを再
生する動画像復号化手段であって、再生画像を出力する
際にポストフィルタをかける手段と、上記ポストフィル
タを輝度信号と色差信号とで別々にオン／オフする手段
と、量子化パラメータが第１のしきい値よりも大きいか
否かを判定する第１の判定手段と、第１の判定手段が偽
(NO)の場合は、輝度信号と色差信号共にポストフィルタ
処理をオフとする手段と、第１の判定手段が真（YES）
の場合は、量子化パラメータが第２のしきい値よりも大
きいか否かを判定する第２の判定手段と、第２の判定手
段の結果が真(YES)の場合は、輝度信号と色差信号共に
ポストフィルタ処理する手段と、上記判定手段の結果が
偽(NO)の場合は、輝度信号のみにポストフィルタ処理を
する手段を有する構成とする。

【００４９】量子化処理に用いる量子化幅は、量子化パ
ラメータにより与えられるが、この量子化パラメータが
小さい場合、つまり、量子化幅が小さい場合には、参照
画像が符号化歪の影響をあまり受けていないと推定でき
るため、量子化パラメータが小さい場合には、フィルタ
処理の効果が薄い。

【００５０】そこで、本発明では、フィルタ処理を施す
に当たって効果の期待できる対象はフィルタ処理を施す
ようにするが、効果の薄いものや効果が期待できないも
のはフィルタ処理を省いてフィルタ処理による負荷を軽
減させるべく、量子化パラメータ が予め設定した所定
のしきい値ＴＨp1、ＴＨp2 よりも大きいか否かを判定
し、この判定結果に応じてフィルタ処理の実施／不実施
の制御をするようにするものである。

【００５１】このように、動画像復号化装置において、
量子化幅に応じて適応的にポストフィルタ処理のオン／
オフを行うようにしたことで、画質の劣化を招くことな
くポストフィルタ処理の処理量を低減できるようになる
ものである。

【００５２】

【発明の実施の形態】以下、本発明具体例について、図
面を参照して説明する。

【００５３】＜第１の具体例＞図１、図２、図３、およ
び図１０を用いて本発明の第１の具体例を説明する。

【００５４】本具体例は、適応的に半画素精度の動きベ
クトル検出を省くようにすることで、画質の劣化を伴わ
ずに動きベクトル検出の処理量を低減するものである。
動きベクトル検出には整数画素精度と半画素精度がある
が、前者より後者の方が精度が高い。そして、半画素精
度の動きベクトル検出によって得られる半画素精度動き
補償の効果は、半画素位置の動き補償予測値を生成し得
る効果だけでなく、フレームメモリに蓄積されている参
照画像信号が符号化歪によって劣化している場合に、フ
ィルタ処理を施すことで予測信号への符号化歪の影響が
低減される効果が大きい。

【００５５】一方、適用した量子化パラメータＱｐが小
さい場合（量子化幅が細かい場合）には、参照画像が符
号化歪の影響をあまり受けていないと推定できるため、
量子化パラメータＱｐが小さい場合には、符号化歪み低
減効果がほとんど得られない。

【００５６】従って、ここでは量子化幅対応に動きベク
トル検出の精度を適正な精度にして、オーバスペック
（過剰品質）とならないようにし、以て、無意味に処理
負荷を大きくならないようにして、処理負荷軽減を図る
と共に、適正な精度にすることで、画質の劣化は起きな
いようにする実施例を説明する。

【００５７】（第１の具体例その１）本発明では動きベ
クトル検出をどこまで実施するかを適用する量子化幅と
符号量から決定し、段階段階で動きベクトル検出を切り
上げることで、動きベクトル検出処理の負荷軽減を図る
ようにする。

【００５８】最もシンプルな具体例を説明する。この具
体例は、８×８画素毎の動きベクトル検出処理（４ＭＶ
検出の処理）も半画素精度動きベクトル検出処理と共に
省くようにし、以て最小限の処理で済ますようにした例
である。

【００５９】本発明にかかる動画像符号化装置は、図１
に示されるように、差分値算出部１０１、動き補償予測
部（ＭＣ）１０２、フレーム内／フレーム間（Ｉｎｔｒ
ａ／Ｉｎｔｅｒ）切り替え部１０３、フレームメモリ
（ＦＭ）１０４、動きベクトル検出部（ＭＥ）１０５
Ａ、離散コサイン 変換部（ＤＣＴ）１０６、量子化部
（Ｑ）１０７、可変長符号化部（ＶＬＣ）１０８、逆量
子化部（ＩＱ）１０９、逆離散コサイン変換部（ＩＤＣ
Ｔ）１１０、加算部１１１、出力バッファ（Ｂｕｆｆｅ
ｒ）１１２、レート制御部（Rate Control）１１３とか
ら構成される。

【００６０】これらのうち、差分値算出部１０１は、符
号化処理対象の動画像の信号に対して、動き補償予測部
（ＭＣ）１０２の出力する動き予測信号分を引き算し、
得た差分信号（動き補償予測誤差信号）を出力するもの
であり、動きベクトル検出部（ＭＥ）１０５Ａは、符号
化処理対象の動画像の信号より、画像の各ブロックの動
きを検出して動きベクトルを得ると共に、この動きベク
トルからIntra ／Inter モードの切り替えを判定すると
いう機能を有するものであり、フレームメモリ１０４
は、符号化済みのフレームの信号をフレーム単位で蓄積
するためのものである。

【００６１】また、動き補償予測部（ＭＣ）１０２は、
前記フレームメモリ１０４上の信号と、前記動きベクト
ル検出部１０５からの動きベクトルとを元に、符号化処
理対象の動画像の各ブロックの動きを予測して動き補償
予測信号として出力するものである。

【００６２】フレーム内／フレーム間（Ｉｎｔｒａ／Ｉ
ｎｔｅｒ）切り替え部１０３は、動きベクトル検出部
（ＭＥ）１０５の出力するIntra ／Inter モードの切り
替えの判定結果に基づき切り替え制御されるものであっ
て、その判定結果対応に動き補償予測部（ＭＣ）１０２
の動き補償予測信号の１０１への供給を制御するもので
ある。

【００６３】また、離散コサイン変換部（ＤＣＴ）１０
６は、差分値算出部１０１の出力する差分値（動き補償
予測誤差信号）を離散コサイン変換するものであり、こ
の離散コサイン変換されて得られた変換係数を量子化部
（Ｑ）１０７は、量子化して出力するものである。な
お、離散コサイン変換はＭＰＥＧでは標準的に使用する
が、これは画像を空間周波数成分に分解する直交変換の
一つの種類であり、直交変換方式は他にも種々のものが
知られていることは周知の通りであるから、他の方式に
適用する場合など、必要に応じて他の直交変換手段を用
いて良いことは云うまでもない。

【００６４】可変長符号化部（ＶＬＣ）１０８は、この
量子化出力を可変長符号化するものであり、出力バッフ
ァ（Ｂｕｆｆｅｒ）１１２はこの可変長符号化された信
号をバッファリングして出力線１５に送り出すためのも
のである。

【００６５】また、逆量子化部（ＩＱ）１０９は、量子
化部１０７の量子化出力を逆量子化してもとの離散コサ
イン変換係数に戻すためのものであり、逆離散コサイン
変換部（ＩＤＣＴ）１１０は、この逆量子化部１０９の
出力を逆離散コサイン変換して、再生信号を生成するも
のである。

【００６６】また、加算部１１１は、動き補償予測部１
０２の出力と逆離散コサイン変換部１１０の再生信号出
力を加算してフレームメモリ（ＦＭ）１０４に保持させ
るためのものである。

【００６７】また、レート制御部（Rate Control）１１
３は、出力バッファ１１２から与えられるビットストリ
ーム蓄積量の情報を用いて、このバッファのビットスト
リーム蓄積量対応に量子化パラメータＱｐを決定し、量
子化部１０７と逆量子化部１０９に与えて、量子化幅を
調整する機能を有する。

【００６８】このような構成によるＭＣ＋ＤＣＴ方式の
動画像符号化装置は、画像信号入力線１１より、図９
（ａ）に示されるように、マクロブロック（ＭＢ）化さ
れた画像信号が供給される。

【００６９】図９の例では、ＭＢには、８×８画素で構
成されるブロックが、輝度信号（Ｙ）には４つ、色差信
号（ＵあるいはＶ）には各々１つずつ含まれる。差分値
算出部１０１において、画像信号入力線１１を介して供
給される画像信号と、信号線１２を介して供給される動
き補償予測信号との差分が計算され、この差分信号は信
号線１３を介して離散コサイン変換部１０６に供給され
る。

【００７０】信号線１２には、フレーム内符号化（Ｉｎ
ｔｅｒ）モードの場合には、動き補償予測部（ＭＣ）１
０２で生成される動き補償予測信号がフレーム内／フレ
ーム間切り替え部１０３を介して供給されるが、フレー
ム間符号化（Ｉnｔｒａ）モードの場合には、信号が供
給されない。

【００７１】つまり、信号線１３には差分信号ではな
く、画像信号入力線１１の信号がそのまま供給される。
Intra ／Inter モードの切り替えは、動きベクトル検出
部１０５で判定され、この判定結果が信号線１４を介し
て切り替え信号としてフレーム内／フレーム間切り替え
部１０３に供給されることで、この判定結果対応にフレ
ーム内／フレーム間切り替え部１０３が動き補償予測部
１０２の出力をスイッチングすることにより行われる。

【００７２】動き補償予測部（ＭＣ）１０２では、フレ
ームメモリ１０４に蓄積されている前フレームの再生画
像信号から、動きベクトル検出部１０５Ａで検出された
動きベクトル情報に従って動き補償予測信号を生成す
る。

【００７３】離散コサイン変換部（ＤＣＴ）１０６で
は、信号線１３を介して供給される差分値算出部１０１
からの信号を離散コサイン変換し、得られた係数を量子
化部１０７に供給する。量子化部１０７ではこの離散コ
サイン変換して得られた係数（ＤＣＴ係数）を、レート
制御部１１３から与えられる量子化パラメータＱｐで定
まる量子化幅にて量子化処理して可変長符号化部１０８
に供給すると共に、逆量子化部（ＩＱ）１０９にも供給
する。

【００７４】可変長符号化部１０８では、この供給され
た量子化された離散コサイン変換係数を、可変長符号化
して圧縮動画像信号としてバッファ１１２に送り出す。
具体的には、可変長符号化部１０８では、量子化部
（Ｑ）１０７で量子化された離散コサイン変換係数や動
きベクトル情報などを符号化した後、多重化してビット
ストリームを生成し、出力バッファ１１２に供給する。

【００７５】そして、出力バッファ１１２では、信号線
１５を介してネットワークや蓄積媒体へ、その特性に応
じたビットストリームとして出力する。

【００７６】なお、 多重化部は図示していないが、実
際には、 動画像符号化部からは、ＤＣＴ係数を量子化
し、これを可変長符号化することにより圧縮した動画像
データが、使用した量子化幅の情報（具体的には量子化
パラメータＱｐ）と共に多重化されて出力される。

【００７７】一方、逆量子化部（ＩＱ）１０９では供給
された量子化された離散コサイン変換変換係数（ＤＣＴ
係数）を、レート制御部１１３から与えられる量子化パ
ラメータＱｐで定まる量子化幅にて逆量子化し、逆離散
コサイン変換部（ＩＤＣＴ）１１０に供給してここで元
の画像信号に復元させる。そして、この再生画像信号を
加算部１１１に供給する。

【００７８】加算部１１１では、逆離散コサイン変換部
１１０から供給される復元画像信号と、信号線１２を介
して供給される動き補償予測部１０２からの動き補償予
測信号とを加算して画像信号を再生した後、フレームメ
モリ１０４に送ってこのフレームメモリ１０４に蓄積さ
せる。

【００７９】出力バッファ１１２からはレート制御部１
１３にビットストリーム蓄積量の情報が信号線１６を介
して与えられており、レート制御部１１３では、このバ
ッファのビットストリーム蓄積量に応じて、量子化パラ
メータＱｐを決定する。そして、この決定した量子化パ
ラメータＱｐは信号線１７を介して量子化部１０７と逆
量子化部１０９に供給する。

【００８０】ここで、レート制御部１１３では、バッフ
ァ内の蓄積量が大きくなってきた場合は、量子化パラメ
ータＱｐを大きくして発生符号量を少なくし、バッファ
内の蓄積量が小さくなってきた場合は、量子化パラメー
タＱｐを小さくすることで、発生符号量が一定になるよ
うに制御している。

【００８１】すなわち、バッファ内の符号蓄積量に応じ
て量子化幅が変化する。量子化幅が大きい（粗い）と動
きベクトルの精度を細かくしても意味がないので、精度
を粗くし、量子化幅が小さい（細かい）ときは動きベク
トルの精度を高めるようにすると動きベクトル検出処理
の負荷が量子化幅対応に調整でき、無駄な処理をなくす
ことができる。

【００８２】そのために、本発明の画像符号化装置にお
いては、動きベクトル検出部１０５Ａに、この量子化幅
対応に動きベクトル検出処理精度を可変させる機能を持
たせてある。具体的には、レート制御部１１３からの量
子化パラメータＱp や動きベクトル検出結果を参照して
どの精度の動きベクトルを検出ベクトルとして利用する
かを決めるといった機能である。

【００８３】なお、動きベクトル検出の精度には、整数
値精度の動きベクトル検出、半画素精度の動きベクトル
検出があり、前者より後者の方が精度が細かい。

【００８４】図２は、本発明の第１の具体例その１であ
る、動きベクトル検出部１０５Ａの処理内容を示すフロ
ーチャートであり、各ＭＢ（マクロブロック）の輝度信
号に対して該フローが実行される。まず、ステップＳ１
０１において、動きベクトル（ＭＶ）の初期値をゼロベ
クトルとする。

【００８５】次に、ステップＳ１０２において、ゼロベ
クトルでの予測誤差信号の絶対値和（ＳＡＤ０）が、予
め定めたゼロベクトル用しきい値（ＴＨ０）よりも大き
いか否かを判定する。ステップＳ１０２での判定の結
果、ＳＡＤ０が、しきい値（ＴＨ０）よりも小さかった
場合には、ゼロベクトルが検出されたものとして動きベ
クトル検出処理を終了する。

【００８６】一方、ステップＳ１０２での判定の結果、
ＳＡＤ０が、ゼロベクトル用しきい値（ＴＨ０）よりも
大きかった場合には、ステップＳ１０３において整数画
素精度の動きベクトル（ＭＶint ）を検出すると共に、
ステップＳ１０４において該ＭＢの輝度信号のブロック
内アクティビティ（ＡＣＴ）が算出される。ここで、ブ
ロック内アクティビティとは、例えば、ブロック内の平
均値とブロック内の各画素値との差分の絶対値和であ
る。

【００８７】次に、ステップＳ１０５では、整数画素精
度の動きベクトル（ＭＶint ）での予測誤差信号の絶対
値和（ＳＡＤｉ）が、ＡＣＴよりも小さいか否かを判定
する。このステップＳ１０５での判定の結果、ＳＡＤｉ
が、ＡＣＴよりも大きかった場合は、ステップＳ１０６
で該ＭＢの符号化モードを“Ｉｎｔｒａ”（フレーム間
符号化）とし、動きベクトル検出処理を終了する。

【００８８】ここで、ステップＳ１０６において該ＭＢ
の符号化モードが“Ｉn t r a” にセットされない場合
は、該ＭＢの符号化モードは“Ｉｎｔｅｒ”（フレーム
内符号化）になる。

【００８９】一方、ステップＳ１０５での判定の結果、
ＳＡＤｉが、ＡＣＴよりも小さかった場合には、ステッ
プＳ１０７の処理に移り、ここにおいて、Ｑp が整数画
素精度の動きベクトル検出実施をするか否かを決める予
め定めた整数画素精度判断用しきい値ＴＨint よりも大
きいか否かを判定する。

【００９０】ここで、Ｑp とは、レート制御部１１３か
ら、信号線１７を介して動きベクトル検出部１０５に供
給される（図示せず）量子化パラメータであり、量子化
幅を決めるパラメータであって、例えば、“１”〜“３
１”の整数値が採用される。

【００９１】すなわち、量子化パラメータＱｐはこの例
の場合、３１段階のレベル分けになっており、量子化パ
ラメータＱｐが小さいほど、量子化幅が小さい（細か
い）ものとなっている。

【００９２】上述したように、量子化パラメータＱｐ
は、圧縮符号化され、多重化された動画像信号を送り出
す役割を担う出力バッファ１１２におけるビットストリ
ーム蓄積量の情報に基づいてレート制御部１１３から与
えられるものである。そして、レート制御部１１３で
は、この出力バッファ１１のビットストリーム蓄積量が
大きくなってきた場合は、量子化パラメータＱｐを大き
くして発生符号量を少なくし、出力バッファ１１２内の
蓄積量が小さくなってきた場合は、量子化パラメータＱ
ｐを小さくして発生符号量を増やせるようにすること
で、できるだけ量子化幅は細かく保ちつつもバッファが
溢れないように制御される。

【００９３】そして、量子化幅が大きいときは、半画素
精度の動きベクトルを用いる意味が薄いので、本発明で
は、動きベクトル検出にあたり、効果の期待できないも
のは半画素精度の動きベクトル検出を省いて整数値画素
精度の動きベクトル検出結果で動きベクトルを代用し、
効果の期待できるときは半画素精度の動きベクトル検出
を行い、その検出結果を動きベクトルとして用いるよう
にすることで、動きベクトル検出処理を状況に応じてど
こまで実施するか決めるようにし、以て、動きベクトル
検出処理に費やす負荷を状況に応じて軽減させるように
する。

【００９４】そのために、本発明では、レート制御部１
１３からの量子化パラメータＱp がしきい値ＴＨint よ
りも大きいか否かを判定し、この判定結果に応じて半画
素精度の動きベクトル検出を行わず、整数画素精度の動
きベクトルを動きベクトルとして用いるようにするもの
である。

【００９５】従って、ステップＳ１０７での判定の結
果、Ｑp がＴＨint よりも小さかった場合には、整数画
素精度の動きベクトル（ＭＶint ） を検出された動き
ベクトルとして採用し、動きベクトル検出を終了する。
一方、ステップＳ１０７での判定の結果、Ｑp がＴＨin
t よりも大きかった場合には、半画素精度の動きベクト
ル（ＭＶhalf）を検出する（ステップＳ１０９）。そし
て、その後、さらに８×８画素毎の動きベクトル（ＭＶ
4mv ）を検出する（ステップＳ１１０）。

【００９６】次に、Ｓ１１１では、ＭＶ4mv での予測誤
差信号の絶対値和（ＳＡＤ4mv ）が、半画素精度の動き
ベクトル（ＭＶhalf）での予測誤差信号の絶対値和（Ｓ
ＡＤhalf）よりも大きいか否かを判定する。このステッ
プＳ１１１での判定の結果、ＳＡＤ4mv がＳＡＤhalfよ
りも大きかった場合には、ＭＶhalfを検出されたＭＶと
して用いるようにし（ステップＳ１１２）、動きベクト
ル検出処理を終了する。

【００９７】一方、ステップＳ１１１での判断の結果、
ＳＡＤ4mv がＳＡＤhalfよりも小さかった場合、ＭＶ4m
v を検出されたＭＶとして用いるようにし（ステップＳ
１１３）、動きベクトル検出処理を終了する。

【００９８】このように、符号化するに際して使用する
量子化幅対応に、適正な動きベクトル検出精度を選択
し、その選択した制度での動きベクトル検出処理を行わ
せるようにしたものであるから、動きベクトル検出精度
を適正化することができ、後段でのＤＣＴや量子化処理
での無駄をなくす効果と相俟って、処理に費やす負荷を
状況に応じて適正なレベルに軽減させることができる。

【００９９】また、量子化幅は、圧縮符号化され、多重
化された動画像信号を送り出す役割を担う出力バッファ
１１２におけるビットストリーム蓄積量の情報に基づい
てレート制御部１１３により決定されるものであり、レ
ート制御部１１３では、この出力バッファ１１のビット
ストリーム蓄積量が大きくなってきた場合は、量子化パ
ラメータＱｐを大きくして発生符号量を少なくし、出力
バッファ１１２内の蓄積量が小さくなってきた場合は、
量子化パラメータＱｐを小さくして発生符号量を増やせ
るようにすることで、できるだけ量子化幅は細かく保ち
つつもバッファが溢れないように制御するために設けて
あること、そして、量子化幅が大きいときは、半画素精
度の動きベクトルを用いる意味が薄いので、本発明で
は、動きベクトル検出にあたり、効果の期待できないも
のは半画素精度の動きベクトル検出を省いて整数値画素
精度の動きベクトル検出結果で動きベクトルを代用し、
効果の期待できるときは半画素精度の動きベクトル検出
を行い、その検出結果を動きベクトルとして用いるよう
にすることで、量子化幅対応に適正化されたものとなる
から、画質に悪影響を与える心配はなく、従って、画質
を損なうことなく、適正に処理負荷を軽減できるように
なる。

【０１００】以上の、 第１の具体例その１の処理手法
においては、動きベクトル検出処理において、量子化幅
が整数画素精度の適用範囲のものであった場合に、一義
的に整数画素精度の動きベクトル検出を適用してしまう
構成であり、４ＭＶ検出の処理を省いてしまったが、複
雑な動きを含む画像シーケンスに対しては４ＭＶの効果
が大きいので、単純にこのようにしてしまうと、複雑な
動きを含む画像シーケンスの画像にあっては問題が残
る。そこで、次に、動きベクトル検出処理において、量
子化幅が整数画素精度の適用範囲のものであった場合に
おいても、４ＭＶ検出適用の可能性を残した具体例を、
具体例その２として説明する。

【０１０１】（第１の具体例その２）図３は、４ＭＶ検
出（８×８画素毎の動きベクトル検出）も含めるように
した本発明の第１の具体例その２としての動きベクトル
検出部１０５Ａの処理フローチャートである。図２のフ
ローチャートでは、量子化幅が整数画素精度の適用範囲
のものであった場合（Ｓ１０７）に、一義的に整数画素
精度の動きベクトル検出を適用してしまう構成であった
のを、この場合においても、４ＭＶ検出適用の可能性を
探るようにした点（Ｓ３０８〜Ｓ３１１）が異なるが、
他は基本的には図２のフローチャートの処理と同じであ
る。

【０１０２】図３を参照して処理の具体的な内容を説明
する。

【０１０３】ここでは、各ＭＢの輝度信号に対して該フ
ローに沿った処理が実行される。

【０１０４】まず、ステップＳ３０１において、動きベ
クトル（ＭＶ）の初期値をゼロベクトルとする。次に、
ステップＳ３０２において、ゼロべクトルでの予測誤差
信号の絶対値和（ＳＡＤ０）が、しきい値（ＴＨ０）よ
りも大きいか否かを判定する。そして、ステップＳ３０
２での判定の結果、ＳＡＤ０がＴＨ０より小さい場合に
は、ゼロベクトルが検出されたものとして処理を終了す
る。

【０１０５】一方、ステップＳ３０２での判別の結果、
ＳＡＤ０がＴＨ０より大きかった場合には、ステップＳ
３０３において整数画素精度の動きベクトル（ＭＶint
）を検出すると共に、ステップＳ３０４において該Ｍ
Ｂの輝度信号のブロック内アクティビティ（ＡＣＴ）を
算出する。ここで、ブロック内アクティビティとは、例
えば、ブロック内の平均値とブロック内の各画素値との
差分の絶対値和である。

【０１０６】次に、ステップＳ３０５では、ＭＶint で
の予測誤差信号の絶対値和（ＳＡＤint ）が、ＡＣＴよ
りも小さいか否かを判定する。

【０１０７】このステップＳ３０５での判定の結果、Ｓ
ＡＤint がＡＣＴよりも大きかった場合には、ステップ
Ｓ３０６で該ＭＢの符号化モードを“Ｉｎｔｒａ”と
し、動きベクトル検出処理を終了する。ここで、ステッ
プＳ３０６で該ＭＢの符号化モードが“Ｉｎｔｒａ”に
セットされない場合は、該ＭＢの符号化モードは“Ｉｎ
ｔｅｒ”になる。

【０１０８】一方、ステップＳ３０５での判定の結果、
ＳＡＤint がＡＣＴより小さかった場合には、ステップ
Ｓ３０７において、Ｑｐの値がしきい値ＴＨint よりも
大きいか否かを判定する。

【０１０９】そして、このステップＳ３０７での判定の
結果、Ｑｐの値がしきい値ＴＨintよりも小さかった場
合には、ステップＳ３０８において４ＭＶ検出の内、整
数画素精度の動きベクトル（ＭＶint4mv）を検出する。

【０１１０】次に、ステップＳ３０９では、ＭＶint で
の予測誤差信号の絶対値和（ＳＡＤint ）が、ＭＶint4
mvでの予測誤差信号の絶対値和（ＳＡＤint4mv）よりも
大きいか否かを判定する。そして、このステップＳ３０
９での判定の結果、ＳＡＤint がＳＡＤint4mvよりも小
さかった場合には、ＭＶint を検出されたＭＶとして用
いるようにし（ステップＳ３１０）、動きベクトル検出
処理を終了する。

【０１１１】一方、ステップＳ３０９での判定の結果、
ＳＡＤint がＳＡＤint4mvより大きかった場合には、Ｍ
Ｖint4mvを検出されたＭＶとして用いるようにし（ステ
ップＳ３１１）、動きベクトル検出処理を終了する。

【０１１２】また、ステップＳ３０７での判定の結果、
ＱｐがＴＨint より大きかった場合には、半画素精度の
動きベクトル（ＭＶhalf）を検出した後（ステップＳ３
１２）、８×８画素毎の動きベクトル（ＭＶ4mv ）を検
出する（ステップＳ３１３）。そして、次に、ＭＶ4mv
での予測誤差信号の絶対値和（ＳＡＤ4mv ）が、ＭＶha
lfでの予測誤差信号の絶対値和（ＳＡＤhalf）よりも大
きいか否かを判定する（ステップＳ３１４）。

【０１１３】ステップＳ３１４での判定の結果、ＳＡＤ
4mv が、ＳＡＤhalfよりも大きかった場合には、ＭＶha
lfを検出されたＭＶとして用いるようにし（ステップＳ
３１５）、動きベクトル検出処理を終了する。

【０１１４】一方、ステップＳ３１４での判定の結果、
ＳＡＤ4mv がＳＡＤhalfより小さかった場合には、ＭＶ
4mv を検出されたＭＶとして用いるようにし（ステップ
Ｓ３１６）、動きベクトル検出処理を終了する。

【０１１５】以上の、 第１の具体例その２の処理手法
においては、第１の具体例のその１の機能に、さらに動
きベクトル検出処理において、量子化幅が整数画素精度
の適用範囲のものであった場合に、一義的に整数画素精
度の動きベクトル検出を適用してしまうのではなく、４
ＭＶ検出の処理を行って、複雑な動きを含む画像シーケ
ンスに対しても画質を損なうことなく、処理の適正化を
図ることができる動画像符号化装置を提供できる。

【０１１６】以上は、動ベクトル検出に着目し、動きベ
クトル検出をどこまで実施するかを適応的に変えていく
ことにより、画像の劣化を伴うことなく処理の低減を図
る技術であった。

【０１１７】次に、マクロブロックに着目し、これらの
うち、処理を施す必要がないブロックである無意ブロッ
クについては、はじめから処理をしないようにして、処
理の無駄を省くことにより、画質の劣化を伴うことな
く、ＤＣＴや量子化の処理の無駄を省くことができるよ
うにして、負荷の低減を図ることを可能にする例を第２
の具体例として説明する。

【０１１８】＜第２の具体例＞ここで、マクロブロック
のうち、有意のブロックというのはＤＣＴ係数（離散コ
サイン変換係数が）すべて“０”となるブロックであ
り、それ以外のマクロブロックは有意のブロックであ
る。

【０１１９】図２において、量子化部（Ｑ）１０７から
信号線１８を介して逆量子化部（ＩＱ）１０９に出力さ
れる量子化された離散コサイン変換係数が、すべて
“０”となる場合は、逆量子化部１０９と逆離散コサイ
ン変換部（ＩＤＣＴ）１１０を介さずとも信号線１９を
介して出力される信号は全て“０”になる。

【０１２０】このような場合、図９（ｂ）に例示される
ようなパターンにより、該ブロックは無意であるとの情
報がデコーダ側に送られるため、エンコーダ／デコーダ
共に逆量子化と逆離散コサイン変換処理をする必要はな
い。つまり、無意のブロックは処理をする必要がないの
である。

【０１２１】なお、離散コサイン変換と量子化処理をし
なくても明らかに無意ブロックと判定できる場合があ
る。例えば、動き補償予測信号が完璧に一致して、信号
線１３を介して供給される予測誤差信号が“０”となる
場合には、離散コサイン変換処理と量子化処理をしなく
ても明らかに無意ブロックであると判定できる。また、
予測誤差信号が小さく、かつ量子化パラメータが大きい
場合には、無意ブロックになると判定できる。このよう
な場合にも、離散コサイン変換処理と量子化処理をする
のは無駄である。

【０１２２】このように、無意ブロックは処理を施す必
要がないブロックである。従って、無意ブロックについ
ては、はじめから処理をしないようにして、無駄を省く
ことにより、負荷を軽減させるようにするのが第２の具
体例であり、以下、図４、図５および図９を用いて一例
を説明する。

【０１２３】図４に、システム構成をブロック図で示
す。

【０１２４】本発明にかかる動画像符号化装置は、図１
に示されるように、差分値算出部１０１、動き補償予測
部（ＭＣ）１０２、フレーム内／フレーム間（Ｉｎｔｒ
ａ／Ｉｎｔｅｒ）切り替え部１０３、フレームメモリ
（ＦＭ）１０４、動きベクトル検出部（ＭＥ）１０５、
離散コサイン変換部（ＤＣＴ）１０６、量子化部（Ｑ）
１０７、可変長符号化部（ＶＬＣ）１０８、逆量子化部
（ＩＱ）１０９、逆離散コサイン変換部（ＩＤＣＴ）１
１０、加算部１１１、出力バッファ（Ｂｕｆｆｅｒ）１
１２、レート制御部（Rate Control）１１３、有意／無
意ブロック判定部２１４、切り替え部２１５，２１６と
から構成される。

【０１２５】これらのうち、図１における要素と同一符
号、同一名称を付したものは図１で説明したものと基本
的には変わらないので、ここでは改めて説明はしない。

【０１２６】本具体例では、図１に、新たに有意／無意
ブロック判定部２１４、切り替え部２１５，２１６を追
加し、動きベクトル検出部（ＭＥ）は１０５Ａに代えて
従来からの動きベクトル検出部（ＭＥ）１０５を設けた
構成である。

【０１２７】本具体例は、予測誤差信号を解析して、予
め該ブロックが無意ブロックとなると推定されるブロッ
クを強制的に無意ブロックとすることで、画質の劣化を
伴わずにＤＣＴや量子化の処理を省くことを目的とする
ものである。従って、画像の劣化を伴うことなく処理の
低減を図る技術を併用しなくとも無意ブロックついての
処理を省くことで、処理の低減を図る効果が享受できる
が、動動きベクトル検出部１０５に代えて、動きベクト
ル検出部１０５Ａを用いるようにし、これによって、動
きベクトル検出をどこまで実施するかを適応的に変えて
いくことができるようする第１の具体例の方式も併用す
れば処理の低減効果は一層大きいものとなる。

【０１２８】図４に示すように、有意／無意ブロック判
定部２１４は、信号線１３を介して差分値算出部１０１
から与えられる動き補償予測誤差信号と、レート制御部
１１３から与えられる量子化パラメータＱｐとを入力と
し、差分値算出部１０１から供給される動き補償予測誤
差信号が“０”のとき、および、当該動き補償予測誤差
信号が小さく、かつ量子化パラメータＱｐが大きい場合
には、無意ブロックと判定するものである。

【０１２９】また、切り替え部２１６は、逆離散コサイ
ン変換部（ＩＤＣＴ）１１０と加算部１１１との間に配
されて、有意／無意ブロック判定部２１４の判定が無意
ブロックであった場合に、逆離散コサイン変換部１１０
の出力の、加算部１１１への供給を遮断し、有意ブロッ
クであった場合には供給を行うスイッチ機能部である。

【０１３０】このような構成の本装置は、画像信号入力
線１１より、図９（ａ）に示されるようなマクロブロッ
ク（ＭＢ）化された画像信号が供給される。そして、こ
れは動きベクトル検出部１０５と差分値算出部１０１と
に入力される。

【０１３１】そして、差分値算出部１０１においては、
この供給される画像信号と、信号線１２を介して供給さ
れる動き補償予測信号との差分（動き補償予測誤差信
号）が計算される。そして、この差分値算出部１０１に
おいて算出された差分信号（動き補償予測誤差信号）は
信号線１３を介して有意／無意ブロック判定部２１４お
よび切り替え部１１５に供給される。

【０１３２】信号線１２には、フレーム内符号化（Ｉｎ
ｔｅｒ）モードの場合には、動き補償予測部１０２で生
成される動き補償予測信号が、フレーム内／フレーム間
切り替え部１０３を介して供給され、フレーム間符号化
（Ｉｎｔｒａ）モードの場合には、信号が供給されな
い。つまり、信号線１３には、差分値算出部１０１から
の差分信号（動き補償予測誤差信号）ではなく、画像入
力線１１からの動画像信号がそのまま供給される。

【０１３３】Ｉｎｔｒａ／Ｉｎｔｅｒモードの切り替え
は、動きベクトル検出部１０５で判定され、信号線１４
を介してフレーム内／フレーム間切り替え部１０３に供
給される。動き補償予測部１０２で生成される動き補償
予測信号は、フレームメモリ１０４に蓄積されている既
に符号化済みの画像フレームの再生信号から、動きベク
トル検出部１０５で検出された動きベクトル情報にした
がって生成される。

【０１３４】有意／無意ブロック判定部２１４では、信
号線１３を介して供給される動き補償予測誤差信号の絶
対値和（ＳＡＥ：Ｓｕｍ ｏｆ Ａｂｓｏｌｕｔｅ Ｅｒ
ｒｏｒ）をブロックアクティビティとして計算し、ブロ
ックアクティビティが小さい場合には、該ブロックを強
制的に無意ブロックと判定する。

【０１３５】この判定結果は、信号線３０を介して切り
替え部２１５，２１６にそれぞれ供給され、無意ブロッ
クと判定された場合には、信号線３１を介して信号が供
給されないため、離散コサイン変換部１０６，量子化部
１０７，逆量子化部１０９，逆離散コサイン変換部１１
０の経路への信号供給がオフとなると共に、信号線１９
を介して切り替え部２１６に供給する信号も加算部１１
１に供給されないため、離散コサイン変換部１０６，量
子化部１０７，逆量子化部１０９，逆離散コサイン変換
部１１０それぞれでの処理をする必要がなくなる。

【０１３６】また、無意ブロックと判定された場合に
は、図９（ｂ）のフラグをこの例では、“０”としてお
く。

【０１３７】なお、処理しようとするマクロブロックが
有意ブロックであるか無意ブロックであるかを判定する
有意／無意ブロック判定部２１４は、次のような処理手
順を実行する構成とすることで実現可能である。

【０１３８】図５を用いて有意／無意ブロック判定部２
１４の処理内容を具体的に説明する。まずはじめに、ス
テップＳ４０１では、処理対象となる画像のブロック毎
に動き補償予測誤差信号の絶対値和（ＳＡＥ）を計算す
る。次に、ステップＳ４０２において、この計算により
求めたＳＡＥがしきい値ＴＨ（Ｂ）よりも大きいか否か
を判定する。

【０１３９】ＴＨ（Ｂ）は、レート制御部１１３に供給
される、出力バッファ１１２のビットストリーム蓄積量
（Ｂ）に応じて値が変化する関数とし、当該レート制御
部１１３より与えられるものとする。そして、レート制
御部２１３では、このＴＨ（Ｂ）を、バッファ内の蓄積
量が大きくなってきた場合は値を大きくし、バッファ内
の蓄積量が小さくなってきた場合は値を小さくするよう
に調整制御することで、出力バッファ１１２があふれそ
うになった場合には、無意ブロックが増加して発生符号
量が抑えられるようにする。

【０１４０】ステップＳ４０２での判定の結果、ＳＡＥ
がＴＨ（Ｂ）よりも小さかった場合には、ステップＳ４
０３において該ブロックを強制的に無意ブロックとし、
処理を終了する。

【０１４１】一方、ステップＳ４０２での判定の結果、
ＳＡＥがＴＨ（Ｂ）よりも大きかった場合にはそのまま
終了する。なお、ここでブロック毎に有意／無意判定を
する例をあげたが、マクロブロック毎に有意／無意判定
をしても良い。

【０１４２】離散コサイン変換部１０６では、信号線３
１を介して供給される信号が離散コサイン変換された
後、量子化部１０７に供給されてここで量子化される。
量子化部１０７により量子化された離散コサイン変換係
数は、可変長符号化部１０８に供給され、可変長符号化
されると共に、逆量子化部１０９に供給されて逆量子化
される。

【０１４３】逆量子化された変換係数は、逆離散コサイ
ン変換部１１０に供給されて信号線２３に対する再生信
号が生成され、加算部１１１に供給される。加算部１１
１では、逆離散コサイン変換部１１０から供給される信
号と、信号線１２を介して供給される信号とを加算して
画像信号を再生した後、フレームメモリ１０４に蓄積す
る。

【０１４４】可変長符号化部１０８では、量子化部１０
７で量子化された離散コサイン変換係数や動きベクトル
情報（図示せず）などを符号化した後、多重化してビッ
トストリームを生成し、出力バッファ１１２に供給す
る。出力バッファ１１２では、ネットワークや蓄積媒体
へ、その特性に応じて信号線２５を介してビリトストリ
ームを出力する。

【０１４５】レート制御部１１３では、信号線２６を介
して供給される出力バッファ１１２のビットストリーム
蓄積量に応じて、量子化パラメータＱｐを決定し、信号
線２７を介して量子化部１０７と逆量子化部１０９に供
給する。ここで、バッファ内の蓄積量が大きくなってき
た場合は、量子化パラメータＱｐを大きくして発生符号
量を少なくし、出力バッファ１１２内の蓄積量が小さく
なってきた場合は、量子化パラメータを小さくすること
で、発生符号量が一定になるように制御する。

【０１４６】多重化部は図示していないが、実際には、
動画像符号化部からは、ＤＣＴ係数を量子化し、これ
を可変長符号化することにより圧縮した動画像データ
が、使用した量子化幅の情報（具体的には量子化パラメ
ータＱｐ）と共に多重化されて出力される。

【０１４７】このように、第２の具体例によれば、予測
誤差信号を解析して、予め処理対象のブロックが無意ブ
ロックとなると推定される場合にはそのブロックを強制
的に無意ブロックとしてしまうようにした。これによ
り、画質の劣化を伴うことなく、ＤＣＴや量子化の処理
を省くことができるようになり、負荷を低減することが
可能になる。

【０１４８】以上は、いずれも動画像符号化装置側の実
施例であった。次に、処理負荷を低減することを可能に
する動画像復号化装置側での実施例を第３の具体例とし
て説明する。

【０１４９】＜第３の具体例＞符号化に際して適用する
量子化幅は発生符号量調整などのために状況対応に変化
させる。そして、復号化装置においては、ブロック歪み
を除去するためにポストフィルタ処理を施すが、量子化
幅が細かい場合はブロック歪みの影響を受けている心配
は少なく、量子化幅が粗い場合にポストフィルタ処理の
意味がでる。

【０１５０】従って、ここでは、フィルタ処理を施すに
当たって効果の期待できる対象はフィルタ処理を施すよ
うにするが、効果の薄いものや効果が期待できないもの
はフィルタ処理を省くようにしてフィルタ処理による負
荷を軽減させるようにする例を説明する。

【０１５１】図６、図７を用いて本発明の第３の具体例
を説明する。

【０１５２】本具体例は、動画像復号化装置に関する技
術であって、デコード時に適応的にポストフィルタ処理
のオン／オフを行うことで、画質の劣化を伴わずにポス
トフィルタ処理の処理量を低減するものである。具体的
には、逆量子化部に与えられる量子化パラメータＱｐに
応じて、ポストフィルタ処理のオン／オフ制御を行うよ
うにする。

【０１５３】図６は、本発明の第３の具体例を説明する
動画像復号化装置のブロック図であり、図中、４０１は
受信した圧縮動画像データを復号する可変長符号復号部
であり、４０２は逆量子化部であって、この可変長符号
復号部４０１にて復号されたデータを逆量子化し、もと
の離散コサイン変換係数（ＤＣＴ係数）に戻す処理を行
うものである。

【０１５４】また、４０３は逆離散コサイン変換部であ
って、逆量子化部４０２により得られたＤＣＴ係数を逆
離散コサイン変換して元の動き補償予測誤差信号に戻す
ものであり、４０４は加算部で、この復元された動き補
償予測誤差信号と動き補償予測部４０６からの動き補償
予測信号とを加算処理してフレーム画像を復元するため
のものであり、４０５はフレームメモリで、この加算部
４０４にて加算処理されて復元されたフレーム画像を保
持するメモリである。

【０１５５】また、動き補償予測部４０６は、フレーム
メモリ４０５上のフレーム画像から動き補償予測を行っ
て動き補償予測信号を求めるものであり、４０７はフレ
ーム内符号化（Inter）／フレーム間符号化（Intra）切
り替え部であって動き補償予測部４０６の動き補償予測
信号の前記加算部４０４への供給をオンオフするための
ものである。フレーム内符号化（Inter）とフレーム間
符号化（Intra）のいずれのモードとするかは、動画像
符号化装置側での処理時に圧縮画像データ中に多重化し
てあるので、これに従って、フレーム内符号化／フレー
ム間符号化切り替え部４０７はモード対応に上記オンオ
フ制御するようにしてある。４０８は加算部４０４にて
加算処理されて復元された動き補償予測信号に対してポ
ストフィルタ処理を施し、歪みのない動画像データにし
て出力するポストフィルタ部である。

【０１５６】動画像符号化部からは、ＤＣＴ係数を量子
化し、これを可変長符号化することにより圧縮した動画
像データが、使用した量子化幅の情報（具体的には量子
化パラメータＱｐ）と共に多重化されて出力される。

【０１５７】次にこのような構成の本装置の作用を説明
する。

【０１５８】動画像復号化装置ではこれを分離して量子
化幅の情報と圧縮動画像データに分け、処理する。圧縮
動画像データは信号線４１を介して可変長復号部４０１
に与えられ、量子化幅の情報は信号線４２を介して逆量
子化部４０２とポストフィルタ部４０８とに与えられ
る。

【０１５９】可変長符号復号部４０１では、信号線４１
を介して供給されたＤＣＴ係数の可変長符号を復号処理
してＤＣＴ係数に戻し、逆量子化部４０２に供給する。
逆量子化部４０２では、信号線４２を介して供給される
量子化パラメータＱｐに従ってＤＣＴ係数を逆量子化す
る。

【０１６０】逆量子化部４０２で逆量子化されたＤＣＴ
係数は、逆離散コサイン変換部４０３にて逆ＤＣＴされ
て、動き補償予測誤差信号に再生される。再生された動
き補償予測誤差信号は、加算部４０４に供給され、信号
線４３を介して供給される動き補償予測信号と加算され
ることで再生信号となる。再生信号は、信号線４４を介
してフレームメモリ４０５とポストフィルタ部４０８に
供給される。

【０１６１】ここで、信号線４３には、フレーム内符号
化（Ｉｎｔｅｒ）モードの場合には、動き補償予測部４
０６で生成される動き補償予測信号がフレーム内／フレ
ーム間切り替え部４０７を介して供給され、フレーム間
符号化（Ｉｎｔｒａ）モードの場合には、信号が供給さ
れない。

【０１６２】ポストフィルタ部４０８は、ＭＣ＋ＤＣＴ
符号化方式によるブロック歪を低減し、見た目の良い再
生画像をユーザに提供するものである。ここで、量子化
パラメータＱｐが小さいときは、ブロック歪が小さいた
め再生画像の視覚的劣化はそれほどでもない。

【０１６３】従って、このような場合にポストフィルタ
部４０８によるフィルタ処理を施しても、見た目が格別
改善されるわけでもなく、むしろフィルタ処理によるボ
ケの影響の方が大きいからフィルタ処理は逆効果となる
場合もある。

【０１６４】また、輝度信号（Ｙ）よりも色差信号
（Ｕ，Ｖ）の方が、感度が低いため、ブロック歪みの影
響も輝度信号よりも色差信号の方が少ない。従って、輝
度信号と同様に色差信号にポストフィルタ処理を施して
も、見た目がほとんど改善されずに処理量の無駄とな
る。

【０１６５】そこで、本具体例においては、この点に着
目して量子化パラメータＱｐの値に応じ、ポストフィル
タ処理を施したり、施さなかったりする機能を持たせて
ある。すなわち、この機能を確保するために、本具体例
ではポストフィルタ部４０８は図７の如き処理ステップ
で処理される構成のソフトウエアフィルタとしてある。

【０１６６】図７の処理ステップを説明する。

【０１６７】最初に、ステップＳ５０１において、Ｑｐ
が第１のしきい値ＴＨｐ１よりも大きいか否か を判定
する。そして、ステップＳ５０１での判定の結果、Ｑｐ
がＴＨp1より小さかった場合には、ステップＳ５０２の
処理に移り、信号線４４から供給される再生画像にポス
トフィルタ処理を行わずに、信号線４５に出力し、ユー
ザに提供する。

【０１６８】ステップＳ５０１での判定の結果、Ｑｐが
ＴＨp1より大きかった場合には、ステップＳ５０３の処
理に移り、Ｑｐを第２のしきい値ＴＨp2と比較すること
で、Ｑｐが第２のしきい値ＴＨp2よりも大きいか否かを
判定する。

【０１６９】そして、ステップＳ５０３での判定の結
果、ＱｐがＴＨp2より小さかった場合には、ステップＳ
５０４の処理に移って、信号線４４から供給される再生
画像の輝度信号（Ｙ）のみにポストフィルタ処理を行な
い、信号線４５に出力して最終的な再生画像信号とし、
ユーザに提供する。

【０１７０】ステップＳ５０３での判定の結果、Ｑｐが
ＴＨp2より大きかった場合には、ステップＳ５０５の処
理に移り、信号線４４から供給される再生画像にポスト
フィルタ処理を行ない、信号線４５を介して出力し、ユ
ーザに提供する。

【０１７１】ここで、しきい値ＴＨp1とＴＨp2の関係
は、通常“ＴＨｐ１＜ＴＨｐ２”となる。なお、“ＴＨ
ｐ１＝ＴＨｐ２”として、ステップＳ５０１とステップ
Ｓ５０２のフローのみとしたり、ステップＳ５０３，Ｓ
５０４とステップＳ５０５のみのフローとしても良い。

【０１７２】ここで、Ｑp とは、レート制御部１１３か
ら、信号線１７を介して動きベクトル検出部１０５Ａに
供給される量子化パラメータであり、量子化幅を決める
パラメータであって、例えば、“１”〜“３１”の整数
値が採用される。

【０１７３】すなわち、量子化パラメータＱｐはこの例
の場合、３１段階のレベル分けになっており、量子化パ
ラメータＱｐの値が小さいほど、量子化幅が小さい（細
かい）ものとなっている。そして、量子化パラメータＱ
ｐの値が小さい場合、つまり、量子化幅が小さい場合に
は、参照画像が符号化歪の影響をあまり受けていないと
推定できるため、量子化パラメータＱｐが小さい場合に
は、フィルタ処理の効果が薄い。

【０１７４】そこで、本発明では、フィルタ処理を施す
に当たって効果の期待できる対象はフィルタ処理を施す
ようにするが、効果の薄いものや効果が期待できないも
のはフィルタ処理を省いてフィルタ処理による負荷を軽
減させるべく、Ｑp がしきい値ＴＨp1、ＴＨp2 よりも
大きいか否かを判定し、この判定結果に応じてフィルタ
処理の実施／不実施の制御をするようにするものであ
る。

【０１７５】このように、本具体例は、動画像復号化装
置において、量子化幅に応じて適応的にポストフィルタ
処理のオン／オフを行うようにしたことで、画質の劣化
を招くことなくポストフィルタ処理の処理量を低減でき
るようになるものである。

【０１７６】以上、種々の具体例を説明したが、本発明
は上述した例に限定されるものではなく、種々変形して
実施可能である。

【０１７７】

【発明の効果】以上、詳述したように本発明によれば、
動き補償予測（ＭＣ）と離散コサイン変換（ＤＣＴ）を
用いたハイブリッド 符号化方式において、適応的に半
画素精度の動きベクトル検出を省くことで、大幅な画質
の劣化を伴わずに符号化処理の高速化を図ることができ
る。

【０１７８】また、予測誤差信号を解析して、予め該ブ
ロックが無意ブロックとなると推定されるブロックを強
制的に無意ブロックとすることで、大幅な画質の劣化を
伴わずに符号化処理の高速化を図ることができる。

【０１７９】また、適応的にポストフィルタ処理のオン
／オフを行うことで、大幅な画質の劣化を伴わずにポス
トフィルタ処理の高速化を図ることができる。

【図面の簡単な説明】

【図１】本発明にかかる動画像符号化装置の構成例を示
すブロック図である。

【図２】本発明の第１の具体例における動きベクトル検
出の動作を説明するためのフローチャートである。

【図３】本発明の第１の具体例における動きベクトル検
出の動作を説明するための第２のフローチャートであ
る。

【図４】本発明の第２の具体例を説明する図である。

【図５】有意／無意ブロック判定部の動作を説明するフ
ローチャートである。

【図６】本発明の第３の具体例を説明する図である。

【図７】本発明の第３の具体例におけるポストフィルタ
部の動作を説明するフローチャートである。

【図８】検証モデルのエンコーダブロック図である。

【図９】マクロブロックを説明する図である。

【図１０】検証モデルにおける動きベクトル検出の動作
を説明するためのフローチャートである。

【図１１】１６×１６画素単位の動きベクトルと８×８
画素単位の動きベクトルを説明する図である。

【図１２】半画素精度動き補償を説明する図である。

【符号の説明】

１０１…差分値算出部 １０２，４０６…動き補償予測部（ＭＣ） １０３…フレーム内／フレーム間（Ｉｎｔｒａ／Ｉｎｔ
ｅｒ）切り替え部 １０４，４０５…フレームメモリ（ＦＭ） １０５…動きベクトル検出部（ＭＥ） １０６…離散コサイン変換部（ＤＣＴ） １０７…量子化部（Ｑ） １０８…可変長符号化部（ＶＬＣ） １０９，４０２…逆量子化部（ＩＱ） １１０，４０３…逆離散コサイン変換部（ＩＤＣＴ） １１１，４０４…加算部 １１２…出力バッファ（Ｂｕｆｆｅｒ） １１３…レート制御部（Rate Control） ２１４…有意／無意ブロック判定部 ２１５，２１６，４０７…切り替え部 ４０８…ポストフィルタ部。

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK03 KK15 MA00 MA04 MA05 MA23 MC11 ME01 NN01 NN15 PP04 TA41 TA46 TA62 TA68 TB07 TB08 TC10 TC18 TD12 UA02 UA05 UA11 UA32 UA38 5J064 AA03 BA09 BA13 BA16 BC14 BC22

Claims (15)

【特許請求の範囲】
1. 【請求項１】入力される画像から得た動きベクトルと符
   号化処理済みの画像データを再生して得た画像とから動
   き補償予測を行うと共に、これにより得られた動き補償
   予測信号はフレーム内符号化処理の実施に利用し、動き
   補償予測信号を用いないフレーム間符号化処理と併用し
   て入力画像を逐次処理し、これを直交変換して得た変換
   係数を量子化し、可変長符号化することにより、圧縮符
   号化するようにした動画像符号化装置において、 前記動きベクトルを検出する手段は、少なくとも２Ｎ×
   ２Ｎ画素（Ｎ：自然数）のブロック毎に整数画素精度の
   動きベクトルを検出する手段と半画素精度の動きベクト
   ルを検出する手段を有し、 前記変換係数の量子化処理に用いる量子化幅を判定する
   判定手段と、 前記判定手段が所定レベルより細かい量子化幅による量
   子化処理と判定した場合には、半画素精度の動きベクト
   ル検出を行わずに整数画素精度の動きベクトル検出によ
   り得られる動きベクトルを動きベクトルとし、前記判定
   手段がそれより粗い量子化幅による量子化処理と判定し
   た場合には、半画素精度の動きベクトル検出により得ら
   れる動きベクトルを動きベクトルとして出力する構成と
   することを特徴とする動画像符号化装置。
2. 【請求項２】入力される画像から得た動きベクトルと符
   号化処理済みの画像データを再生して得た画像とから動
   き補償予測を行うと共に、これにより得られた動き補償
   予測信号はフレーム内符号化処理の実施に利用し、動き
   補償予測信号を用いないフレーム間符号化処理と併用し
   て入力画像を逐次処理し、これを直交変換して得た変換
   係数を量子化し、可変長符号化することにより、圧縮符
   号化するようにした動画像符号化装置において、 前記動きベクトルを検出する手段は、少なくとも２Ｎ×
   ２Ｎ画素（Ｎ：自然数）のブロック毎に整数画素精度の
   動きベクトルを検出する手段とＮ×Ｎ画素のブロック毎
   に整数画素精度と半画素精度の動きベクトルを検出する
   手段および前記変換係数の量子化処理に用いる量子化幅
   を判定する判定手段およびこの判定手段が所定レベルよ
   り粗い量子化幅による量子化処理と判定した場合には、
   半画素精度の動きベクトル検出により得られる動きベク
   トルを動きベクトルとして出力し、前記判定手段が所定
   レベルより細かい量子化幅による量子化処理と判定した
   場合には、２Ｎ×２Ｎ画素毎の整数画素精度動きベクト
   ル検出手段により得られる動きベクトルに対する誤差の
   評価値とＮ×Ｎ画素毎の整数画素精度動きベクトル検出
   により得られる動きベクトルに対する誤差評価値との大
   きさを比較すると共に、この比較の結果、前者の誤差評
   価値の方が小さい場合は、２Ｎ×２Ｎ画素毎の整数画素
   精度動きベクトル検出により得られる動きベクトルを動
   きベクトルとして出力し、前記比較の結果、前者の誤差
   評価値の方が大きい場合は、Ｎ×Ｎ画素毎の整数画素精
   度動きベクトル検出により得られる動きベクトルを動き
   ベクトルとして出力する手段とを備えた構成とすること
   を特徴とする動画像符号化装置。
3. 【請求項３】入力画像から得た動きベクトルと符号化処
   理済みの画像データを再生して得た画像とから動き補償
   予測を行うと共に、これにより得られた動き補償予測信
   号は前記入力画像との差分である動き補償予測誤差信号
   を用いてフレーム内符号化処理の実施に利用し、前記入
   力画像のみを用いるフレーム間符号化処理と併用して入
   力画像を逐次処理し、これを直交変換して得た変換係数
   を量子化し、可変長符号化することにより、圧縮符号化
   するようにした動画像符号化装置において、 前記圧縮符号化されたデータを蓄えて逐次出力する出力
   バッファと、 前記動き補償予測誤差信号からその絶対値和であるブロ
   ックアクティビティを算出する手段と、 前記出力バッファの内容量に対応に変化するしきい値を
   設定する手段と、 前記ブロックアクティビティが上記しきい値よりも大き
   いか否かを判定する手段と、 前記ブロックアクティビティが上記しきい値よりも小さ
   いと上記判定手段が判断した場合には、該ブロックを強
   制的に内容ゼロの無意ブロックとして符号化する手段
   と、を有することを特徴とする動画像符号化装置。
4. 【請求項４】請求項３に記載の動画像符号化装置におい
   て、 量子化処理に適用する量子化幅を決定する量子化パラメ
   ータを前記出力バッファの残存容量対応に変化させる手
   段を設けると共に、しきい値設定手段は、量子化パラメ
   ータの値に応じたしきい値に設定するものであることを
   特徴とする動画像符号化装置。
5. 【請求項５】動画像を動き補償予測と離散コサイン変換
   を用いた動画像符号化方式にて符号化したデータを復号
   化処理して再生する動画像復号化手段において、 復号化され画像信号に対し、ポストフィルタ処理を施す
   フィルタ手段と、 符号化時における量子化処理での使用量子化幅に応じて
   前記復号化された画像信号に対するフィルタ手段でのポ
   ストフィルタ処理の実施を制御する手段と、を備えたこ
   とを特徴とする画像復号化装置。
6. 【請求項６】請求項５記載の動画像復号化手段におい
   て、 前記ポストフィルタ処理の実施を制御する手段は、 符号化時における量子化処理での使用量子化幅が細かい
   ときは前記ポストフィルタ処理を施さないように制御す
   ることを特徴とする画像復号化装置。
7. 【請求項７】請求項５記載の動画像復号化手段におい
   て、 前記フィルタ手段は、前記ポストフィルタを輝度信号と
   色差信号別とすると共に、前記ポストフィルタ処理の実
   施を制御する手段は、符号化時における量子化処理での
   使用量子化幅が所定のレベルより粗いときは輝度信号と
   色差信号共にポストフィルタ処理させるべく制御し、前
   記使用量子化幅が所定のレベルより細かいときは輝度信
   号のみにポストフィルタ処理させるべく制御させること
   を特徴とする動画像復号化装置。
8. 【請求項８】動画像を動き補償予測と離散コサイン変換
   を用いた動画像符号化方式にて符号化したデータを復号
   化処理して再生する動画像復号化手段において、 輝度信号と色差信号別にポストフィルタ処理するフィル
   タ手段であって、復号化され画像信号に対し、ポストフ
   ィルタ処理を施すフィルタ手段と、 符号化時における量子化処理での使用量子化幅に応じて
   前記復号化された画像信号に対する前記フィルタ手段で
   のポストフィルタ処理の実施を制御するものであって、
   符号化時における量子化処理での使用量子化幅が所定の
   第１レベルより細かいときは前記ポストフィルタ処理を
   施さないように制御し、符号化時における量子化処理で
   の使用量子化幅が前記所定の第１レベルより粗いときは
   所定の第２レベルと比較して粗いときに輝度信号と色差
   信号共にポストフィルタ処理させるべく制御し、他は輝
   度信号のみにポストフィルタ処理させるべく制御する手
   段と、を具備することを特徴とする動画像復号化装置。
9. 【請求項９】入力される画像から得た動きベクトルと符
   号化処理済みの画像データを再生して得た画像とから動
   き補償予測を行うと共に、これにより得られた動き補償
   予測信号はフレーム内符号化処理の実施に利用し、動き
   補償予測信号を用いないフレーム間符号化処理と併用し
   て入力画像を逐次処理し、これを直交変換して得た変換
   係数を量子化し、可変長符号化することにより、圧縮符
   号化するようにした動画像符号化方法において、 前記動きベクトルの検出には、少なくとも２Ｎ×２Ｎ画
   素（Ｎ：自然数）のブロック毎に整数画素精度の動きベ
   クトル検出する検出法と半画素精度の動きベクトルを検
   出する検出法を用い、 前記変換係数の量子化処理に用いる量子化幅を判定する
   と共に、この判定結果が所定レベルより細かい量子化幅
   による量子化処理との判定であった場合には、半画素精
   度の動きベクトル検出を行わずに整数画素精度の動きベ
   クトル検出により得られる動きベクトルを検出動きベク
   トルとして利用し、前記判定結果が前記所定レベルより
   粗い量子化幅による量子化処理と判定した場合には、半
   画素精度の動きベクトル検出により得られる動きベクト
   ルを動きベクトルとして利用することを特徴とする動画
   像符号化方法。
10. 【請求項１０】入力される画像から得た動きベクトルと
    符号化処理済みの画像データを再生して得た画像とから
    動き補償予測を行うと共に、これにより得られた動き補
    償予測信号はフレーム内符号化処理の実施に利用し、動
    き補償予測信号を用いないフレーム間符号化処理と併用
    して入力画像を逐次処理し、これを直交変換して得た変
    換係数を量子化し、可変長符号化することにより、圧縮
    符号化するようにした動画像符号化方法において、 前記動きベクトルの検出には、少なくとも２Ｎ×２Ｎ画
    素（Ｎ：自然数）のブロック毎に整数画素精度の動きベ
    クトルを検出する第１の検出法とＮ×Ｎ画素のブロック
    毎に整数画素精度と半画素精度の動きベクトルを検出す
    る第２の検出法を用い、前記変換係数の量子化処理に用
    いる量子化幅を判定してその判定結果が所定レベルより
    粗い量子化幅による量子化処理と判定であった場合に
    は、半画素精度の動きベクトル検出により得られる動き
    ベクトルを動きベクトルとして採用し、前記判定結果が
    所定レベルより細かい量子化幅による量子化処理と判定
    した場合には、前記第１の検出法により得られる動きベ
    クトルに対する誤差の評価値とＮ×Ｎ画素毎の整数画素
    精度動きベクトル検出により得られる動きベクトルに対
    する誤差評価値との大きさを比較すると共に、この比較
    の結果、前者の誤差評価値の方が小さい場合は、２Ｎ×
    ２Ｎ画素毎の整数画素精度動きベクトル検出により得ら
    れる動きベクトルを動きベクトルとして採用し、前記比
    較の結果、前者の誤差評価値の方が大きい場合は、Ｎ×
    Ｎ画素毎の整数画素精度動きベクトル検出により得られ
    る動きベクトルを動きベクトルとして採用することを特
    徴とする動画像符号化方法。
11. 【請求項１１】入力画像から得た動きベクトルと符号化
    処理済みの画像データを再生して得た画像とから動き補
    償予測を行うと共に、これにより得られた動き補償予測
    信号は前記入力画像との差分である動き補償予測誤差信
    号を用いてフレーム内符号化処理の実施に利用し、前記
    入力画像のみを用いるフレーム間符号化処理と併用して
    入力画像を逐次処理し、これを直交変換して得た変換係
    数を量子化し、可変長符号化することにより、圧縮符号
    化するようにした動画像符号化方法において、 前記圧縮符号化されたデータをバッファに蓄えて逐次出
    力すると共に、この出力バッファの内容量に対応にしき
    い値を設定するようにし、前記動き補償予測誤差信号か
    らその絶対値和であるブロックアクティビティを算出し
    て、前記ブロックアクティビティが前記しきい値よりも
    大きいか否かを判定し、前記ブロックアクティビティが
    前記しきい値よりも小さいと判定した場合には、該ブロ
    ックを強制的に内容ゼロの無意ブロックとして符号化す
    ることを特徴とする動画像符号化方法。
12. 【請求項１２】動画像を動き補償予測と離散コサイン変
    換を用いた動画像符号化方式にて符号化したデータを復
    号化処理して再生する動画像復号化方法において、 符号化時における量子化処理での使用量子化幅に応じて
    前記復号化された画像信号に対するポストフィルタ処理
    の実施を制御することを特徴とする画像復号化方法。
13. 【請求項１３】請求項１２記載の動画像復号化方法にお
    いて、 符号化時における量子化処理での使用量子化幅が細かい
    ときは前記ポストフィルタ処理を施さないようにするこ
    とを特徴とする画像復号化方法。
14. 【請求項１４】請求項１２記載の動画像復号化方法にお
    いて、 前記ポストフィルタ処理は輝度信号と色差信号別とする
    と共に、符号化時における量子化処理での使用量子化幅
    が所定のレベルより粗いときは輝度信号と色差信号共に
    ポストフィルタ処理させるべく制御し、前記使用量子化
    幅が所定のレベルより細かいときは輝度信号のみにポス
    トフィルタ処理させることを特徴とする動画像復号化方
    法。
15. 【請求項１５】動画像を動き補償予測と離散コサイン変
    換を用いた動画像符号化方式にて符号化したデータを復
    号化処理して再生する動画像復号化方法において、 復号化され画像信号に対し、輝度信号と色差信号別にポ
    ストフィルタ処理するフィルタ手段を設け、符号化時に
    おける量子化処理での使用量子化幅が所定の第１レベル
    より細かいときは前記ポストフィルタ処理を施さないよ
    うに制御し、符号化時における量子化処理での使用量子
    化幅が前記所定の第１レベルより粗いときは所定の第２
    レベルと比較して粗いときに輝度信号と色差信号共にポ
    ストフィルタ処理させるべく制御し、他は輝度信号のみ
    にポストフィルタ処理させるべく制御することを特徴と
    する動画像復号化方法。