JP5367097B2 - 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム - Google Patents
動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム Download PDFInfo
- Publication number
- JP5367097B2 JP5367097B2 JP2011553826A JP2011553826A JP5367097B2 JP 5367097 B2 JP5367097 B2 JP 5367097B2 JP 2011553826 A JP2011553826 A JP 2011553826A JP 2011553826 A JP2011553826 A JP 2011553826A JP 5367097 B2 JP5367097 B2 JP 5367097B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- candidate reference
- motion vectors
- reference motion
- primary candidate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 title claims abstract description 682
- 239000013598 vector Substances 0.000 title claims abstract description 606
- 238000000034 method Methods 0.000 title claims description 80
- 238000004364 calculation method Methods 0.000 claims abstract description 39
- 239000000284 extract Substances 0.000 claims description 3
- 238000007796 conventional method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 11
- 238000013139 quantization Methods 0.000 description 6
- 230000009466 transformation Effects 0.000 description 2
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/533—Motion estimation using multistep search, e.g. 2D-log search or one-at-a-time search [OTS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本願は、2010年2月9日に日本に出願された特願2010−26129号に基づき優先権を主張し、その内容をここに援用する。
(a)メディアン予測符号化(H.264など)〔以下、従来技術aという〕
(b)参照動きベクトル指定による予測符号化〔以下、従来技術bという〕
図12は、従来の動きベクトルの予測符号化方式の例を説明する図である。従来技術aおよび従来技術bでは、動きベクトルを符号化(復号も同様)する際に、図12に示すような符号化対象ブロックの近隣の符号化済みブロックの動きベクトル(符号化済み動きベクトル)を参照動きベクトルとして用いて予測を行って、動きベクトルの符号化を行う。
(1)多数(N個)の1次候補参照動きベクトルを利用する。
(2)復号側で符号化(復号)対象ブロックを復号開始する時点ですでに復号済みの情報のみを利用して、各1次候補参照動きベクトルがどれだけ予測に適しているかを示す評価値(以下、信頼度)を求める。
(3)信頼度に応じて、1次候補参照動きベクトルをM(<N)個の2次候補参照動きベクトルに絞り込む。
(4)M個の2次候補参照動きベクトルを利用して予測動きベクトルを作成する。
動きベクトル予測残差算出部187は、動き探索部181が算出した動きベクトルと、動きベクトル予測部186が算出した予測動きベクトルとの残差を算出し、算出された残差を動きベクトル予測残差として出力する。
最初に、1次候補参照動きベクトル設定部183(または254)は、N個の1次候補参照動きベクトルを設定する。このN個の1次候補参照動きベクトルを設定する方法として、例えば次のような方法を用いることができる。
図6Aに示すように、符号化対象ブロック31の位置を基準として、それから所定の範囲内の予め定められたN個の動きベクトルVi(i=1,2,…,N)を、1次候補参照動きベクトルとする。この動きベクトルViの値は、符号化側と復号側で同じ値となるように予め任意に決めることができる。これらの動きベクトルViの値を、予めテーブル化して保持しておくようにしてもよい。
図6Bに示すように、符号化対象ピクチャ3において、符号化対象ブロック31の近隣にある多数(この例では10個)の符号化済みブロックB1〜B10の符号化に用いた動きベクトルを、1次候補参照動きベクトルとして設定する。この場合にも、復号側では、符号化側で用いた1次候補参照動きベクトルと同じ動きベクトルを、復号済みの動きベクトルから設定することができる。
前述した設定例1でN1個の1次候補参照動きベクトルを選び、設定例2でN2個の1次候補参照動きベクトルを選んで、合計N個(N=N1+N2)の1次候補参照動きベクトルを設定する。
この設定例4では、符号化済みブロックの動きベクトルと、これらの動きベクトルについて所定範囲内の動きベクトルとを、1次候補参照動きベクトルとする。例えば、ある符号化済みベクトルの動きベクトル(10,20)について、所定範囲を、X,Y方向にそれぞれ±1の範囲とした場合、動きベクトル(10,20)に加え、動きベクトル(9,20)、(11,20)、(10,19)、(10,21)、(9,19)、(9,21)、(11,19)、および(11,21)も候補とする。すなわち、1つの符号化済みブロックの動きベクトルに対して合計9個の1次候補参照動きベクトルが候補となる。最初に候補に入れる符号化済みブロックの動きベクトルをK個として、K個すべての周辺も候補に入れると、9×K個の1次候補参照動きベクトルを利用することになる。ただし、復号側と共通であれば、すべての符号化済みブロックの動きベクトルの周辺を候補に入れるのではなく、一部分でもよい。
信頼度計算部184(または255)は、1次候補参照動きベクトル設定部183が設定したN個の1次候補参照動きベクトルの各々について、符号化済みの情報を用いて信頼度を算出する。ここで、信頼度は、符号化(復号)対象ブロックでの動きベクトル予測における1次候補参照動きベクトルの有効性を定量的に表現したものである。この信頼度は、N個の1次候補参照動きベクトルについて、復号側で符号化対象ブロックを復号開始する時点ですでに復号済みの情報のみを利用して計算する。
次に、参照動きベクトル決定部185(または256)において、各1次候補参照動きベクトルの信頼度情報に基づき、N個の1次候補参照動きベクトルをM個(1≦M<N)の2次候補参照動きベクトルに絞り込む。
動きベクトル予測部186(または257)は、参照動きベクトル決定部185が選出した2次候補参照動きベクトルを利用して、符号化対象ブロックの予測動きベクトルを作成する。本実施形態において重要なポイントは、多数の1次候補参照動きベクトルを信頼度によって絞り込むことにより、信頼度の高い2次候補参照動きベクトルを用いて、動きベクトル予測残差を算出するための予測動きベクトルを求める点にある。したがって、2次候補参照動きベクトルから予測動きベクトルを求める処理は、図10や図11で説明した従来技術の動きベクトル予測部103(または204)の処理と同様でよい。しかし、必ずしも従来技術と同じ処理でなければならないわけではなく、異なる処理によって予測動きベクトルを求めて、本実施形態を実施することもできる。
2 動画像復号装置
10 予測残差信号算出部
11 直交変換部
12 量子化部
13 情報源符号化部
14,21 逆量子化部
15,22 逆直交変換部
16 復号信号算出部
17,24 フレームメモリ
18,25 動き補償部
181 動き探索部
182,253 動きベクトルメモリ
183,254 1次候補参照動きベクトル設定部
184,255 信頼度計算部
185,256 参照動きベクトル決定部
186,257 動きベクトル予測部
187 動きベクトル予測残差算出部
20 情報源復号部
23 復号信号算出部
251 動きベクトル算出部
252 予測信号作成部
Claims (16)
- 符号化対象画像を複数のブロックに分割し、前記ブロックごとに動き補償を用いて符号化する動画像符号化方式における動きベクトル予測符号化方法において、
符号化済みの参照画像を用いて、前記符号化対象画像における符号化対象ブロックの動き探索を行うことによって動きベクトルを算出するステップと、
符号化済みブロックの符号化に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記符号化対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて符号化済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記符号化対象ブロックの予測動きベクトルを算出し、前記動き探索によって算出された動きベクトルと前記予測動きベクトルとの残差を、動きベクトルの符号化情報として符号化するステップと、
を有し、
前記N個の1次候補参照動きベクトルの中から前記2次候補参照動きベクトルを選出するステップでは、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動きベクトル予測符号化方法。 - 符号化対象画像を複数のブロックに分割し、前記ブロックごとに動き補償を用いて符号化する動画像符号化方式における動きベクトル予測符号化方法において、
符号化済みの参照画像を用いて、前記符号化対象画像における符号化対象ブロックの動き探索を行うことによって動きベクトルを算出するステップと、
符号化済みブロックの符号化に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記符号化対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて符号化済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記符号化対象ブロックの予測動きベクトルを算出し、前記動き探索によって算出された動きベクトルと前記予測動きベクトルとの残差を、動きベクトルの符号化情報として符号化するステップと、
を有し、
前記1次候補参照動きベクトルの信頼度を算出するステップでは、前記符号化対象ブロックに隣接する符号化済み画素の集合をテンプレートとして用い、前記参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記符号化済み画素の集合と前記マッチング対象領域における画素の集合との類似度を前記信頼度として算出する
動きベクトル予測符号化方法。 - 符号化対象画像を複数のブロックに分割し、前記ブロックごとに動き補償を用いて符号化する動画像符号化方式における動きベクトル予測符号化方法において、
符号化済みの参照画像を用いて、前記符号化対象画像における符号化対象ブロックの動き探索を行うことによって動きベクトルを算出するステップと、
符号化済みブロックの符号化に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記符号化対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて符号化済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記符号化対象ブロックの予測動きベクトルを算出し、前記動き探索によって算出された動きベクトルと前記予測動きベクトルとの残差を、動きベクトルの符号化情報として符号化するステップと、
を有し、
前記1次候補参照動きベクトルの信頼度を算出するステップでは、前記符号化対象ブロックに隣接する符号化済み画素の集合をテンプレートとして用い、前記参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記符号化済み画素の集合と前記マッチング対象領域における画素の集合との類似度を前記信頼度として算出し、
前記N個の1次候補参照動きベクトルの中から前記2次候補参照動きベクトルを選出するステップでは、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動きベクトル予測符号化方法。 - 請求項1から3のいずれか1項に記載の動きベクトル予測符号化方法において、
前記N個抽出すべき1次候補参照動きベクトルが前記M個より小さいM′個しか抽出できなかった場合に、M′個の1次候補参照動きベクトルを、前記2次候補参照動きベクトルとして選出する
動きベクトル予測符号化方法。 - 請求項1から4のいずれか1項に記載の動きベクトル予測符号化方法において、
前記1次候補参照動きベクトルを抽出するステップでは、前記符号化済みブロックの符号化に用いた動きベクトルに加え、当該動きベクトルの各々を基準とした所定の範囲内の動きベクトルを設定する
動きベクトル予測符号化方法。 - 複数のブロックに分割されて符号化された動画像の復号対象画像を、前記ブロックごとに動き補償を用いて復号する動画像復号方式における動きベクトル予測復号方法において、
復号対象ブロックの動きベクトル予測残差を復号するステップと、
復号済みブロックの復号に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記復号対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて復号済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記復号対象ブロックの予測動きベクトルを算出し、前記復号された動きベクトル予測残差と前記予測動きベクトルとを加算して前記復号対象ブロックの動きベクトルを算出するステップと、
を有し、
前記N個の1次候補参照動きベクトルの中から前記2次候補参照動きベクトルを選出するステップでは、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動きベクトル予測復号方法。 - 複数のブロックに分割されて符号化された動画像の復号対象画像を、前記ブロックごとに動き補償を用いて復号する動画像復号方式における動きベクトル予測復号方法において、
復号対象ブロックの動きベクトル予測残差を復号するステップと、
復号済みブロックの復号に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記復号対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて復号済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記復号対象ブロックの予測動きベクトルを算出し、前記復号された動きベクトル予測残差と前記予測動きベクトルとを加算して前記復号対象ブロックの動きベクトルを算出するステップと、
を有し、
前記1次候補参照動きベクトルの信頼度を算出するステップでは、前記復号対象ブロックに隣接する復号済み画素の集合をテンプレートとして用い、復号済みの参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記復号済み画素の集合と前記マッチング対象領域における画素の集合との類似度を信頼度として算出する
動きベクトル予測復号方法。 - 複数のブロックに分割されて符号化された動画像の復号対象画像を、前記ブロックごとに動き補償を用いて復号する動画像復号方式における動きベクトル予測復号方法において、
復号対象ブロックの動きベクトル予測残差を復号するステップと、
復号済みブロックの復号に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出するステップと、
前記復号対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて復号済みの画像情報を用いて算出するステップと、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出するステップと、
前記2次候補参照動きベクトルを用いて前記復号対象ブロックの予測動きベクトルを算出し、前記復号された動きベクトル予測残差と前記予測動きベクトルとを加算して前記復号対象ブロックの動きベクトルを算出するステップと、
を有し、
前記1次候補参照動きベクトルの信頼度を算出するステップでは、前記復号対象ブロックに隣接する復号済み画素の集合をテンプレートとして用い、復号済みの参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記復号済み画素の集合と前記マッチング対象領域における画素の集合との類似度を信頼度として算出し、
前記N個の1次候補参照動きベクトルの中から前記2次候補参照動きベクトルを選出するステップでは、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動きベクトル予測復号方法。 - 請求項6から8のいずれか1項に記載の動きベクトル予測復号方法において、
前記N個抽出すべき1次候補参照動きベクトルが前記M個より小さいM′個しか抽出できなかった場合に、M′個の1次候補参照動きベクトルを、前記2次候補参照動きベクトルとして選出する
動きベクトル予測復号方法。 - 請求項6から9のいずれか1項に記載の動きベクトル予測復号方法において、
前記1次候補参照動きベクトルを抽出するステップでは、前記復号済みブロックの復号に用いた動きベクトルに加え、当該動きベクトルの各々を基準とした所定の範囲内の動きベクトルを設定する
動きベクトル予測復号方法。 - 符号化対象画像を複数のブロックに分割し、前記ブロックごとに動き補償を用いて動画像を符号化する動画像符号化装置において、
符号化済みの参照画像を用いて、前記符号化対象画像における符号化対象ブロックの動き探索を行うことによって動きベクトルを算出する動き探索部と、
符号化済みブロックの符号化に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出する1次候補参照動きベクトル設定部と、
前記符号化対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて符号化済みの画像情報を用いて算出する信頼度計算部と、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出する参照動きベクトル決定部と、
前記2次候補参照動きベクトルを用いて前記符号化対象ブロックの予測動きベクトルを算出し、前記動き探索によって算出された動きベクトルと前記予測動きベクトルとの残差を、動きベクトルの符号化情報として符号化する動きベクトル予測部と、
を備え、
前記参照動きベクトル決定部は、前記N個の1次候補参照動きベクトルの中から、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動画像符号化装置。 - 符号化対象画像を複数のブロックに分割し、前記ブロックごとに動き補償を用いて動画像を符号化する動画像符号化装置において、
符号化済みの参照画像を用いて、前記符号化対象画像における符号化対象ブロックの動き探索を行うことによって動きベクトルを算出する動き探索部と、
符号化済みブロックの符号化に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出する1次候補参照動きベクトル設定部と、
前記符号化対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて符号化済みの画像情報を用いて算出する信頼度計算部と、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出する参照動きベクトル決定部と、
前記2次候補参照動きベクトルを用いて前記符号化対象ブロックの予測動きベクトルを算出し、前記動き探索によって算出された動きベクトルと前記予測動きベクトルとの残差を、動きベクトルの符号化情報として符号化する動きベクトル予測部と、
を備え、
前記信頼度計算部では、前記符号化対象ブロックに隣接する符号化済み画素の集合をテンプレートとして用い、前記参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記符号化済み画素の集合と前記マッチング対象領域における画素の集合との類似度を前記信頼度として算出する
動画像符号化装置。 - 複数のブロックに分割されて符号化された動画像の復号対象画像を、前記ブロックごとに動き補償を用いて復号する動画像復号装置において、
復号対象ブロックの動きベクトル予測残差を復号する情報源復号部と、
復号済みブロックの復号に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出する1次候補参照動きベクトル設定部と、
前記復号対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて復号済みの画像情報を用いて算出する信頼度計算部と、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出する参照動きベクトル決定部と、
前記2次候補参照動きベクトルを用いて前記復号対象ブロックの予測動きベクトルを算出し、前記復号された動きベクトル予測残差と前記予測動きベクトルとを加算して前記復号対象ブロックの動きベクトルを算出する動きベクトル予測部と、
を備え、
前記参照動きベクトル決定部は、前記N個の1次候補参照動きベクトルの中から、信頼度が大きい上位複数個の1次候補参照動きベクトルを前記2次候補参照動きベクトルとして選出する
動画像復号装置。 - 複数のブロックに分割されて符号化された動画像の復号対象画像を、前記ブロックごとに動き補償を用いて復号する動画像復号装置において、
復号対象ブロックの動きベクトル予測残差を復号する情報源復号部と、
復号済みブロックの復号に用いた動きベクトルまたは所定値の動きベクトルからなるN個(Nは2以上の整数)の動きベクトルを1次候補参照動きベクトルとして抽出する1次候補参照動きベクトル設定部と、
前記復号対象ブロックでの動きベクトル予測における有効性を定量的に表す前記1次候補参照動きベクトルの信頼度を、前記N個の1次候補参照動きベクトルのそれぞれについて復号済みの画像情報を用いて算出する信頼度計算部と、
前記N個の1次候補参照動きベクトルのうち前記信頼度が大きい上位M個(Mは1以上かつN未満の所定の整数)の1次候補参照動きベクトルを2次候補参照動きベクトルとして選出する参照動きベクトル決定部と、
前記2次候補参照動きベクトルを用いて前記復号対象ブロックの予測動きベクトルを算出し、前記復号された動きベクトル予測残差と前記予測動きベクトルとを加算して前記復号対象ブロックの動きベクトルを算出する動きベクトル予測部と、
を備え、
前記信頼度計算部では、前記復号対象ブロックに隣接する復号済み画素の集合をテンプレートとして用い、復号済みの参照画像上で前記1次候補参照動きベクトル分だけ前記テンプレートの領域をずらした領域をマッチング対象領域として設定し、前記テンプレートの前記復号済み画素の集合と前記マッチング対象領域における画素の集合との類似度を信頼度として算出する
動画像復号装置。 - 請求項1から5のいずれか1項に記載の動きベクトル予測符号化方法をコンピュータに実行させるための動きベクトル予測符号化プログラム。
- 請求項6から10のいずれか1項に記載の動きベクトル予測復号方法をコンピュータに実行させるための動きベクトル予測復号プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011553826A JP5367097B2 (ja) | 2010-02-09 | 2011-02-07 | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010026129 | 2010-02-09 | ||
JP2010026129 | 2010-02-09 | ||
PCT/JP2011/052501 WO2011099440A1 (ja) | 2010-02-09 | 2011-02-07 | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム |
JP2011553826A JP5367097B2 (ja) | 2010-02-09 | 2011-02-07 | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2011099440A1 JPWO2011099440A1 (ja) | 2013-06-13 |
JP5367097B2 true JP5367097B2 (ja) | 2013-12-11 |
Family
ID=44367714
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011553826A Active JP5367097B2 (ja) | 2010-02-09 | 2011-02-07 | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム |
Country Status (11)
Country | Link |
---|---|
US (1) | US9838709B2 (ja) |
EP (1) | EP2536148B1 (ja) |
JP (1) | JP5367097B2 (ja) |
KR (2) | KR20140089596A (ja) |
CN (1) | CN102742276B (ja) |
BR (1) | BR112012019680A2 (ja) |
CA (1) | CA2788946A1 (ja) |
ES (1) | ES2901803T3 (ja) |
RU (1) | RU2519525C2 (ja) |
TW (1) | TWI442776B (ja) |
WO (1) | WO2011099440A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009032255A2 (en) * | 2007-09-04 | 2009-03-12 | The Regents Of The University Of California | Hierarchical motion vector processing method, software and devices |
TWI450592B (zh) * | 2010-02-09 | 2014-08-21 | Nippon Telegraph & Telephone | 動向量預測編碼方法、動向量預測解碼方法、動畫像編碼裝置、動畫像解碼裝置及其程式 |
EP2536149A4 (en) * | 2010-02-09 | 2015-06-24 | Nippon Telegraph & Telephone | PREDICTIVE CODING METHOD FOR MOTION VECTORS, PREDICTIVE DECODING METHOD FOR MOTION VECTORS, VIDEO CODING DEVICE, VIDEO CODING DEVICE AND PROGRAMS THEREFOR |
BR112012019671A2 (pt) * | 2010-02-09 | 2019-09-24 | Nippon Telegraph & Telephone | método de codificação de previsão de vetor de movimento, método de decodificação de previsão de vetor de movimento, aparelho de codificação de gravura em movimento, aparelho de decodificação de gravura em movimento e programas dos mesmos. |
WO2012090397A1 (ja) * | 2010-12-28 | 2012-07-05 | 株式会社Jvcケンウッド | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム、並びに動画像復号装置、動画像復号方法及び動画像復号プログラム |
EP2800371A4 (en) * | 2011-12-28 | 2015-08-12 | Jvc Kenwood Corp | VIDEO CODING DEVICE, VIDEO PROCESSING AND VIDEO PROGRAM, AND DEVICE, METHOD AND PROGRAM FOR VIDEO CODING |
GB2531003A (en) | 2014-10-06 | 2016-04-13 | Canon Kk | Method and apparatus for vector encoding in video coding and decoding |
TW201826795A (zh) * | 2016-11-22 | 2018-07-16 | 美商松下電器(美國)知識產權公司 | 編碼裝置、解碼裝置、編碼方法及解碼方法 |
TW201826796A (zh) * | 2016-11-22 | 2018-07-16 | 美商松下電器(美國)知識產權公司 | 編碼裝置、解碼裝置、編碼方法及解碼方法 |
WO2018097116A1 (ja) * | 2016-11-22 | 2018-05-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 符号化装置、復号装置、符号化方法及び復号方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008171247A (ja) * | 2007-01-12 | 2008-07-24 | Sony Corp | 動き検出装置、方法、及びプログラム |
JP2008283490A (ja) * | 2007-05-10 | 2008-11-20 | Ntt Docomo Inc | 動画像符号化装置、方法及びプログラム、並びに動画像復号化装置、方法及びプログラム |
WO2010001917A1 (ja) * | 2008-07-01 | 2010-01-07 | ソニー株式会社 | 画像処理装置および方法 |
Family Cites Families (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3263807B2 (ja) * | 1996-09-09 | 2002-03-11 | ソニー株式会社 | 画像符号化装置および画像符号化方法 |
FR2756399B1 (fr) | 1996-11-28 | 1999-06-25 | Thomson Multimedia Sa | Procede et dispositif de compression video pour images de synthese |
AU1941797A (en) | 1997-03-17 | 1998-10-12 | Mitsubishi Denki Kabushiki Kaisha | Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system |
US6011870A (en) | 1997-07-18 | 2000-01-04 | Jeng; Fure-Ching | Multiple stage and low-complexity motion estimation for interframe video coding |
US5978048A (en) | 1997-09-25 | 1999-11-02 | Daewoo Electronics Co., Inc. | Method and apparatus for encoding a motion vector based on the number of valid reference motion vectors |
JP3540142B2 (ja) | 1998-01-30 | 2004-07-07 | 株式会社東芝 | 動きベクトル検出回路および動きベクトル検出方法 |
US6058143A (en) | 1998-02-20 | 2000-05-02 | Thomson Licensing S.A. | Motion vector extrapolation for transcoding video sequences |
ES2725714T3 (es) | 2001-11-06 | 2019-09-26 | Panasonic Ip Corp America | Procedimiento de codificación de imágenes en movimiento y procedimiento de decodificación de imágenes en movimiento |
JP2003224854A (ja) | 2002-01-29 | 2003-08-08 | Hitachi Ltd | 動きベクトル検出装置及び画像処理装置並びにコンピュータ・ソフトウエア |
RU2314656C2 (ru) | 2002-06-11 | 2008-01-10 | Нокиа Корпорейшн | Внутреннее кодирование, основанное на пространственном прогнозировании |
JP2004023458A (ja) | 2002-06-17 | 2004-01-22 | Toshiba Corp | 動画像符号化/復号化方法及び装置 |
JP4724351B2 (ja) | 2002-07-15 | 2011-07-13 | 三菱電機株式会社 | 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法、および通信装置 |
KR100865034B1 (ko) | 2002-07-18 | 2008-10-23 | 엘지전자 주식회사 | 모션 벡터 예측 방법 |
RU2338332C2 (ru) * | 2002-11-21 | 2008-11-10 | Эл Джи Электроникс Инк. | Способ предсказания блока изображения с использованием усовершенствованного режима прямого предсказания |
JP4003128B2 (ja) * | 2002-12-24 | 2007-11-07 | ソニー株式会社 | 画像データ処理装置および方法、記録媒体、並びにプログラム |
CN1736108A (zh) * | 2003-01-10 | 2006-02-15 | 皇家飞利浦电子股份有限公司 | 有效的预测图像参数估计 |
US7336707B2 (en) | 2003-06-06 | 2008-02-26 | Samsung Electronics Co., Ltd. | Method and apparatus for detecting improper area for motion compensation in video signal |
KR20050078706A (ko) | 2004-01-31 | 2005-08-08 | 삼성전자주식회사 | 메모리 액세스 방법 및 메모리 액세스 장치 |
CN100584013C (zh) | 2005-01-07 | 2010-01-20 | 日本电信电话株式会社 | 视频编码方法及装置、视频解码方法及装置 |
US20060153300A1 (en) | 2005-01-12 | 2006-07-13 | Nokia Corporation | Method and system for motion vector prediction in scalable video coding |
KR100931870B1 (ko) * | 2005-04-13 | 2009-12-15 | 노키아 코포레이션 | 비디오 데이터를 효과적으로 코딩 및 디코딩하는 방법,장치 및 시스템 |
KR101276720B1 (ko) | 2005-09-29 | 2013-06-19 | 삼성전자주식회사 | 카메라 파라미터를 이용하여 시차 벡터를 예측하는 방법,그 방법을 이용하여 다시점 영상을 부호화 및 복호화하는장치 및 이를 수행하기 위한 프로그램이 기록된 기록 매체 |
JP2008109632A (ja) * | 2006-09-28 | 2008-05-08 | Toshiba Corp | 動きベクトル検出装置及びその方法 |
CN101682775B (zh) | 2007-03-14 | 2015-04-01 | 日本电信电话株式会社 | 运动矢量搜索方法和装置 |
WO2008111005A1 (en) | 2007-03-15 | 2008-09-18 | Nokia Corporation | System and method for providing improved residual prediction for spatial scalability in video coding |
EP2147558A2 (en) | 2007-04-17 | 2010-01-27 | Nokia Corporation | Feedback based scalable video coding |
TW200905030A (en) | 2007-07-31 | 2009-02-01 | Chinese Professional Fabric Industry Co Ltd | A manufacturing method of optical-excitation fabric |
TW200910971A (en) | 2007-08-22 | 2009-03-01 | Univ Nat Cheng Kung | Direction detection algorithms for H.264 intra prediction |
KR101228020B1 (ko) * | 2007-12-05 | 2013-01-30 | 삼성전자주식회사 | 사이드 매칭을 이용한 영상의 부호화 방법 및 장치, 그복호화 방법 및 장치 |
US8953685B2 (en) * | 2007-12-10 | 2015-02-10 | Qualcomm Incorporated | Resource-adaptive video interpolation or extrapolation with motion level analysis |
US8165210B2 (en) | 2007-12-17 | 2012-04-24 | Vixs Systems, Inc. | Video codec with shared interpolation filter and method for use therewith |
JP4513034B2 (ja) * | 2008-02-20 | 2010-07-28 | ソニー株式会社 | 画像信号処理装置、画像信号処理方法、およびプログラム |
KR20090094595A (ko) | 2008-03-03 | 2009-09-08 | 삼성전자주식회사 | 복수 참조에 의한 움직임 예측을 이용한 부호화 방법 및장치, 그리고 복수 참조에 의한 움직임 예측을 이용한복호화 방법 및 장치 |
CN101965733B (zh) | 2008-03-09 | 2013-08-07 | Lg电子株式会社 | 用于编码或解码视频信号的方法和设备 |
ES2812473T3 (es) | 2008-03-19 | 2021-03-17 | Nokia Technologies Oy | Vector de movimiento combinado y predicción de índice de referencia para la codificación de vídeo |
KR101364195B1 (ko) | 2008-06-26 | 2014-02-21 | 에스케이텔레콤 주식회사 | 움직임벡터 부호화/복호화 방법 및 그 장치 |
JP5262384B2 (ja) | 2008-07-17 | 2013-08-14 | 富士ゼロックス株式会社 | 画像形成装置、制御装置、およびプログラム |
CN102210152A (zh) * | 2008-10-06 | 2011-10-05 | Lg电子株式会社 | 用于处理视频信号的方法和设备 |
BR112012019671A2 (pt) * | 2010-02-09 | 2019-09-24 | Nippon Telegraph & Telephone | método de codificação de previsão de vetor de movimento, método de decodificação de previsão de vetor de movimento, aparelho de codificação de gravura em movimento, aparelho de decodificação de gravura em movimento e programas dos mesmos. |
EP2536149A4 (en) * | 2010-02-09 | 2015-06-24 | Nippon Telegraph & Telephone | PREDICTIVE CODING METHOD FOR MOTION VECTORS, PREDICTIVE DECODING METHOD FOR MOTION VECTORS, VIDEO CODING DEVICE, VIDEO CODING DEVICE AND PROGRAMS THEREFOR |
TWI450592B (zh) | 2010-02-09 | 2014-08-21 | Nippon Telegraph & Telephone | 動向量預測編碼方法、動向量預測解碼方法、動畫像編碼裝置、動畫像解碼裝置及其程式 |
-
2011
- 2011-02-07 RU RU2012133441/08A patent/RU2519525C2/ru active
- 2011-02-07 US US13/576,620 patent/US9838709B2/en active Active
- 2011-02-07 BR BR112012019680A patent/BR112012019680A2/pt not_active IP Right Cessation
- 2011-02-07 KR KR1020147015525A patent/KR20140089596A/ko active Search and Examination
- 2011-02-07 KR KR1020127020436A patent/KR20120112723A/ko active Application Filing
- 2011-02-07 EP EP11742184.2A patent/EP2536148B1/en active Active
- 2011-02-07 WO PCT/JP2011/052501 patent/WO2011099440A1/ja active Application Filing
- 2011-02-07 CA CA2788946A patent/CA2788946A1/en not_active Abandoned
- 2011-02-07 CN CN201180008465.6A patent/CN102742276B/zh active Active
- 2011-02-07 JP JP2011553826A patent/JP5367097B2/ja active Active
- 2011-02-07 ES ES11742184T patent/ES2901803T3/es active Active
- 2011-02-08 TW TW100104087A patent/TWI442776B/zh active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008171247A (ja) * | 2007-01-12 | 2008-07-24 | Sony Corp | 動き検出装置、方法、及びプログラム |
JP2008283490A (ja) * | 2007-05-10 | 2008-11-20 | Ntt Docomo Inc | 動画像符号化装置、方法及びプログラム、並びに動画像復号化装置、方法及びプログラム |
WO2010001917A1 (ja) * | 2008-07-01 | 2010-01-07 | ソニー株式会社 | 画像処理装置および方法 |
Also Published As
Publication number | Publication date |
---|---|
US9838709B2 (en) | 2017-12-05 |
EP2536148A1 (en) | 2012-12-19 |
RU2012133441A (ru) | 2014-03-27 |
CN102742276B (zh) | 2016-08-03 |
TW201210348A (en) | 2012-03-01 |
KR20140089596A (ko) | 2014-07-15 |
CA2788946A1 (en) | 2011-08-18 |
ES2901803T3 (es) | 2022-03-23 |
TWI442776B (zh) | 2014-06-21 |
WO2011099440A1 (ja) | 2011-08-18 |
KR20120112723A (ko) | 2012-10-11 |
US20120307908A1 (en) | 2012-12-06 |
JPWO2011099440A1 (ja) | 2013-06-13 |
RU2519525C2 (ru) | 2014-06-10 |
CN102742276A (zh) | 2012-10-17 |
EP2536148B1 (en) | 2021-10-27 |
BR112012019680A2 (pt) | 2016-05-03 |
EP2536148A4 (en) | 2014-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5367097B2 (ja) | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム | |
JP5367098B2 (ja) | 動きベクトル予測符号化方法,動きベクトル予測復号方法,動画像符号化装置,動画像復号装置およびそれらのプログラム | |
JP5306485B2 (ja) | 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム | |
JP5306486B2 (ja) | 動きベクトル予測符号化方法,動きベクトル予測復号方法,動画像符号化装置,動画像復号装置およびそれらのプログラム | |
JP5277257B2 (ja) | 動画像復号化方法および動画像符号化方法 | |
JP5216710B2 (ja) | 復号化処理方法 | |
JP5281597B2 (ja) | 動きベクトル予測方法,動きベクトル予測装置および動きベクトル予測プログラム | |
JP5281596B2 (ja) | 動きベクトル予測方法,動きベクトル予測装置および動きベクトル予測プログラム | |
JP2012120108A (ja) | 補間画像生成装置及びプログラム、並びに、動画像復号装置及びプログラム | |
TW201306596A (zh) | 動畫像編碼裝置、動畫像解碼裝置、動畫像編碼方法、動畫像解碼方法、動畫像編碼程式及動畫像解碼程式 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130605 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130611 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130802 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130812 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130910 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5367097 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |