[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR102291835B1 - 교차 평면 필터링을 이용한 향상된 크로마 코딩 - Google Patents

교차 평면 필터링을 이용한 향상된 크로마 코딩 Download PDF

Info

Publication number
KR102291835B1
KR102291835B1 KR1020187002181A KR20187002181A KR102291835B1 KR 102291835 B1 KR102291835 B1 KR 102291835B1 KR 1020187002181 A KR1020187002181 A KR 1020187002181A KR 20187002181 A KR20187002181 A KR 20187002181A KR 102291835 B1 KR102291835 B1 KR 102291835B1
Authority
KR
South Korea
Prior art keywords
luma
sample
samples
chroma
cross
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020187002181A
Other languages
English (en)
Other versions
KR20180039052A (ko
Inventor
용 히
우웬 헤
얀 예
샤오우 씨우
Original Assignee
인터디지털 매디슨 페턴트 홀딩스 에스에이에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 filed Critical 인터디지털 매디슨 페턴트 홀딩스 에스에이에스
Priority to KR1020217025704A priority Critical patent/KR102460912B1/ko
Publication of KR20180039052A publication Critical patent/KR20180039052A/ko
Application granted granted Critical
Publication of KR102291835B1 publication Critical patent/KR102291835B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

교차 평면 필터링이 향상된 크로마 코딩을 위해 사용될 수 있다. 현재 픽처과 연관된 교차 평면 필터의 표시가 수신될 수 있다. 현재 픽처는 인트라 코딩된 비디오 블록 및 복수의 기준 샘플들을 포함할 수 있다. 복수의 기준 샘플들은 인트라 코딩된 비디오 블록을 예측하기 위해 사용될 수 있다. 루마 샘플 영역이 현재 픽처에서 결정될 수 있다. 루마 샘플 영역은 현재 픽처에서 대응하는 크로마 샘플을 향상시키기 위해 결정될 수 있다. 교차 평면 필터는 오프셋을 결정하기 위해 루마 샘플 영역 내의 복수의 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 오프셋은 대응하는 크로마 샘플에 적용되어 향상된 크로마 샘플을 결정할 수 있다.

Description

교차 평면 필터링을 이용한 향상된 크로마 코딩
관련 출원에 대한 상호 참조
본 출원은 2015년 7월 8일자에 출원된 미국 가특허 출원 제62/190,008호의 우선권을 주장하며, 이는 그 전체가 참조로써 본 출원에 포함된다.
비디오 코딩 시스템은 디지털 비디오 신호를 압축하기 위해 사용될 수 있다. 예를 들어, 비디오 코딩 시스템은 소모되는 저장 공간을 감소 및/또는 비디오 신호와 연관된 전송 대역폭 소비를 감소시킬 수 있다. 예를 들어, 블록 기반 하이브리드 비디오 코딩 시스템이 사용될 수 있다.
디지털 비디오 신호는 세 개의 컬러 평면을 포함할 수 있다. 세 개의 컬러 평면은 루마 평면, 블루-차이 크로마 평면 및 레드-차이 크로마 평면을 포함할 수 있다. 크로마 평면들의 픽셀은 루마 평면의 픽셀보다 작은 동적 범위를 가질 수 있다. 예를 들어, 비디오 이미지의 크로마 평면들은 비디오 이미지의 루마 평면보다 매끄럽고/매끄럽거나 덜 상세할 수 있다. 비디오 이미지의 크로마 블록은 예측(예를 들어, 정확하게 예측)하는 것이 용이할 수 있다. 예를 들어, 크로마 블록의 예측은 더 적은 리소스를 소비 및/또는 더 적은 예측 에러를 야기할 수 있다.
높은 동적 범위(high dynamic range; HDR) 비디오는 표준 동적 범위(standard dynamic range; SDR) 비디오보다 더 넓은 동적 범위를 제공할 수 있다. HDR 비디오의 동적 범위는 사람 눈의 능력에 더 가까울 수 있다. HDR 비디오에서의 크로마 아티팩트(chroma artifacts)는 SDR 비디오에서의 크로마 아티팩트보다 밝은 배경에서 더 잘 보일 수 있다. HDR 비디오 코딩은 전처리, 코딩, 디코딩 및/또는 후처리를 포함할 수 있다.
교차 평면 필터링을 사용하는 향상된 크로마 코딩을 위한 시스템, 방법 및 도구가 개시된다. 현재 픽처와 연관된 교차 평면 필터의 표시가 수신될 수 있다. 표시는 교차 평면 필터와 연관된 하나 이상의 필터 계수를 포함할 수 있다. 현재 픽처는 인트라 코딩된 비디오 블록 및 복수의 기준 샘플들을 포함할 수 있다. 복수의 기준 샘플들은 인트라 코딩된 비디오 블록을 예측하기 위해 사용될 수 있다. 루마 샘플 영역이 현재 픽처에서 결정될 수 있다. 루마 샘플 영역은 복수의 루마 샘플들을 포함할 수 있다. 예를 들어, 루마 샘플 영역은 3x3 블록의 루마 샘플들일 수 있다. 복수의 루마 샘플들은 예측된 루마 샘플들 - 예측된 루마 샘플들에 교차 평면 필터가 루마 샘플들의 재구성 이전에 적용됨 - 을 포함할 수 있다. 복수의 루마 샘플들은 재구성된 루마 샘플들 - 재구성된 루마 샘플들에 교차 평면 필터가 재구성 이후에 적용됨 - 을 포함할 수 있다. 루마 샘플 영역은 선택된 인트라 예측 모드에 기초하여 결정될 수 있다.
루마 샘플 영역은 현재 픽처에서의 대응하는 크로마 샘플을 향상시키기 위해 결정될 수 있다. 대응하는 크로마 샘플은 예측된 크로마 샘플 또는 재구성된 크로마 샘플일 수 있다. 대응하는 크로마 샘플이 인트라 코딩된 비디오 블록에서의 예측된 크로마 샘플인 경우, 향상된 크로마 샘플이 예측을 위해 사용될 수 있다. 대응하는 크로마 샘플이 인-루프(in-loop) 필터링 전의 재구성된 크로마 샘플인 경우, 인-루프 필터링이 적용되기 이전에 향상된 크로마 샘플이 대응하는 크로마 샘플을 대체하기 위해 사용될 수 있다. 대응하는 크로마 샘플은 인트라 코딩된 비디오 블록에서 하나 이상의 크로마 샘플을 예측하기 위해 사용되는 기준 크로마 샘플일 수 있다. 수신된 크로마 향상 표시자에 기초하여 교차 평면 필터를 적용할지 여부가 결정된다. 수신된 크로마 향상 표시자는 블록 레벨에서 수신될 수 있다. 교차 평면 필터는 오프셋을 결정하기 위해 루마 샘플 영역 내의 복수의 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 오프셋은 대응하는 크로마 샘플에 적용되어 향상된 크로마 샘플을 결정할 수 있다. 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함할 수 있다. 이용 불가능한 루마 샘플은, 예를 들어, 교차 평면 필터를 복수의 루마 샘플들에 적용하기 전에 이웃하는 이용 가능한 루마 샘플로 대체될 수 있다. 적용할 교차 평면 필터는 선택된 인트라 예측 모드에 기초하여 결정될 수 있다.
복수의 루마 샘플 영역들이 현재 픽처에 대해 결정될 수 있다. 예를 들어, 제 1 루마 샘플 영역 및 제 2 루마 샘플 영역이 결정될 수 있다. 제 1 루마 샘플 영역은 제 1의 복수의 루마 샘플들을 포함할 수 있다. 제 2 루마 샘플 영역은 제 2의 복수의 루마 샘플들을 포함할 수 있다. 제 1 루마 샘플 영역은 현재 픽처에서 제 1의 대응하는 크로마 샘플과 이웃할 수 있다. 제 2 루마 샘플 영역은 현재 픽처에서 제 2의 대응하는 크로마 샘플과 이웃할 수 있다. 교차 평면 필터는 제 1 오프셋 및 제 2 오프셋을 결정하기 위해 제 1의 복수의 루마 샘플들 및 제 2의 복수의 루마 샘플들에 각각 적용될 수 있다. 제 1 오프셋은 제 1의 대응하는 크로마 샘플에 적용되어 제 1의 향상된 크로마 샘플을 결정할 수 있다. 제 2 오프셋은 제 2의 대응하는 크로마 샘플에 적용되어 제 2의 향상된 크로마 샘플을 결정할 수 있다.
특허 또는 출원서는 컬러로 제작된 적어도 하나의 도면을 포함한다. 컬러 도면(들)과 이 특허 또는 특허 출원 공개의 사본은 요청시 및 필요한 수수료 지불시 사무소가 제공한다.
도 1은 블록 기반 하이브리드 비디오 인코더의 일례를 도시한다.
도 2는 블록 기반 하이브리드 비디오 디코더의 일례를 도시한다.
도 3은 블록 크기 NxN 샘플들에 대한 예측된 샘플들 Px , y를 획득하기 위해 예측에 사용되는 기준 샘플들 Rx, y의 일례를 도시한다.
도 4는 인트라 예측 유닛에 대한 분할 모드의 일례를 도시한다.
도 5는 각도 인트라 예측 모드의 일례를 도시한다.
도 6은 인트라 경계 필터의 일례를 도시한다.
도 7은 HEVC 인터 예측 코딩을 위한 상이한 분할의 일례를 도시한다.
도 8a는 모션 벡터를 사용하는 모션 보상 예측의 일례를 도시한다.
도 8b는 부분 샘플 보간의 일례를 도시한다.
도 9는 현재 블록으로부터 재구성된 루마 샘플들을 사용하지 않는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상의 일례를 도시한다.
도 10은 현재 블록으로부터 재구성된 루마 샘플들을 사용하는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상의 일례를 도시한다.
도 11은 예측된 크로마 샘플 향상을 갖는 블록 기반 하이브리드 인코더의 일례를 도시한다.
도 12는 교차 평면 필터링을 사용하여 예측된 크로마 샘플을 향상시키는 일례를 도시한다.
도 13은 재구성된 크로마 샘플들 상에 크로마 향상을 갖는 블록 기반 하이브리드 인코더의 일례를 도시한다.
도 14는 교차 평면 필터링을 사용하는 크로마 재구성된 샘플 향상의 일례를 도시한다.
도 15a는 하나 이상의 개시된 실시예가 구현될 수 있는 예시적인 통신 시스템의 시스템 다이어그램이다.
도 15b는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 예시적인 무선 송수신 유닛(wireless transmit/receive unit; WTRU)의 시스템 다이어그램이다.
도 15c는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
도 15d는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 다른 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
도 15e는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 다른 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
예시적인 실시예들의 상세한 설명이 이제 다양한 도면들을 참조하여 설명될 것이다. 이러한 설명은 가능한 구현예들의 상세한 예시를 제공하지만, 이러한 상세한 설명은 예시적인 것으로, 결코 애플리케이션의 범위를 한정하기 위한 것이 아님을 유념해야 한다.
비디오 코딩 시스템은, 예를 들어, 디지털 비디오 신호의 저장 및/또는 전송 대역폭을 감소시키기 위해 디지털 비디오 신호를 압축할 수 있다. 블록 기반, 웨이브릿 기반, 객체 기반 시스템 및 블록 기반 하이브리드 비디오 코딩 시스템과 같은 다양한 비디오 코딩 시스템이 있다. 블록 기반 비디오 코딩 시스템의 예에는 H.261, MPEG(Moving Picture Experts Group; 동영상 전문가 그룹)-1, MPEG-2, H.263, H.264/AVC(Advanced Video Coding; 고급 비디오 코딩) 및 H.265/HEVC(High Efficiency Video Coding; 고효율 비디오 코딩)이 있다.
도 1은 블록 기반 하이브리드 비디오 인코더의 일례를 도시한다. 예를 들어, (예를 들어, 각각의) 비디오 블록에 대해, 예를 들어, 비디오 블록의 공간 및 시간 리던던시를 감소시키기 위해, 공간 예측 (예를 들어, 인트라 예측) 또는 시간 예측 (예를 들어, 인터 예측)이 수행될 수 있다. 인트라 또는 인터 예측으로부터 생성된 예측 블록이 현재 비디오 블록으로부터 감산될 수 있다. 결과적인 예측 잔차가 변환되고 양자화될 수 있다. 잔차는, 예를 들어, 양자화된 잔차 계수를 역양자화 및 역변환함으로써 재구성될 수 있다. 재구성된 잔차는, 예를 들어, 재구성 비디오 블록을 형성하기 위해 예측 블록에 가산될 수 있다. 인-루프 필터링이 재구성된 비디오 블록에 적용될 수 있다. 필터링된 재구성된 비디오 블록은 디코딩 픽처 버퍼에 저장될 수 있으며, 하나 이상의 다음 비디오 블록을 코딩하기 위해 사용될 수 있다.
도 2는 블록 기반 하이브리드 비디오 디코더의 일례를 도시한다. 도 2의 디코더는 도 1의 인코더에 대응할 수 있다. 인코딩된 비디오 비트스트림이 파싱되어 엔트로피 디코딩될 수 있다. 코딩 모드 및 연관된 예측 정보가, 예를 들어, 예측 블록을 형성하기 위해, 예를 들어, 공간 예측 또는 모션 보상 예측에 전달될 수 있다. 잔차 변환 계수가, 예를 들어, 잔차 블록을 재구성하기 위해, 역양자화 및 역변환될 수 있다. 예측 블록 및 재구성된 잔차 블록이 함께 가산되어, 예를 들어, 재구성된 비디오 블록을 형성할 수 있다. 인-루프 필터링이 재구성된 비디오 블록에 적용될 수 있다. 필터링된 재구성된 비디오 블록은 기준 픽처 버퍼에 저장될 수 있으며, 미래의 비디오 블록을 예측하기 위해 사용될 수 있다.
예를 들어, JPEG(Joint Photographic Experts Group; 공동 영상 전문가 그룹), H.261, MPEG-1, MPEG-2, H.263, H.264/AVC 및 H.265/HEVC과 같은 일부 이미지 및 비디오 코딩 기술로 공간 상관관계를 제거하기 위해, 인트라 코딩이 사용될 수 있다. 예를 들어, H.264/AVC 및 H.265/HEVC에서, 예를 들어, 코딩 효율을 개선하기 위해, 방향성 인트라 예측이 사용될 수 있다. 인트라 예측 모드가, 예를 들어, 예측될 현재 블록의 상부 및 좌측으로부터의 기준 샘플들의 세트를 사용할 수 있다. 기준 샘플들은 Rx , y로 표시될 수 있다. 예를 들어, 위치(x, y)의 원점은 블록의 좌측 상단 코너의 상부 및 좌측에 있는 하나의 픽셀일 수 있다. 위치(x, y)에서 예측된 샘플 값은 Px , y로 표시될 수 있다.
도 3은 블록 크기 NxN 샘플들에 대한 예측된 샘플들 Px , y를 획득하기 위해 예측에 사용되는 기준 샘플들 Rx , y의 일례를 도시한다.
도 4는 인트라 예측 유닛(prediction unit; PU)에 대한 분할 모드의 일례를 도시한다. HEVC 인트라 코딩은 여러 유형의 PU 분할, 예를 들어 PART_2Nx2N 및 PART_NxN을 지원할 수 있으며, 이들은 코딩 유닛(coding unit; CU)을 각각 1개 또는 4개의 동일한 크기의 PU로 분할할 수 있다. CU 크기가 구성된 최소 CU 크기인 경우, PART_2Nx2N을 사용할 수 있다.
예를 들어, 4:2:0 크로마 포맷의 경우, 4개의 4x4 PU로 분할된 8x8 CU는 4개의 루마 예측 블록(prediction block; PB)을 가질 수 있다. 예를 들어, 2x2 크로마 인트라 예측 블록들에 의해 야기되는 높은 처리량을 피하기 위해, 인트라 코딩된 블록들에 대해 크로마 채널마다 하나의 4x4 PB가 있을 수 있다.
CU는 다수의 변환 유닛(transform units; TU)으로 분할될 수 있다. 인트라 예측은 TU에 순차적으로 적용될 수 있다. 예를 들어, PU 레벨에서 인트라 예측을 적용하는 것에 비해, 순차적 인트라 예측은 현재 TU 샘플에 더 가까운 이전의 재구성된 TU로부터의 이웃하는 기준 샘플들의 인트라 예측의 사용을 허용할 수 있다.
도 5는 각도 인트라 예측 모드의 일례를 도시한다. HEVC는 하나 이상의 (예를 들어, 35개) 인트라 예측 모드를 지원할 수 있다. 하나 이상의 인트라 예측 모드는 DC 모드, 평면 모드 및/또는 33개의 방향성 또는 '각도' 인트라 예측 모드를 포함할 수 있다.
각도 인트라 예측은 비디오 및 이미지 콘텐츠에서 상이한 방향성 구조를 효율적으로 모델링하기 위해 사용될 수 있다. 예측 방향의 수 및 각상(angularity)은 인코딩 복잡도와 코딩 효율 사이의 트레이드 오프에 기초하여 선택될 수 있다.
예측된 샘플 Px , y는, 예를 들어, 그 위치를 픽셀의 기준 행 또는 열에 투영하고, 선택된 예측 방향을 적용하며, 샘플에 대한 예측된 값을 1/32 픽셀 정확도로 보간함으로써 획득될 수 있다. 보간은 2개의 가장 가까운 기준 샘플들, 예컨대 수직 예측(예를 들어, 도 5에 도시된 바와 같은 모드 18 내지 34)에 대해 Ri,0 및 Ri+1,0, 그리고 수평 예측(예컨대, 도 5에 도시된 바와 같은 모드 2 내지 17)에 대해 R0,i 및 R0,i+1을 사용하여 선형적으로 수행될 수 있다.
HEVC는 다양한 (예를 들어, 모든) PU 크기에 대한 루마 인트라 예측을 위해 하나 이상의 인트라 예측 모드를 지원할 수 있다. HEVC는, 예를 들어, 하나 이상의 이웃하는 PU들의 모드에 기초하여, (예를 들어, 각각의) PU에 대해 다수의 (예를 들어, 3개의) 가장 가능성 있는 모드(most probable mode; MPM)를 정의할 수 있다. 현재의 인트라 예측 모드는 MPM들의 세트 내의 요소들 중 하나의 요소와 동일할 수 있다. 세트 내의 인덱스는 디코더에 전송될 수 있다. 코드(예를 들어, 5 비트 고정 길이 코드)가 MPM들의 세트 이외의 선택 모드를 결정하기 위해 사용될 수 있다.
기준 샘플들은 평활화될 수 있다. 일 예에서, 3-탭 평활화 필터가 하나 이상의 기준 샘플에 적용될 수 있다. 평활화는, 예를 들어, intra _smoothing_disabled_flag가 0으로 설정된 경우에 적용될 수 있다. 필터링은, 예를 들어, 주어진 인트라 예측 모드 및/또는 변환 블록 크기에 의해 제어될 수 있다. 일 예에서, 32x32 블록에 대해, 수평 및 수직 각도 모드를 제외한 각도 모드가 필터링된 기준 샘플들을 사용할 수 있다. 다른 예에서, 예를 들어, 16x16 블록에 대해, 필터링된 기준 샘플들을 사용하지 않는 모드가, 도 5에 도시된 바와 같이 수평 및 수직에 가장 가까운 4개의 모드(예를 들어, 9, 11, 25, 27)에 확장될 수 있다. 다른 예에서, 예를 들어, 8x8 블록에 대해, 대각선 모드(2, 18, 34)가 필터링된 기준 샘플들을 사용할 수 있다.
인트라 예측은 크로마 성분에 적용될 수 있다. 일 예에서, 인트라 예측 모드가, 예를 들어, 크로마와 연관된 하나 이상의 예측 블록(PB)에 대해, 예를 들어, 평면, DC, 수평, 수직, 'DM_CHROMA' 모드, 대각선 모드(34)로서 지정될 수 있다.
표 1은 크로마에 대한 인트라 예측 모드와 인트라 예측 방향 간의 예시적인 매핑을 도시한다. 크로마 컬러 채널 인트라 예측 모드는 대응하는 루마 PB 인트라 예측 모드 및/또는 intra _ chroma _ pred _mode 구문 요소에 기초할 수 있다.
Figure 112018021329279-pct00001
표 2는, 예를 들어, DM_CHROMA 모드가 선택되고 4:2:2 크로마 포맷이 사용되는 경우, 4:2:2 크로마 포맷에 대한 인트라 예측 모드의 예시적인 사양을 도시한다. 크로마 PB에 대한 인트라 예측 모드는, 예를 들어, 표 2에서 지정된 바와 같이, 대응하는 루마 PB에 대한 인트라 예측 모드로부터 도출될 수 있다.
Figure 112018021329279-pct00002
도 6은 인트라 경계 필터의 일례를 도시한다. 예를 들어, 인트라 예측된 변환 블록(transform block; TB)을 재구성할 때, 인트라 경계 필터가 사용될 수 있다. 예를 들어, 도 6에 도시된 바와 같이, 수평, 수직 및/또는 DC 인트라 예측 모드를 사용하는 PB들에 대해 TB의 좌측 및/또는 상부 에지들을 따라 예측된 루마 샘플들을 필터링하기 위해 인트라 경계 필터가 사용될 수 있다.
인트라 경계 필터는, 예를 들어, 입력으로서 예측된 샘플 p 및/또는 출력으로서 predSample의 어레이에 기초하여 정의될 수 있다.
수학식(1)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS), 0과 동일한 disableIntraBoundaryFilter에 적용되는 수평 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있고, 여기서 x = 0...nTbS-1, y = 0이다:
Figure 112018021329279-pct00003
수학식(2)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS), 0과 동일한 disableIntraBoundaryFilter에 적용되는 수직 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있고, 여기서 x = 0...nTbS-1, y = 0이다:
Figure 112018021329279-pct00004
수학식(3), 수학식(4) 및 수학식(5)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS) 및 DC 예측자 dcVal에 적용되는 DC 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있다:
Figure 112018021329279-pct00005
Figure 112018021329279-pct00006
Figure 112018021329279-pct00007
경계 평활화에 의한 개선, 예를 들어, 0.4% 평균 개선이 제공될 수 있다. 인트라 경계 필터는 루마 성분에 적용될 수 있다. 인트라 경계 필터는, 예를 들어, 크로마 성분에 대한 예측이 매끄럽게 되는 경향이 있기 때문에, 크로마 성분에는 적용될 수 없다.
HEVC 인트라 모드 잔차 코딩이 잔차 정보를 코딩하기 위해 인트라 모드 종속적 변환 및/또는 계수 스캐닝을 사용할 수 있다. 이산 사인 변환(discrete sine transform; DST)이 4x4 루마 블록에 대해 선택될 수 있다. 이산 코사인 변환(discrete cosine transform; DCT)이 다른 유형의 블록에 대해 선택/사용될 수 있다.
예를 들어, 선형 모델(linear-model; LM) 기반 크로마 인트라 예측 모드가, 예를 들어, 수학식(6)에 따라, 선형 모델(LM)을 사용하여 병치된(collocated) 재구성된 루마 샘플로부터 크로마 샘플을 예측하기 위해 사용될 수 있다:
Figure 112018021329279-pct00008
여기서 PredC는 블록 내의 예측된 크로마 샘플을 나타낼 수 있고, RecL은 블록 내의 대응하는 재구성된 루마 샘플을 나타낼 수 있다. 파라미터 α 및 β는 현재 블록 주위의 인과 관계의 재구성된 루마 및 크로마 샘플로부터 도출될 수 있다.
선형 모델 크로마 인트라 예측은 코딩 효율을 개선할 수 있다. 예를 들어, 테스트 구성에서의 실험 결과는 Y, Cb, Cr 성분의 평균 BD(Bjøntegaard delta)-레이트 감소가 각각 1.3%, 6.5% 및 5.5%를 포함한다는 것을 나타낸다. 일 예에서, 크로마 성분의 유사한 수준의 코딩 효율 개선이 테스트 구성에서 제공될 수 있다.
도 7은 HEVC 인터 예측 코딩을 위한 상이한 분할의 일례를 도시한다. 예를 들어, 시간 리던던시를 제거 또는 감소시키기 위해 인터 코딩이 사용될 수 있다. HEVC 인터 예측 코딩은 인트라 예측 코딩(예를 들어, 인트라 코딩)보다 많은 PB 분할 형상을 지원할 수 있다. 인트라 예측은, 예를 들어, 분할 PART_2Nx2N, PART_2NxN, PART_Nx2N, PART_NxN을 지원할 수 있다. 인터 픽처 예측은, 예를 들어, 분할 PART_2Nx2N, PART_2NxN, PART_Nx2N, PART_NxN 및 비대칭 모션 분할 PART_2NxnU, PART_2NxnD, PART_nLx2N 및 PART_nRx2N을 지원할 수 있다.
(예를 들어, 각각의) 인터 예측된 PU는 하나 이상의 모션 벡터 및 하나 이상의 기준 픽처 인덱스를 포함하는 모션 파라미터 세트를 가질 수 있다. P 슬라이스는, 예를 들어, 하나의 기준 픽처 리스트를 사용할 수 있고, B 슬라이스는, 예를 들어, 2개의 기준 픽처 리스트를 사용할 수 있다. PB의 인터 예측 샘플은 기준 픽처 인덱스에 의해 식별되는 기준 픽처에서 대응하는 블록 영역의 하나 이상의 샘플로부터 결정될 수 있다. 기준 픽처 인덱스는 모션 벡터(motion vector; MV)의 수평 및 수직 성분에 의해 변위된 위치에 있을 수 있다.
도 8a는 모션 벡터(MV)를 사용하는 모션 보상 예측의 일례를 도시한다. 수평 및 수직 모션 벡터가 각각 dx 및 dy로 표시될 수 있다.
도 8b는 부분 샘플 보간의 일례를 도시한다. 예를 들어, 모션 벡터가 분수 값을 갖는 경우, 부분 샘플 보간이 사용될 수 있다. 부분 샘플 보간은 비정수 샘플 위치에 예측 샘플을 생성할 수 있다. HEVC는 예를 들어, 루마 샘플들 사이의 거리의 1/4 단위로 MV를 지원할 수 있다. HEVC는 예를 들어, 4:2:0 포맷에서, 예를 들어, 크로마 샘플들 사이의 거리의 1/8 단위로 MV를 지원할 수 있다.
모션 벡터 예측은 이웃하는 PU들과 모션 벡터의 공간-시간 상관관계를 이용할 수 있다. 병합 모드가, 예를 들어, 모션 벡터 시그널링 비용을 감소시키기 위해, 사용될 수 있다. 병합 모드의 병합 후보 리스트가 이웃하는 PU 위치들(예컨대, 공간 이웃들 및/또는 시간적 이웃들) 및/또는 제로 벡터들로부터 모션 벡터 후보들의 리스트를 포함할 수 있다. 인코더는 병합 후보 리스트로부터 (예를 들어, 최상의) 예측자를 선택할 수 있고, 병합 후보 리스트로부터 선택된 예측자를 나타내는 대응하는 인덱스를 전송할 수 있다.
교차 평면 필터링이, 예를 들어, 크로마 품질을 개선하고 향상시키기 위해, 루마의 고주파수 정보를 이용할 수 있다. 고주파수 정보는, 예를 들어, 루마 성분에 하이 패스 필터를 적용하여 루마로부터 추출될 수 있다.
루마 및 크로마 성분은 객체 윤곽 및 에지 영역과 같은 일부 상관관계를 가질 수 있다. 크로마 향상을 위한 교차 평면 필터링은 루마 성분에 하이 패스 필터링을 적용하는 것을 포함할 수 있다. 하이 패스 필터링의 출력이 향상된 크로마 성분을 결정하기 위해 크로마 성분에 가산될 수 있다. 하이 패스 필터링의 출력은 오프셋일 수 있다. 수학식(7) 및 수학식(8)은 크로마 향상의 일례를 나타낸다:
Figure 112018021329279-pct00009
Figure 112018021329279-pct00010
여기서 Y는 루마, C는 크로마, cross_plane_filter는 루마 신호에 적용된 필터, Yrec는 재구성된 루마 신호, Yoffset는 필터링의 출력, Crec는 재구성된 크로마 신호로서 Cb 또는 Cr 성분일 수 있으며, Cenh은 향상된 크로마 신호이다. 필터는 1D 또는 2D 필터일 수 있다. 교차 평면 필터는, 예를 들어, 최소 제곱법(Least Square method)을 이용하여 원래의 크로마 및 루마 및/또는 재구성된 크로마 및 루마에 기초하여, 도출될 수 있다.
예를 들어, 크로마 예측 모드의 시그널링 오버헤드를 감소시키는 크로마 예측 모드를 도출하기 위해, 인트라 예측을 위한 DM_CHROMA 모드에서 루마 예측 모드가 사용될 수 있다. 예를 들어, 크로마 예측 블록(PB)이 대응하는 루마 PB와 동일한 예측 모드를 이용하는 경우, 크로마 예측 모드는 DM_CHROMA로서 시그널링될 수 있다. 선형 모델(LM) 크로마 예측 모드가, 예를 들어, 선형 모델로, 병치된 재구성된 루마 샘플로부터 하나 이상의 크로마 샘플을 예측할 수 있다.
기준 크로마 샘플(Rx,y), 대응하는 크로마 예측 샘플(Px,y) 및 재구성된 크로마 샘플은 자신들의 대응하는 루마 성분(들)과 독립적으로 처리될 수 있다. 예를 들어, 인터 예측의 경우, 크로마 예측 샘플 및 크로마 재구성된 샘플은 자신들의 대응하는 루마 성분(들)과 독립적으로 생성될 수 있다. 교차 평면 필터링이 인트라 코딩 프로세스의 상이한 단계들에서 적용될 수 있다.
교차 평면 필터링은 하나 이상의 이웃하는 크로마 샘플들을 향상시키기 위해 사용될 수 있다. 하나 이상의 이웃하는 크로마 샘플들은 현재 비디오 블록에 이웃할 수 있다. 이웃하는 크로마 샘플들은 기준 크로마 샘플, 재구성된 크로마 샘플 및/또는 예측된 크로마 샘플을 포함할 수 있다. 예를 들어, 예측된 크로마 샘플이 예측을 위해 사용될 수 있다. 이웃하는 기준 크로마 샘플들 Rx,y는, 예를 들어, 도 3에 도시된 바와 같이, 인트라 코딩을 위해 예측된 크로마 샘플들 Px,y를 생성하기 위해 사용될 수 있다. 교차 평면 크로마 필터링이, 예를 들어, 코딩 컬러 공간에서 크로마를 개선하기 위해, 하나 이상의 이웃하는 크로마 샘플들의 크로마 샘플에 대응하는 하나 이상의 루마 샘플로부터 높은 충실도 정보를 도출할 수 있다.
교차 평면 필터가 하나 이상의 이웃하는 루마 샘플들에 적용될 수 있다. 이웃하는 루마 샘플(들)은 기준 루마 샘플, 재구성된 루마 샘플 및/또는 예측된 루마 샘플을 포함할 수 있다. 예를 들어, 크로마 기준 샘플의 품질을 향상시키기 위해, 도출된 하이 패스 정보가 사용될 수 있다. 향상된 기준 크로마 샘플은 예측된 크로마 샘플을 생성하기 위해 사용될 수 있다.
하나 이상의 향상된 크로마 샘플은 교차 평면 필터링을 사용하여 결정될 수 있다. 예를 들어, 교차 평면 필터가 하나 이상의 이웃하는 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 하나 이상의 이웃하는 루마 샘플들은 향상될 크로마 샘플에 대응할 수 있다. 교차 평면 필터는 이용 가능한 및/또는 이용 불가능한 루마 샘플에 적용될 수 있다. 예측된 루마 샘플 및/또는 재구성된 루마 샘플(예를 들어, 루프 필터링 전후)은 이용 가능한 루마 샘플일 수 있다. 비재구성된 루마 샘플 및/또는 비예측된 루마 샘플은 이용 불가능한 루마 샘플일 수 있다.
도 9는 현재 비디오 블록으로부터 재구성된 루마 샘플들을 사용하지 않는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상(900)의 일례이다. 현재 비디오 블록은, 예를 들어, 도 9의 실선에 의해 정의된 바와 같이 샘플들의 4x4 블록을 포함할 수 있다.
902A, 902B와 같은 하나 이상의 루마 샘플 영역들이 현재 픽처에 대해 결정될 수 있다. 도시된 바와 같이, 902A, 902B와 같은 루마 샘플 영역은 대응하는 크로마 샘플 및/또는 대응하는 크로마 샘플과 병치된 루마 샘플에 이웃하는 복수의 루마 샘플들을 포함할 수 있다. 샘플은 다른 샘플의 위, 아래, 왼쪽, 오른쪽 및/또는 대각선에 있으면 다른 샘플과 이웃할 수 있다. 예를 들어, 이웃하는 샘플은 대응하는 샘플 옆에 있을 수 있다. 병치된 샘플들은 크로마 샘플과 동일한 위치에 루마 샘플을 포함할 수 있다. 루마 샘플 영역(902A)은 하나 이상의 이웃하는 루마 샘플들 및/또는 병치된 루마 샘플을 포함하도록 결정될 수 있다. 루마 샘플 영역(902A)은, 향상을 위한 크로마 샘플(예를 들어, 향상된 크로마 샘플(912A))이 하나 이상의 루마 샘플 영역들(902A, 902B) 각각의 중심에 각각 존재하도록 결정될 수 있다. 예를 들어, 루마 샘플 영역의 중심에 위치하는 크로마 샘플은 교차 평면 필터링을 사용하여 향상될 수 있다.
902A와 같은 루마 샘플 영역 내의 루마 샘플들은, 하나 이상의 루마 샘플(들)(904A), 기준 루마 샘플(들)(906A) 및/또는 예측된 루마 샘플(들)(908A)을 포함할 수 있다. 기준 루마 샘플들(906A)은 예측된 루마 샘플(들)(908A)을 대체하기 위해 사용되는 재구성된 루마 샘플들일 수 있다. 예를 들어, 하나 이상의 예측된 루마 샘플들(908A, 908B) 각각은, 하나 이상의 재구성된 루마 샘플들(906) 중 개개의 이웃하는 재구성된 루마 샘플에 의해 대체(예를 들어, 패딩)될 수 있다. 예를 들어, 루마 샘플 영역(902A, 902B)은, 예를 들어, 도 9에서 점선 박스로 강조 표시된 3x3 윈도우와 같은 루마 샘플들의 MxN 윈도우일 수 있다. MxN 윈도우 내의 루마 샘플들은 크로마 샘플 위치에 대응할 수 있다. 교차 평면 필터가 루마 샘플 영역(902A, 902B)의 복수의 루마 샘플들에 적용될 수 있다. 오프셋이 루마 샘플 영역(902A, 902B)의 복수의 루마 샘플들에 교차 평면 필터를 적용한 출력으로서 결정될 수 있다. 예를 들어, 912A, 912B와 같은 향상된 크로마 샘플을 결정하기 위해, 오프셋은 대응하는 크로마 샘플(910A, 910B)에 적용(예를 들어, 가산)될 수 있다. 교차 평면 필터는 복수의 향상된 크로마 샘플들(912A, 912B)을 결정하기 위해 현재 픽처의 902A, 902B와 같은 복수의 루마 샘플 영역들에 적용될 수 있다. 향상된 크로마 샘플들(912A, 912B)과 같은 향상된 크로마 샘플이 현재 비디오 블록의 인트라 예측을 위한 기준 샘플로서 사용될 수 있다.
일 예에서, MxN 루마 샘플 영역, 예를 들어, 3x3 윈도우에서의 복수의 루마 샘플들은 인-루프 필터링 이전 또는 이후의 (예컨대, 유일하게) 재구성된 루마 샘플들을 포함할 수 있다. 예를 들어, MxN 루마 샘플 영역 내의 복수의 루마 샘플들은 이용 가능할 수 있다. 다른 예에서, MxN 루마 샘플 영역 내의 하나 이상의 루마 샘플들은, 예를 들어, 도 9에 도시된 바와 같이 재구성되지 않을 수 있다. 재구성되지 않은 루마 샘플들은 이용 불가능한 루마 샘플들일 수 있다. 이용 불가능한 루마 샘플들은 이웃하는 이용 가능한 (예를 들어, 재구성된) 루마 샘플로 대체(예를 들어, 패딩)될 수 있다. 현재 블록에서의 루마 및 크로마 샘플들의 예측 및 재구성은 병렬로 수행될 수 있다.
도 10은 현재 블록으로부터 재구성된 루마 샘플들을 사용하는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상(1000)의 일례이다. 일 예에서, 현재 블록의 루마 샘플들은, 예를 들어, 상이한 컬러 채널 사이에 더 높은 레이턴시가 허용될 수 있는 경우, 개개의 대응하는 크로마 샘플들 이전에 재구성될 수 있다. MxN(예를 들어, 3x3) 루마 샘플 영역(1002A, 1002B)에서의 재구성된 루마 샘플들이, 예를 들어, 교차 평면 필터가 적용될 때 패딩 없이 이용 가능할 수 있다. 루마 샘플 영역(1002A, 1002B)은 MxN (예를 들어, 3x3) 윈도우일 수 있다.
예를 들어, 1002A, 1002B와 같은 루마 샘플 영역이 현재 픽처에 대해 결정될 수 있다. 1002A, 1002B와 같은 루마 샘플 영역은 대응하는 크로마 샘플 및/또는 대응하는 크로마 샘플과 병치된 루마 샘플에 이웃하는 복수의 루마 샘플들을 포함할 수 있다. 루마 샘플 영역들(1002A, 1002B) 각각의 복수의 루마 샘플들은 현재 블록 외부에 있는 하나 이상의 재구성된 루마 샘플들(1004A, 1004B) 및/또는 현재 블록 내에 있는 하나 이상의 재구성된 루마 샘플들(1008A, 1008B)을 포함할 수 있다.
교차 평면 필터링이 하나 이상의 루마 샘플 영역들(1002A, 1002B) 내의 복수의 루마 샘플들에 적용될 수 있다. 하나 이상의 루마 샘플 영역들(1002A, 1002B) 내의 루마 샘플들은 (예를 들어, 도 9에 도시된 바와 같이) 현재 블록 내의 일부 루마 샘플들을 포함할 수 있다. 현재 블록 내의 루마 샘플들은, 예를 들어, 루프 필터링 전후의 하나 이상의 재구성된 루마 샘플들을 포함할 수 있다.
하나 이상의 향상된 기준 크로마 샘플들(1012A, 1012B)이, 예를 들어, 수학식(9)에 따라 생성될 수 있다:
Figure 112018021329279-pct00011
여기서, Rc[x][y]는 향상 이전의 재구성된 기준 크로마 샘플들일 수 있고, RC_enh[x][y]는 향상된 기준 크로마 샘플들일 수 있으며, SL(xL, yL)은 위치(xL, yL)를 중심으로 하는 재구성된 루마 샘플들의 어레이일 수 있다. 하나 이상의 향상 기준 크로마 샘플들(1012A, 1012B)은 하나 이상의 루마 샘플 영역들(1002A, 1002B)의 중심에 대응할 수 있다.
대응하는 크로마 샘플 위치(x, y)의 루마 샘플 위치(xL, yL)는, 예를 들어, 수학식 10에 따라 크로마 포맷에 기초하여 계산될 수 있다:
Figure 112018021329279-pct00012
여기서 scaleX 및 scaleY는 크로마 포맷 4:2:0, 4:2:2 및 4:4:4에 대해 각각 (2, 2), (2, 1), (1, 1)일 수 있다. 향상된 크로마 기준 샘플 RC _ enh[x][y]는, 예를 들어, 도 5에 도시된 바와 같은 방향성/DC/평면 인트라 예측 모드를 사용하여 인트라 예측 프로세스에서 사용될 수 있다.
2 차원(2D) 교차 평면 필터가 루마 샘플 영역(예컨대, 도 9 및 도 10에 도시된 바와 같이 루마 샘플들의 NxN 영역)에 적용될 수 있다. 1 차원(1D) 교차 평면 필터가 1xN 또는 Nx1 루마 샘플 영역에서 하나 이상의 루마 샘플에 적용될 수 있다. 예를 들어, Nx1 루마 샘플 영역이 교차 평면 필터링에 사용될 때, 현재 블록 위의 N개의 수평 루마 기준 샘플들이 필터링될 수 있다. 예를 들어, 1xN 루마 샘플 영역이 교차 평면 필터링에 사용될 때, 현재 블록의 좌측의 N개의 수직 루마 기준 샘플들이 필터링될 수 있다.
일 예시에서, 루마 샘플 영역은, 예를 들어, 인트라 예측 모드에 기초하여 적응적으로 선택될 수 있다. 인트라 예측 모드는 방향성 (예를 들어, 수직, 수평 등) 인트라 예측 모드, DC 인트라 예측 모드, 평면 인트라 예측 모드, 또는 임의의 다른 인트라 예측 모드일 수 있다. 적용할 교차 평면 필터는 어떤 인트라 예측 모드가 선택되는지에 기초하여 결정될 수 있다. 예를 들어, 다양한 상이한 모드들의 에지 및/또는 경계 특성에 매칭시키기 위해, 상이한 교차 평면 필터 세트가 선택될 수 있다. 예를 들어, 수직 예측 모드는 기준 샘플의 상단 행을 사용할 수 있다. 수직 예측 모드가 선택될 때, 현재 비디오 블록 위의 하나 이상의 크로마 기준 샘플이 향상될 수 있다. 예를 들어, 루마 샘플 영역이 현재 비디오 블록 위의 대응하는 크로마 기준 샘플에 이웃하는 하나 이상의 루마 샘플을 포함하도록 선택될 수 있다. 루마 샘플 영역은 현재 비디오 블록 위의 대응하는 크로마 기준 샘플과 병치된 루마 샘플을 포함할 수 있다. 다른 예로서, 수평 예측 모드가 선택될 때, 현재 비디오 블록의 좌측 또는 우측의 하나 이상의 크로마 기준 샘플이 향상될 수 있다. 루마 샘플 영역이 현재 비디오 블록의 좌측 또는 우측의 대응하는 크로마 기준 샘플들에 이웃하는 하나 이상의 루마 샘플들을 포함하도록 선택될 수 있다. 루마 샘플 영역은 현재 비디오 블록의 좌측 또는 우측의 대응하는 크로마 기준 샘플과 병치된 루마 샘플을 포함할 수 있다. 예를 들어, 수직 예측 모드가 선택될 때, 에지가 수직으로 발생할 수 있다.
루마 샘플 영역은, 예를 들어, 도 9 및 도 10에 도시된 예시들에 도시된 정사각형 2D 루마 샘플 영역과 비교하여, 수평 직사각형 형태로 선택될 수 있다. 예를 들어, 1D 수평 루마 샘플 영역이 수직 선택 모드를 위해 선택 및/또는 적용될 수 있다. 예를 들어, 수직 하이 패스 에지 정보를 보다 효과적으로 검색 및/또는 필터링 복잡성을 감소시키기 위해, (예를 들어, 상단의 이웃하는 루마 샘플들을 이용하는) 1D 수평 필터링이 사용될 수 있다. 수평 예측 모드를 위한 적응 필터링의 예에서, 기준 샘플의 좌측 열이 사용될 수 있다. 예를 들어, 수평 예측 모드가 선택될 때, 에지가 수평으로 발생할 수 있다. 수직 직사각형 형태를 갖는 루마 샘플 영역이 사용될 수 있다. 예를 들어, 1D 수직 루마 샘플 영역이 선택 및/또는 적용될 수 있다. (예를 들어, 좌측의 이웃하는 루마 샘플들을 이용하는) 1D 수직 필터링이 수평 하이 패스 에지 정보를 보다 효과적으로 검색 및/또는 필터링 복잡성을 감소시킬 수 있다.
루마 샘플 영역이 현재 비디오 블록 내의 크로마 샘플들에 대응하도록 루마 샘플 영역은 'L' 형태로 선택될 수 있다. 예를 들어, DC 인트라 예측 모드가 선택되는 경우, 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 샘플들의 평균이 현재 비디오 블록에서의 하나 이상의 샘플을 예측하기 위해 사용될 수 있다. 다른 예로서, 평면 인트라 예측 모드가 선택되는 경우, 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 샘플들의 선형 함수가 현재 비디오 블록에서의 하나 이상의 샘플을 예측하기 위해 사용될 수 있다. DC 인트라 예측 모드 및/또는 평면 인트라 예측 모드가 선택되는 경우, 루마 샘플 영역은 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 크로마 샘플들이 향상되도록 선택될 수 있다.
예를 들어, 크로마 향상을 인에이블 또는 디스에이블할지 여부를 표시하기 위해, 크로마 향상 표시자가 시그널링될 수 있다. 크로마 향상 표시자는, 예를 들어, 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹, 또는 시퀀스 레벨에서 시그널링될 수 있다.
예를 들어, 크로마 향상 처리가 현재 코딩 블록에 적용되는지 여부를 표시하기 위해, 크로마 향상 표시자가 블록 레벨에서 시그널링될 수 있다. 예를 들어, 현재 블록이 인트라 코딩된 블록인 경우, 크로마 향상 표시자가 시그널링될 수 있다.
하나 이상의 교차 평면 필터 계수가 인코더에서 유도되어 디코더에 전송될 수 있다. 예를 들어, 기준 샘플들을 개선하기 위해 인트라 코딩된 블록들에 적용되는 향상 필터들에 대한 필터 계수 트레이닝은 인트라 코딩된 샘플들을 사용할 수 있다. 하나 이상의 교차 평면 필터 계수가, 예를 들어, 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹, 또는 시퀀스 레벨에서 전송될 수 있다. 하나 이상의 교차 평면 필터 계수는 블록 레벨에서 전송될 수 있다.
도 11은 예측된 크로마 샘플 향상을 갖는 블록 기반 하이브리드 비디오 코딩 디바이스(1100)(예를 들어, 인코더 또는 디코더)의 일례이다. 예측(예를 들어, 인트라 예측(1104) 및/또는 인터 예측(1106))이 입력 비디오(1102) 상에 수행될 수 있다. 예측 잔차(1108)가, 예를 들어, 입력 비디오(1102)의 원래 블록으로부터 예측 블록(1114)을 감산함으로써 결정될 수 있다. 예측 잔차(1108)는, 예를 들어, DCT 및/또는 DST 블록 변환을 사용하여 변환 및/또는 양자화(1110)될 수 있다. 예측 잔차(1108)가 입력 비디오(1102)의 루마 및/또는 크로마 성분에 대해 변환될 수 있다. 예측된 크로마 샘플들의 정확도를 개선하면 코딩 효율을 개선시킬 수 있다. 크로마 향상(1112)이, 예를 들어, 하나 이상의 예측된 크로마 샘플을 향상시키기 위해, 교차 평면 (예를 들어, 하이 패스) 필터를 사용함으로써 구현될 수 있다. 예를 들어, 객체 윤곽 및/또는 에지 영역에 대해 크로마 샘플들이 향상될 수 있다.
교차 평면 필터가, 예를 들어, 동일 및 이웃하는 블록들의 재구성된 루마 샘플들을 사용하여, 현재 블록의 하나 이상의 (예를 들어, 모든) 예측된 크로마 샘플에 사용될 수 있다. 예를 들어, 현재 블록의 하나 이상의 예측된 크로마 샘플은 하나 이상의 예측된 크로마 샘플에 대응하는 복수의 루마 샘플들에 교차 평면 필터를 적용함으로써 향상될 수 있다. 현재 블록은 인트라 코딩된 비디오 블록일 수 있다. 예를 들어, 수학식(11)에 나타난 바와 같이, 향상된 예측된 크로마 샘플이 생성될 수 있다:
Figure 112018021329279-pct00013
여기서, PC[x][y]는 크로마 위치(x, y)에서 생성되는 예측된 크로마 샘플일 수 있다. 예측된 크로마 샘플 PC[x][y]는 인트라 예측 또는 인터 예측을 사용하여 예측될 수 있다. 수학식(11)에 도시되지는 않았지만, 크로마 향상에 사용되는 교차 평면 필터는, 예를 들어, 현재 블록에 대한 코딩 모드(예를 들어, 인트라 또는 인터)에 따라 변할 수 있다. 한 예에서, 복수(예를 들어, 2개)의 교차 평면 필터 세트가 개별적으로 트레이닝될 수 있다. 제 1 세트의 교차 평면 필터가 하나 이상의 인트라 예측된 크로마 샘플에 적용될 수 있다. 제 2 세트의 교차 평면 필터가 하나 이상의 인터 예측된 크로마 샘플에 적용될 수 있다.
SL(xL, yL)은 위치(xL, yL)에서의 재구성된 루마 샘플들일 수 있으며, 여기서 (xL, yL)은 수학식(12)에 나타난 바와 같이 크로마 포맷에 기초하여 계산될 수 있다:
Figure 112018021329279-pct00014
여기서 (scaleX, scaleY)는 크로마 포맷 4:2:0, 4:2:2 및 4:4:4에 대해 각각 (2, 2), (2, 1), (1, 1)일 수 있다.
교차 평면 필터가, 예를 들어, 하나 이상의 예측된 크로마 샘플의 정확도를 개선시키기 위해, 하나 이상의 이웃하는 대응하는 기준 루마 샘플들에 적용될 수 있다.
교차 평면 필터는 하나 이상의 예측된 크로마 샘플의 품질을 향상시킬 수 있다. 예측 잔차 정보가 더 작을 수 있으며, 이는 예를 들어, 향상된 예측된 크로마 샘플들이 예측 잔차를 생성하기 위해 사용될 때, 개선된 코딩 성능으로 이어질 수 있다.
교차 평면 필터링이 하나 이상의 향상된 크로마 샘플을 도출하기 위해 사용될 수 있다. 예를 들어, 교차 평면 필터가 현재 크로마 샘플 위치에 대응하는 루마 샘플들의 이웃(예를 들어, 루마 샘플 영역)에 적용될 수 있다.
도 12는 교차 평면 필터링을 사용하여 예측된 크로마 샘플을 향상시키는 일례이다. 복수의 루마 샘플 영역들(1202A, 1202B, 1202C)이 결정될 수 있다. 복수의 루마 샘플 영역들(1202A, 1202B, 1202C) 각각은 예측된 크로마 샘플에 대응할 수 있다. 교차 평면 필터가 루마 샘플 영역(1202A, 1202B, 1202C) 내의 복수의 루마 샘플들(예를 들어, 도 12에 도시된 점선 박스 내의 3x3 윈도우의 루마 샘플들)에 적용될 수 있다. 교차 평면 필터는 현재 블록 내의 재구성된 루마 샘플들(예를 들어, 수직 줄무늬 원으로 표시됨)에 적용될 수 있다. 현재 블록은 인트라 코딩된 비디오 블록일 수 있다. 출력이 결정될 수 있다. 교차 평면 필터를 적용한 출력은, 예를 들어, 수학식(11)에 의해 주어진 오프셋일 수 있다. 향상된 크로마 샘플(1206A, 1206B, 1206C)을 결정하기 위해 대응하는 크로마 샘플에 오프셋(1204A, 1204B, 1204C)을 적용(예를 들어, 가산)함으로써, 향상된 예측된 크로마 샘플(1206A, 1206B, 1206C)이 결정될 수 있다. 예측된 크로마 샘플들을 향상시키는 데 사용하기 위한 필터링될 현재 블록의 대응하는 재구성된 루마 샘플들의 이용 가능성이 특정 블록 상의 루마 및 크로마 성분들 사이에 코딩 레이턴시를 도입할 수 있다.
교차 평면 필터가 아직 재구성되지 않은 루마 샘플들(1208) 상에 적용될 수 있다. 아직 재구성되지 않은 루마 샘플들(1208)은, 예를 들어, 아직 재구성되지 않은 루마 샘플들(1208)에 이웃하는 (예를 들어, 좌측 또는 상단의) 재구성된 루마 샘플들을 사용하여 패딩될 수 있다. 예를 들어, 이용 불가능한 루마 샘플은 이웃하는 재구성된 루마 샘플로 대체될 수 있다.
예를 들어, 예측 모드(예를 들어, 인트라 또는 인터 예측)에 의존하여 별개의 (예를 들어, 상이한) 필터들이 적용될 수 있다. 상이한 기술(예를 들어, 절차)이 상이한 교차 평면 필터를 분류하고 적용하기 위해 사용될 수 있다. 예를 들어, 교차 평면 필터가, 예를 들어, 정수 또는 부분(예를 들어, 1/2 또는 1/4) 픽셀 모션 벡터가 사용되는지 여부에 따라, 적용 가능성을 위해 추가 분류되거나 하위 분류될 수 있다. 교차 평면 필터는, 예를 들어, 어떤 기준 픽처가 인터 예측에서 사용되는지에 따라, 적용 가능성을 위해 분류 및/또는 하위 분류될 수 있다. 교차 평면 필터는 이들 및 다른 코딩 파라미터에 적응적으로 선택 및/또는 적용될 수 있다.
도 13은 재구성된 크로마 샘플들에 대한 크로마 향상을 갖는 블록 기반 하이브리드 비디오 코딩 디바이스(1300)(예를 들어, 인코더 또는 디코더)의 일례이다. 예를 들어, 예측 및 재구성 후에 크로마 향상이 적용될 수 있다. 예를 들어, 역양자화/역변환(1306)으로부터의 재구성된 잔차 블록을 예측 블록(1308)에 가산함으로써, 입력 비디오(1302)의 (예를 들어, 인-루프 필터링 이전의) 재구성된 블록(1304)이 생성될 수 있다. 재구성된 크로마 샘플들의 향상이 전체적인 픽처 품질을 개선 및/또는 다음 블록들 또는 픽처들의 코딩 효율을 개선할 수 있다. 크로마 향상(1312)이, 예를 들어, 교차 평면 필터를 적용함으로써 구현될 수 있다. 교차 평면 필터를 적용하는 것은, 예를 들어, 객체 윤곽 및/또는 에지 영역에서 하나 이상의 재구성된 크로마 샘플을 향상시킬 수 있다. 하나 이상의 재구성된 크로마 샘플은 인-루프 필터링 이전 또는 이후에 향상될 수 있다.
한 예에서, 교차 평면 필터가, 예를 들어, 현재 블록의 재구성된 크로마 샘플을 향상시키기 위해, 재구성된 루마 샘플들 SL[x][y]에 적용될 수 있다. 향상된 재구성된 크로마 샘플들은, 예를 들어, 수학식(13)에 따라 계산될 수 있다:
Figure 112018021329279-pct00015
여기서 SC[x][y]는 재구성된 크로마 샘플들일 수 있고, SC_ enh[x][y]는 향상된 재구성된 크로마 샘플들일 수 있다.
도 14는 교차 평면 필터링을 사용하여 하나 이상의 재구성된 크로마 샘플을 향상시키는 일례이다.
복수의 루마 샘플 영역들(1402, 1404)이 결정될 수 있다. 제 1 루마 샘플 영역(1402)은 현재 블록(1410)으로부터의 복수의 재구성된 루마 샘플들을 포함할 수 있다. 제 2 루마 샘플 영역(1404)은 현재 블록(1410)으로부터의 복수의 재구성된 루마 샘플들 및 하나 이상의 이전 블록으로부터의 복수의 재구성된 루마 샘플들을 포함할 수 있다.
교차 평면 필터가 하나 이상의 재구성된 루마 샘플들 SL(xL, yL)에 적용될 수 있다. 현재 블록(1410)의 하나 이상의 재구성된 크로마 샘플들 SC[x][y]는, 예를 들어, 선택되고 적용된 교차 평면 필터의 출력을 대응하는 재구성된 크로마 샘플에 적용(예들 들어, 가산)(1406, 1408)하여 하나 이상의 향상된 재구성된 크로마 샘플들(1412, 1414, SC_ enh[x][y])을 생성함으로써 향상될 수 있다. 예를 들어, 루마 샘플 영역(1402)과 같은 루마 샘플 영역은 현재 블록(1410)으로부터의 하나 이상의 재구성된 루마 샘플 및 하나 이상의 이전 블록으로부터의 하나 이상의 재구성된 루마 샘플을 포함할 수 있다.
예를 들어, 본 명세서에 기재된 바와 같은, 교차 평면 필터 분류, 적응 선택, 및 적용이 재구성된 크로마 샘플의 향상에 적용 가능할 수 있다. 교차 평면 필터 분류는, 예를 들어, 블록 예측 모드 (예를 들어, 인트라 또는 인터), 모션 벡터 정밀도 및/또는 기준 픽처 등에 의존할 수 있다.
필터 계수들의 시그널링은, 예를 들어, 본 명세서에 설명된 바와 같이 수행될 수 있다. 하나 이상의 교차 평면 필터 세트가 비트스트림에서 시그널링될 수 있다. 하나 이상의 교차 평면 필터 세트는 사용된 필터 분류 방법에 기초하여 시그널링될 수 있다. 시그널링될 다수의 필터 세트가 N으로 표시될 수 있다. N 세트의 교차 평면 필터의 필터 계수는 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹 또는 시퀀스 레벨을 통해 전송될 수 있다. 디코더는 코딩 모드, 모션 벡터 정밀도 및/또는 현재 블록의 기준 픽처에 기초하여 하나 이상의 적절한 교차 평면 필터를 선택할 수 있다. 디코더는, 예를 들어, 현재 블록의 코딩 모드, 모션 벡터 정밀도 및/또는 기준 픽처에 기초하여 하나 이상의 적절한 교차 평면 필터를 적용할 수 있다.
도 15a는 하나 이상의 개시된 실시예가 구현될 수 있는 예시적인 통신 시스템(100)의 다이어그램이다. 통신 시스템(100)은 음성, 데이터, 비디오, 메시징, 방송 등과 같은 콘텐츠를 다수의 무선 사용자들에게 제공하는 다중 액세스 시스템일 수 있다. 통신 시스템(100)은 다수의 무선 사용자들이 무선 대역폭을 비롯한 시스템 리소스의 공유를 통해 이와 같은 콘텐츠에 액세스하는 것을 가능하게 할 수 있다. 예를 들어, 통신 시스템(100)은 코드 분할 다중 접속(code division multiple access; CDMA), 시분할 다중 접속(time division multiple access; TDMA), 주파수 분할 다중 접속(frequency division multiple access; FDMA), 직교 FDMA(orthogonal FDMA; OFDMA), 단일 반송파 FDMA(single-carrier FDMA; SC-FDMA) 등과 같은 하나 이상의 채널 액세스 방법을 이용할 수 있다.
도 15a에 도시된 바와 같이, 통신 시스템(100)은 무선 송수신 유닛(WTRU)들(102a, 102b, 102c, 및/또는 102d)[일반적으로 또는 총괄하여 WTRU(102)로 언급될 수 있음], 무선 액세스 네트워크(radio access network; RAN)(103/104/105), 코어 네트워크(106/107/109), 공중 교환식 전화망(public switched telephone network; PSTN)(108), 인터넷(110), 및 다른 네트워크(112)를 포함할 수 있지만, 개시된 실시예들은 임의의 수의 WTRU, 기지국, 네트워크 및/또는 네트워크 요소를 고려한다는 것이 이해될 것이다. WTRU들(102a, 102b, 102c, 102d) 각각은 무선 환경에서 동작 및/또는 통신하도록 구성된 임의의 타입의 디바이스일 수 있다. 예로서, WTRU들(102a, 102b, 102c, 102d)은 무선 신호를 송신 및/또는 수신하도록 구성될 수 있고, 사용자 장비(user equipment; UE), 이동국, 고정 또는 이동 가입자 유닛, 페이저, 셀룰러 전화, 개인 휴대 정보 단말기(personal digital assistant; PDA), 스마트폰, 랩톱, 네트북, 퍼스널 컴퓨터, 무선 센서, 가전제품 등을 포함할 수 있다.
통신 시스템(100)은 또한 기지국(114a) 및 기지국(114b)을 포함할 수 있다. 기지국들(114a, 114b) 각각은 코어 네트워크(106/107/109), 인터넷(110) 및/또는 네트워크(112)와 같은 하나 이상의 통신 네트워크에 대한 액세스를 용이하게 하기 위해서, WTRU들(102a, 102b, 102c, 102d) 중 적어도 하나와 무선으로 인터페이스하도록 구성된 임의의 타입의 디바이스일 수 있다. 예로서, 기지국들(114a, 114b)은 베이스 트랜스시버 스테이션(base transceiver station; BTS), 노드 B, e노드 B, 홈 노드 B, 홈 e노드 B, 사이트 제어기, 액세스 포인트(access point; AP), 무선 라우터 등일 수 있다. 기지국들(114a, 114b)이 단일 요소로서 각각 도시되었지만, 기지국들(114a, 114b)은 임의의 수의 상호접속된 기지국들 및/또는 네트워크 요소들을 포함할 수 있다는 것이 이해될 것이다.
기지국(114a)은 RAN(103/104/105)의 일부일 수 있고, RAN(103/104/105)는 또한 기지국 제어기(base station controller; BSC), 무선 네트워크 제어기(radio network controller; RNC), 중계 노드 등과 같은 네트워크 요소들(도시되지 않음) 및/또는 다른 기지국을 포함할 수 있다. 기지국(114a) 및/또는 기지국(114b)은 셀(도시되지 않음)로서 언급되는 특정한 지리적 영역 내에서 무선 신호를 송신 및/또는 수신하도록 구성될 수 있다. 셀은 셀 섹터로 더욱 분할될 수 있다. 예를 들어, 기지국(114a)과 연관된 셀은 3개의 셀 섹터로 분할될 수 있다. 따라서, 일 실시예에서, 기지국(114a)은 3개의 트랜스시버, 즉, 셀의 각 섹터에 대해 한 개씩을 포함할 수 있다. 다른 실시예에서, 기지국(114a)은 다중 입력 다중 출력(multiple input multiple output; MIMO) 기술을 이용할 수 있으므로, 셀의 각 섹터에 대해 다수의 트랜스시버를 이용할 수 있다.
기지국(114a, 114b)은 임의의 적합한 무선 통신 링크(예를 들어, 무선 주파수(RF), 마이크로웨이브, 적외선(IR), 자외선(UV), 가시광 등)일 수 있는 무선 인터페이스(115/116/117)를 통해 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상과 통신할 수 있다. 무선 인터페이스(115/116/117)는 임의의 적합한 무선 액세스 기술(radio access technology; RAT)을 사용하여 확립될 수 있다.
보다 구체적으로, 앞서 언급한 바와 같이, 통신 시스템(100)은 다중 액세스 시스템일 수 있고, CDMA, TDMA, FDMA, OFDMA, SC-FDMA 등과 같은 하나 이상의 채널 액세스 방식을 이용할 수 있다. 예를 들어, RAN(103/104/105) 내의 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 광대역 CDMA(wideband CDMA; WCDMA)를 사용하여 무선 인터페이스(115/116/117)를 확립할 수 있는 범용 이동 통신 시스템(universal mobile telecommunications system; UMTS) 지상 무선 액세스(terrestrial radio access; UTRA)와 같은 무선 기술을 구현할 수 있다. WCDMA는 고속 패킷 액세스(high-speed packet access; HSPA) 및/또는 진화된 HSPA(evolved HSPA; HSPA+)와 같은 통신 프로토콜을 포함할 수 있다. HSPA는 고속 다운링크 패킷 액세스(high-speed downlink packet access; HSDPA) 및/또는 고속 업링크 패킷 액세스(high-speed uplink packet access; HSUPA)를 포함할 수 있다.
다른 실시예에서, 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 롱 텀 에볼루션(long term evolution; LTE) 및/또는 LTE-A(LTE-advanced)를 이용하여 무선 인터페이스(115/116/117)를 확립할 수 있는 E-UTRA(evolved UMTS terrestrial radio access)와 같은 무선 기술을 구현할 수 있다.
다른 실시예에서, 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 IEEE 802.16(즉, WiMAX(Worldwide Interoperability for Microwave Access)), CDMA2000, CDMA2000 1X, CDMA2000 EV-DO, IS-2000(Interim Standard 2000), IS-95, IS-856, GSM(Global System for Mobile Communication), EDGE(Enhanced Data rates for GSM Evolution), GERAN(GSM EDGE) 등과 같은 무선 기술을 구현할 수 있다.
도 15a의 기지국(114b)은 예를 들어 무선 라우터, 홈 노드 B, 홈 e노드 B 또는 액세스 포인트일 수 있고, 사업장, 집, 차량, 캠퍼스 등과 같은 로컬 영역에서의 무선 접속을 용이하게 하는 임의의 적합한 RAT를 이용할 수 있다. 일 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 IEEE 802.11과 같은 무선 기술을 구현하여, 무선 근거리 네트워크(wireless local area network; WLAN)를 확립할 수 있다. 다른 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 IEEE 802.15와 같은 무선 기술을 구현하여, 무선 사설 네트워크(wireless personal area network; WPAN)를 확립할 수 있다. 또 다른 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 셀룰러 기반 RAT(예컨대, WCDMA, CDMA2000, GSM, LTE, LTE-A 등)을 이용하여 피코셀 또는 펨토셀을 확립할 수 있다. 도 15a에서 도시된 바와 같이, 기지국(114b)은 인터넷(110)에 직접 접속될 수 있다. 따라서, 기지국(114b)은 코어 네트워크(106/107/109)를 통해 인터넷(110)에 액세스하기 위해 사용될 수 없다.
RAN(103/104/105)은 코어 네트워크(106/107/109)와 통신할 수 있고, 코어 네트워크(106/107/109)는 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상에 음성, 데이터, 애플리케이션, 및/또는 VoIP(voice over internet protocol) 서비스를 제공하도록 구성된 임의의 타입의 네트워크일 수 있다. 예를 들어, 코어 네트워크(106/107/109)는 호 제어, 요금 서비스, 모바일 위치 기반 서비스, 선불 전화(pre-paid calling), 인터넷 접속, 비디오 분배 등을 제공 및/또는 사용자 인증과 같은 높은 레벨 보안 기능을 수행할 수 있다. 도 15a에 도시되지 않았지만, RAN(103/104/105) 및/또는 코어 네트워크(106/107/109)는 RAN(103/104/105)과 동일한 RAT를 이용하거나 상이한 RAT를 이용하는 다른 RAN들과 직접 또는 간접 통신할 수 있다는 것이 이해될 것이다. 예를 들어, E-UTRA 무선 기술을 사용할 수 있는 RAN(103/104/105)에 접속되는 것 이외에, 코어 네트워크(106/107/109)는 또한 GSM 무선 기술을 이용하는 다른 RAN(도시되지 않음)과 통신할 수 있다.
코어 네트워크(106/107/109)는 또한 WTRU들(102a, 102b, 102c, 102d)이 PSTN(108), 인터넷(110) 및/또는 다른 네트워크들(112)에 액세스하게 하는 게이트웨이의 역할을 할 수도 있다. PSTN(108)은 기존 전화 서비스(plain old telephone service; POTS)를 제공하는 회선 교환 전화 네트워크를 포함할 수 있다. 인터넷(110)은 TCP/IP 인터넷 프로토콜 스위트에서의 전송 제어 프로토콜(transmission control protocol; TCP), 사용자 데이터그램 프로토콜(user datagram protocol; UDP) 및 인터넷 프로토콜(internet protocol; IP)과 같은 공통 통신 프로토콜들을 이용하는 상호접속 컴퓨터 네트워크 및 장치의 글로벌 시스템을 포함할 수 있다. 네트워크(112)는 다른 서비스 제공자들에 의해 동작 및/또는 소유되는 유선 또는 무선 통신 네트워크를 포함할 수 있다. 예를 들어, 네트워크(112)는 RAN(103/104/105)과 동일한 RAT를 이용하거나 상이한 RAT를 이용할 수 있는 하나 이상의 RAN에 접속되는 다른 코어 네트워크를 포함할 수 있다.
통신 시스템(100) 내의 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상은 다중 모드 능력을 포함할 수 있고, 예를 들어, WTRU들(102a, 102b, 102c, 102d)은 상이한 무선 링크를 통해 상이한 무선 네트워크들과 통신하는 다수의 트랜스시버를 포함할 수 있다. 예를 들어, 도 15a에 도시된 WTRU(102c)는 셀 기반 무선 기술을 이용할 수 있는 기지국(114a) 및 IEEE 802 무선 기술을 이용할 수 있는 기지국(114b)과 통신하도록 구성될 수도 있다.
도 15b는 예시적인 WTRU(102)의 시스템 다이어그램이다. 도 15b에 도시된 바와 같이, WTRU(102)는 프로세서(118), 트랜스시버(120), 송수신 요소(122), 스피커/마이크로폰(124), 키패드(126), 디스플레이/터치패드(128), 비분리형 메모리(130), 분리형 메모리(132), 전원(134), 글로벌 위치 시스템(global positioning system; GPS) 칩셋(136), 및 다른 주변 장치(138)를 포함할 수 있다. WTRU(102)는 본 실시예와 일치관성을 유지하면서 앞서 말한 요소들의 임의의 하위 조합을 포함할 수 있음을 이해할 것이다. 또한, 기지국들(114a, 114b)은 비제한적으로, 무엇보다 베이스 트랜스시버 스테이션(BTS), 노드 B, 사이트 제어기, 액세스 포인트(AP), 홈 노드 B, 진화된 홈 노드 B(eNodeB), 홈 진화된 노드 B(home evolved node-B; HeNB), 홈 진화된 노드 B 게이트웨이 및 프록시 노드 등을 나타낼 수 있고, 기지국들(114a, 114b) 및/또는 노드들은 도 15b에 도시되고 본 명세서에 기술된 요소들 중 하나 이상을 포함할 수 있다는 것을 실시예들은 고려한다.
프로세서(118)는 범용 프로세서, 특수 목적 프로세서, 종래의 프로세서, 디지털 신호 프로세서(digital signal processor; DSP), 복수의 마이크로 프로세서, DSP 코어와 관련된 하나 이상의 마이크로 프로세서, 컨트롤러, 마이크로 컨트롤러, 주문형 반도체(Application Specific Integrated Circuit; ASIC), 필드 프로그래머블 게이트 어레이(Field Programmable Gate Array; FPGA) 회로, 임의의 다른 타입의 집적 회로(IC), 상태 머신(state machine) 등일 수 있다. 프로세서(118)는 WTRU(102)가 무선 환경에서 동작하는 것을 가능하게 하는 신호 코딩, 데이터 처리, 전력 제어, 입출력 처리 및/또는 임의의 다른 기능을 수행할 수 있다. 프로세서(118)는 송수신 요소(122)에 결합될 수 있는 트랜스시버(120)에 결합될 수 있다. 도 15b는 프로세서(118)와 트랜스시버(120)를 별도의 구성 요소로서 도시하였지만, 프로세서(118)와 트랜스시버(120)는 전자 패키지 또는 칩 내에 함께 통합될 수 있음을 이해할 것이다.
송수신 요소(122)는 무선 인터페이스(115/116/117)를 통해 기지국(예컨대, 기지국(114a))에 신호를 송신하거나 기지국으로부터 신호를 수신하도록 구성될 수 있다. 예를 들어, 일 실시예에서, 송수신 요소(122)는 RF 신호를 송신 및/또는 수신하도록 구성된 안테나일 수 있다. 다른 실시예에서, 송수신 요소(122)는 예를 들어 IR, UV, 또는 가시광 신호를 송신 및/또는 수신하도록 구성된 에미터/검출기일 수 있다. 또 다른 실시예에서, 송수신 요소(122)는 RF와 광 신호 모두를 송신 및 수신하도록 구성될 수 있다. 송수신 요소(122)는 무선 신호의 임의의 조합을 송신 및/또는 수신하도록 구성될 수 있음을 이해할 것이다.
또한, 송수신 요소(122)가 도 15b에서 단일 요소로서 도시되어 있지만, WTRU(102)는 임의의 수의 송수신 요소(122)를 포함할 수 있다. 보다 구체적으로, WTRU(102)는 MIMO 기술을 이용할 수 있다. 따라서, 일 실시예에서, WTRU(102)는 무선 인터페이스(115/116/117)를 통해 무선 신호를 송신 및 수신하기 위한 2개 이상의 송수신 요소(122)(예컨대, 다중 안테나)를 포함할 수 있다.
트랜스시버(120)는 송수신 요소(122)에 의해 송신될 신호를 변조하고, 송수신 요소(122)에 의해 수신되는 신호를 복조하도록 구성될 수 있다. 앞서 언급한 바와 같이, WTRU(102)는 다중 모드 능력을 가질 수 있다. 따라서, 트랜스시버(120)는 WTRU(102)가 예를 들어 UTRA 및 IEEE 802.11와 같은 다중 RAT들을 통해 통신하는 것을 가능하게 하는 다중 트랜스시버를 포함할 수 있다.
WTRU(102)의 프로세서(118)는 스피커/마이크로폰(124), 키패드(126) 및/또는 디스플레이/터치패드(128)(예컨대, 액정 디스플레이(liquid crystal display; LCD) 디스플레이 유닛 또는 유기 발광 다이오드(organic light-emitting diode; OLED) 디스플레이 유닛)에 결합될 수 있고, 이들로부터 사용자 입력 데이터를 수신할 수 있다. 프로세서(118)는 또한 스피커/마이크로폰(124), 키패드(126) 및/또는 디스플레이/터치패드(128)에 사용자 데이터를 출력할 수도 있다. 게다가, 프로세서(118)는 비분리형 메모리(130) 및/또는 분리형 메모리(132)와 같은 임의의 타입의 적합한 메모리로부터 정보를 액세스하고, 이 메모리에 데이터를 저장할 수 있다. 비분리형 메모리(130)는 랜덤 액세스 메모리(random-access memory; RAM), 판독 전용 메모리(read-only memory; ROM), 하드 디스크 또는 임의의 다른 타입의 메모리 저장 디바이스를 포함할 수 있다. 분리형 메모리(132)는 가입자 식별 모듈(subscriber identity module; SIM) 카드, 메모리 스틱, 보안 디지털(Secure Digital; SD) 메모리 카드 등을 포함할 수 있다. 다른 실시예들에서, 프로세서(118)는 서버 또는 홈 컴퓨터(도시되지 않음)와 같이 WTRU(102) 상에 물리적으로 위치하지 않는 메모리로부터 정보를 액세스하고 이 메모리에 데이터를 저장할 수 있다.
프로세서(118)는 전원(134)로부터 전력을 수신할 수 있고, WTRU(102) 내의 다른 구성 요소에 전력을 분배 및/또는 제어하도록 구성될 수 있다. 전원(134)은 WTRU(102)에 전력을 공급하기 위한 임의의 적합한 디바이스일 수 있다. 예를 들어, 전원(134)은 하나 이상의 건전지 배터리(예를 들어, 니켈-카드뮴(NiCd), 니켈-아연(NiZn), 니켈 금속 하이드라이드(NiMH), 리튬 이온(Li-ion) 등), 태양 전지, 연료 전지 등을 포함할 수 있다.
프로세서(118)는 또한 WTRU(102)의 현재 위치에 관한 위치 정보(예를 들어, 경도 및 위도)를 제공하도록 구성될 수 있는 GPS 칩셋(136)에 결합될 수 있다. GPS 칩셋(136)으로부터의 정보에 더하여 또는 대신에, WTRU(102)는 기지국(예를 들어, 기지국(114a, 114b))으로부터 무선 인터페이스(115/116/117)를 통해 위치 정보를 수신 및/또는 2개 이상의 인접 기지국들로부터 수신된 신호들의 타이밍에 기초하여 자신의 위치를 결정할 수 있다. WTRU(102)는 실시예와 일관성을 유지하면서 임의의 적합한 위치 결정 방법에 의해 위치 정보를 획득할 수 있다는 것이 이해될 것이다.
프로세서(118)는 추가의 특징, 기능 및/또는 유무선 연결을 제공하는 하나 이상의 소프트웨어 및/또는 하드웨어 모듈을 포함할 수 있는 다른 주변 장치(138)에 더욱 결합될 수 있다. 예를 들어, 주변 장치(138)는 가속도계, 전자 나침판, 위성 트랜스시버, 디지털 카메라(사진 또는 비디오용), 범용 직렬 버스(Universal Serial Bus; USB) 포트, 진동 디바이스, 텔레비전 트랜스시버, 핸즈프리 헤드셋, 블루투스® 모듈, 주파수 변조(frequency modulated; FM) 무선 유닛, 디지털 뮤직 플레이어, 미디어 플레이어, 비디오 게임 플레이어 모듈, 인터넷 브라우저 등을 포함할 수 있다.
도 15c는 실시예에 따른 RAN(103) 및 코어 네트워크(106)의 시스템 다이어그램이다. 앞서 언급한 바와 같이, RAN(103)은 무선 인터페이스(115)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 UTRA 무선 기술을 이용할 수 있다. RAN(103)은 또한 코어 네트워크(106)와 통신할 수 있다. 도 15c에 도시된 바와 같이, RAN(103)는 노드 B들(140a, 140b, 140c)을 포함할 수 있고, 노드 B들(140a, 140b, 140c)은 무선 인터페이스(115)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 노드 B들(140a, 140b, 140c)은 RAN(103) 내의 특정한 셀(도시되지 않음)과 각각 연관될 수 있다. RAN(103)은 또한 RNC들(142a, 142b)을 포함할 수 있다. RAN(103)은 실시예와 일관성을 유지하면서 임의의 수의 노드 B들 및 RNC들을 포함할 수 있음을 이해할 것이다.
도 15c에 도시된 바와 같이, 노드 B들(140a, 140b)은 RNC(142a)와 통신할 수 있다. 부가적으로, 노드 B(140c)는 RNC(142b)와 통신할 수 있다. 노드 B들(140a, 140b, 140c)은 Iub 인터페이스를 통해 각각의 RNC들(142a, 142b)과 통신할 수 있다. RNC들(142a, 142b)은 Iur 인터페이스를 통해 서로 통신할 수 있다. RNC들(142a, 142b) 각각은 그 자신에 접속된 각각의 노드 B들(140a, 140b, 140c)을 제어하도록 구성될 수 있다. 게다가, RNC들(142a, 142b) 각각은 외부 루프 전력 제어, 부하 제어, 허가 제어, 패킷 스케줄링, 핸드오버 제어, 매크로 다이버시티, 보안 기능, 데이터 암호화 등과 같은 다른 기능을 수행 또는 지원하도록 구성될 수 있다.
도 15c에 도시된 코어 네트워크(106)는 미디어 게이트웨이(media gateway; MGW)(144), 모바일 스위칭 센터(mobile switching center; MSC)(146), 서빙 GPRS 지원 노드(serving GPRS support node; SGSN)(148), 및/또는 게이트웨이 GPRS 지원 노드(gateway GPRS support node; GGSN)(150)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(106)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 오퍼레이터 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
RAN(103) 내의 RNC(142a)는 IuCS 인터페이스를 통해 코어 네트워크(106) 내의 MSC(146)에 접속될 수 있다. MSC(146)는 MGW(144)에 접속될 수 있다. MSC(146) 및 MGW(144)는 지상 라인 통신 디바이스들 및 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해 PSTN(108)과 같은 회선 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
RAN(103) 내의 RNC(142a)는 또한 IuPS 인터페이스를 통해 코어 네트워크(106) 내의 SGSN(148)에 접속될 수 있다. SGSN(148)은 GGSN(150)에 접속될 수 있다. SGSN(148) 및 GGSN(150)는 종래의 IP 이용 가능 디바이스들 및 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해 인터넷(110)과 같은 패킷 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
앞서 언급한 바와 같이, 코어 네트워크(106)는 또한 다른 서비스 제공자들에 의해 소유 및/또는 동작되는 다른 유선 또는 무선 네트워크들을 포함할 수 있는 네트워크들(112)에 접속될 수 있다.
도 15d는 실시예에 따른 RAN(104) 및 코어 네트워크(107)의 시스템 다이어그램이다. 앞서 언급한 바와 같이, RAN(104)은 무선 인터페이스(116)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 E-UTRA 무선 기술을 이용할 수 있다. RAN(104)은 또한 코어 네트워크(107)와 통신할 수 있다
RAN(104)은 e노드 B들(160a, 160b, 160c)을 포함할 수 있지만, RAN(104)은 본 실시예와 일관성을 유지하면서 임의의 수의 e노드 B들을 포함할 수 있음을 이해할 것이다. e노드 B들(160a, 160b, 160c)은 무선 인터페이스(116)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 일 실시예에서, e노드 B들(160a, 160b, 160c)은 MIMO 기술을 구현할 수 있다. 따라서, e노드 B(160a)는, 예를 들어, WTRU(102a)에 무선 신호를 송신하고 WTRU(102a)로부터 무선 신호를 수신하기 위해 다수의 안테나를 사용할 수 있다.
e노드 B들(160a, 160b, 160c) 각각은 특정한 셀(도시되지 않음)과 연관될 수 있고, 업링크 및/또는 다운링크에서 사용자들의 스케줄링, 무선 자원 관리 결정, 핸드오버 결정 등을 다루도록 구성될 수 있다. 도 15d에 도시된 바와 같이, e노드 B들(160a, 140b, 140c)은 X2 인터페이스를 통해 서로 통신할 수 있다.
도 15d에 도시된 코어 네트워크(107)는 이동성 관리 게이트웨이(mobility management gateway; MME)(162), 서빙 게이트웨이(164) 및 패킷 데이터 네트워크(packet data network; PDN) 게이트웨이(166)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(107)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 오퍼레이터 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
MME(162)는 S1 인터페이스를 통해 RAN(104) 내의 e노드 B들(160a, 160b, 160c)의 각각에 접속될 수 있고, 제어 노드로서 기능할 수 있다. 예를 들어, MME(162)는 WTRU들(102a, 102b, 102c)의 사용자 인증, 베어러 활성화/비활성화, WTRU들(102a, 102b, 102c)의 초기 부착 동안 특정한 서빙 게이트웨이의 선택 등을 담당할 수 있다. MME(162)는 또한 GSM 또는 WCDMA와 같은 다른 무선 기술을 이용하는 다른 RAN(도시되지 않음)와 RAN(104) 사이를 스위칭하는 제어 평면 기능을 제공할 수 있다.
서빙 게이트웨이(164)는 S1 인터페이스를 통해 RAN(104) 내의 e노드 B들(160a, 160b, 160c) 각각에 접속될 수 있다. 서빙 게이트웨이(164)는 일반적으로 WTRU들(102a, 102b, 102c)로/로부터 사용자 데이터 패킷을 라우팅 및 포워딩할 수 있다. 서빙 게이트웨이(164)는 또한 e노드 B들 간의 핸드오버 동안 사용자 평면의 앵커(anchoring), 다운링크 데이터가 WTRU들(102a, 102b, 102c)에 사용될 때의 페이징 트리거링, WTRU들(102a, 102b, 102c)의 콘텍스트의 관리 및 저장 등과 같은 다른 기능을 수행할 수 있다.
서빙 게이트웨이(164)는 또한 IP 이용 가능 디바이스들과 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해, 인터넷(110)과 같은 패킷 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있는 PDN 게이트웨이(166)에 접속될 수 있다.
코어 네트워크(107)는 다른 네트워크들과의 통신을 용이하게 할 수 있다. 예를 들어, 코어 네트워크(107)는 WTRU들(102a, 102b, 102c)과 지상 라인 통신 디바이스들 사이의 통신을 용이하게 하기 위해서, PSTN(108)과 같은 회선 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. 예를 들어, 코어 네트워크(107)는 코어 네트워크(107)와 PSTN(108) 사이에서 인터페이스의 역할을 하는 IP 게이트웨이(예컨대, IP 멀티미디어 서브시스템(IP multimedia subsystem; IMS) 서버)를 포함하거나, 이 IP 게이트웨이와 통신할 수 있다. 게다가, 코어 네트워크(107)는 다른 서비스 제공자들에 의해 운영 및/또는 소유되는 다른 유선 또는 무선 네트워크를 포함할 수 있는 네트워크(112)에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
도 15e는 실시예에 따른 RAN(105) 및 코어 네트워크(109)의 시스템 다이어그램이다. RAN(105)은 무선 인터페이스(117)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 IEEE 802.16 무선 기술을 이용하는 액세스 서비스 네트워크(access service network; ASN)일 수 있다. 이하에 더욱 논의되는 바와 같이, WTRU들(102a, 102b, 102c), RAN(105), 및 코어 네트워크(109)의 상이한 기능 엔티티들 간의 통신 링크는 참조점으로 정의될 수 있다.
도 15e에 도시된 바와 같이, RAN(105)은 기지국들(180a, 180b, 180c) 및 ANS 게이트웨이(182)를 포함할 수 있지만, 실시예와 일관성을 유지하면서 RAN(105)은 임의의 수의 기지국 및 ASN 게이트웨이를 포함할 수 있음을 이해할 것이다. 기지국들(180a, 180b, 180c)은 RAN(105) 내의 특정한 셀(도시되지 않음)과 각각 연관될 수 있고, 무선 인터페이스(117)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 일 실시예에서, 기지국들(180a, 180b, 180c)은 MIMO 기술을 구현할 수 있다. 따라서, 기지국(180a)은, 예를 들어, WTRU(102a)에 무선 신호를 송신하고 WTRU(102a)로부터 무선 신호를 수신하기 위해 다수의 안테나를 사용할 수 있다. 기지국들(180a, 180b, 180c)은 또한 핸드오프 트리거링, 터널 확립, 무선 자원 관리, 트래픽 분류, 서비스 품질(QoS) 정책 시행 등과 같은 이동성 관리 기능을 제공할 수 있다. ASN 게이트웨이(182)는 트래픽 집합점의 역할을 할 수도 있고, 페이징, 가입자 프로파일의 캐싱, 코어 네트워크(109)로의 라우팅 등을 담당할 수 있다.
WTRU들(102a, 102b, 102c)과 RAN(105) 간의 무선 인터페이스(117)는 IEEE 802.16 사양을 구현하는 R1 참조점으로 정의될 수 있다. 게다가, WTRU들(102a, 102b, 102c) 각각은 코어 네트워크(109)와 논리적 인터페이스(도시되지 않음)를 확립할 수 있다. WTRU들(102a, 102b, 102c)과 코어 네트워크(109) 간의 논리적 인터페이스는 R2 참조점으로 정의될 수 있고, 이것은 인증, 인가, IP 호스트 구성 관리, 및/또는 이동성 관리에 이용될 수 있다.
기지국들(180a, 180b, 180c) 각각 간의 통신 링크는 R8 참조점으로 정의될 수 있고, 이것은 기지국들 간의 데이터 전달 및 WTRU 핸드오버를 용이하게 하기 위한 프로토콜을 포함한다. 기지국들(180a, 180b, 180c)과 ASN 게이트웨이(182) 간의 통신 링크는 R6 참조점으로 정의될 수 있다. R6 참조점은 WTRU들(102a, 102b, 102c) 각각과 연관된 이동성 이벤트에 기초하여 이동성 관리를 용이하게 하기 위한 프로토콜을 포함할 수 있다.
도 15e에 도시된 바와 같이, RAN(105)은 코어 네트워크(109)에 접속될 수 있다. RAN(105)과 코어 네트워크(109) 간의 통신 링크는 R3 참조점으로 정의될 수 있고, 이것은 예를 들어 데이터 전달 및 이동성 관리 능력을 용이하게 하는 프로토콜을 포함할 수 있다. 코어 네트워크(109)는 모바일 IP 홈 에이전트(mobile IP home agent; MIP-HA)(184), 인증, 인가, 계정(authentication, authorization, accounting; AAA) 서버(186) 및 게이트웨이(188)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(109)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 운용자 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
MIP-HA는 IP 어드레스 관리를 담당할 수 있고, WTRU들(102a, 102b, 102c)이 상이한 ASN들 및/또는 상이한 코어 네트워크들 간에 로밍하는 것을 가능하게 할 수 있다. MIP-HA(184)는 IP 이용 가능 디바이스들과 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해, 인터넷(110)과 같은 패킷 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. AAA 서버(186)는 사용자 인증 및 사용자 서비스 지원을 담당할 수 있다. 게이트웨이(188)는 다른 네트워크들과의 상호 연동(interworking)을 용이하게 할 수 있다. 예를 들어, 게이트웨이(188)는 WTRU들(102a, 102b, 102c)과 지상 라인 통신 디바이스들 사이의 통신을 용이하게 하기 위해서, PSTN(108)과 같은 회선 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. 게다가, 게이트웨이(188)는 다른 서비스 제공자들에 의해 동작 및/또는 소유되는 다른 유선 또는 무선 네트워크를 포함할 수 있는 네트워크(112)에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
도 15e에 도시되지 않았지만, RAN(105)은 다른 ASN들에 접속될 수 있고, 코어 네트워크(109)는 다른 코어 네트워크들에 접속될 수 있다는 것이 이해될 것이다. RAN(105)와 다른 ASN들 간의 통신 링크는 R4 참조점으로 정의될 수 있고, 이것은 RAN(105)와 다른 ASN 간에 WTRU들(102a, 102b, 102c)의 이동성을 조정하는 프로토콜을 포함할 수 있다. 코어 네트워크(109)와 다른 코어 네트워크들 간의 통신 링크는 R5 참조점으로 정의될 수 있고, 이것은 홈 코어 네트워크와 방문 코어 네트워크 간의 상호연동을 용이하게 하는 프로토콜을 포함할 수 있다.
교차 평면 필터링을 사용하는 향상된 크로마 코딩을 위한 시스템, 방법 및 도구가 개시되었다. 기준, 예측된 및/또는 재구성된 크로마 샘플이, 예를 들어, 기준, 예측된 또는 재구성된 크로마 샘플에 각각 대응하는 1D 또는 2D MxN 윈도우의 루마 샘플들(필터 지원 영역)의 교차 평면 필터링으로부터 도출된 정보를 이용하여 향상될 수 있다. 루마 샘플들은 재구성되거나 패딩될 수 있다. 필터 지원 영역은 예를 들어, 방향성 인트라 예측 모드에 기초하여 적응적으로 선택될 수 있다. 교차 평면 필터는 예를 들어 적용 가능성으로 분류될 수 있고, 예를 들어 필터 지원 영역, 현재 블록에 대해 인트라 또는 인터 예측 모드가 사용되는지 여부, 정수 또는 분수 픽셀 모션 벡터가 사용되는지 여부 및/또는 기준 픽처가 인터 예측에서 사용되는지 여부에 기초하여 적응적으로 선택될 수 있다. 예를 들어, 크로마 향상이 인에이블되는지 여부, 크로마 향상이 현재 블록에 적용되는지 여부, 교차 평면 필터 타입, 교차 평면 필터 (예를 들어, 필터 세트) 및 대응하는 교차 평면 필터 계수 중 적어도 하나를 나타내기 위해 시그널링이 디코더에 제공될 수 있다. 디코더는 수신된 시그널링에 기초하여 필터 지원 영역에 적용할 교차 평면 필터를 선택할 수 있다.
특징들 및 요소들이 특정한 조합으로 앞서 설명되었지만, 각각의 특징 또는 요소는 단독으로 사용될 수 있거나, 또는 다른 특징들 및 요소들과 임의의 조합으로 사용될 수 있다는 것을 관련 기술 분야의 당업자는 이해할 것이다. 게다가, 본 명세서에서 설명된 방법은, 컴퓨터 또는 프로세서에 의한 실행을 위해 컴퓨터 판독 가능 매체에 통합된 컴퓨터 프로그램, 소프트웨어 또는 펌웨어로 구현될 수 있다. 컴퓨터 판독 가능 매체의 예로, 전자 신호(유무선 접속에 의해 송신됨) 및 컴퓨터 판독 가능 저장 매체를 들 수 있다. 컴퓨터 판독 가능 저장 매체의 예에는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 레지스터, 캐시 메모리, 반도체 메모리 장치, 내부 하드 디스크와 제거형 디스크와 같은 자기 매체, 광자기 매체, 및 CD-ROM 디스크, 디지털 다용도 디스크(digital versatile disk; DVD)와 같은 광학 매체가 포함될 수 있지만, 이에 한정되는 것은 아니다. WTRU, UE, 단말기, 기지국, RNC, 또는 임의의 호스트 컴퓨터에서 이용하기 위한 무선 주파수 트랜스시버를 구현하기 위해 소프트웨어와 관련된 프로세서가 사용될 수 있다.

Claims (26)

  1. 비디오 코딩 방법에 있어서,
    현재 픽처와 연관된 교차 평면 필터의 표시를 획득하는 단계 - 상기 현재 픽처는 비디오 블록을 포함함 - ;
    상기 비디오 블록을 예측하기 위해 사용되는 복수의 기준 샘플들(reference samples)을 획득하는 단계;
    상기 복수의 기준 샘플들 중 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 루마 샘플 영역을 결정하는 단계 - 상기 루마 샘플 영역은 상기 비디오 블록 내의 예측된 루마 샘플들을 포함함 - ;
    상기 예측된 루마 샘플들의 재구성 전에, 오프셋을 결정하기 위해 상기 루마 샘플 영역 내의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계 - 상기 교차 평면 필터는 하이 패스 필터를 포함함 - ;
    향상된 크로마 샘플을 결정하기 위해 상기 대응하는 크로마 샘플에 상기 오프셋을 적용하는 단계; 및
    상기 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하는 단계
    를 포함하는, 비디오 코딩 방법.
  2. 제 1 항에 있어서, 상기 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함하고, 상기 방법은,
    상기 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계 이전에, 상기 이용 불가능한 루마 샘플을 이웃하는 이용 가능한 루마 샘플로 대체하는 단계를 더 포함하는, 비디오 코딩 방법.
  3. 제 1 항에 있어서,
    크로마 향상 표시자에 기초하여, 상기 교차 평면 필터를 적용할지 여부를 결정하는 단계를 더 포함하고,
    상기 크로마 향상 표시자는 블록 레벨에서 획득되는 것인, 비디오 코딩 방법.
  4. 제 1 항에 있어서, 상기 루마 샘플 영역은 제 1 루마 샘플 영역이고, 상기 복수의 루마 샘플들은 제 1 의 복수의 루마 샘플들이고, 상기 예측된 루마 샘플들은 제 1 의 예측된 루마 샘플들이고, 상기 오프셋은 제 1 오프셋이고, 상기 대응하는 크로마 샘플은 제 1 의 대응하는 크로마 샘플이며, 상기 향상된 크로마 샘플은 제 1 의 향상된 크로마 샘플이고,
    상기 방법은,
    제 2 의 복수의 기준 샘플들 중 제 2 의 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 제 2 루마 샘플 영역을 결정하는 단계 - 상기 제 2 루마 샘플 영역은 상기 비디오 블록 내의 제 2 의 예측된 루마 샘플들을 포함함 - ;
    상기 제 2 의 예측된 루마 샘플들의 재구성 전에, 제 2 오프셋을 결정하기 위해 상기 제 2 루마 샘플 영역 내의 제 2 의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계;
    제 2 의 향상된 크로마 샘플을 결정하기 위해 상기 제 2 의 대응하는 크로마 샘플에 상기 제 2 오프셋을 적용하는 단계; 및
    상기 제 2 의 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하는 단계
    를 더 포함하는, 비디오 코딩 방법.
  5. 제 1 항에 있어서, 상기 루마 샘플 영역은 선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 결정되는 것인, 비디오 코딩 방법.
  6. 제 1 항에 있어서,
    선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 적용할 상기 교차 평면 필터를 결정하는 단계를 더 포함하는, 비디오 코딩 방법.
  7. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 상기 비디오 블록 내의 예측된 크로마 샘플인 것인, 비디오 코딩 방법.
  8. 삭제
  9. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 인-루프(in-loop) 필터링 이전의 재구성된 크로마 샘플이며, 상기 향상된 크로마 샘플은 상기 인-루프 필터링이 적용되기 이전에 상기 대응하는 크로마 샘플을 대체하기 위해 사용되는 것인, 비디오 코딩 방법.
  10. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 상기 비디오 블록에서 하나 이상의 샘플을 예측하기 위해 사용되는 기준 크로마 샘플인 것인, 비디오 코딩 방법.
  11. 비디오 코딩 디바이스에 있어서,
    프로세서를 포함하고, 상기 프로세서는:
    현재 픽처와 연관된 교차 평면 필터의 표시를 획득하고 - 상기 현재 픽처는 비디오 블록을 포함함 - ;
    상기 비디오 블록을 예측하기 위해 사용되는 복수의 기준 샘플들을 획득하고;
    상기 복수의 기준 샘플들 중 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 루마 샘플 영역을 결정하고 - 상기 루마 샘플 영역은 상기 비디오 블록 내의 예측된 루마 샘플들을 포함함 - ;
    상기 예측된 루마 샘플들의 재구성 전에, 오프셋을 결정하기 위해 상기 루마 샘플 영역 내의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하고 - 상기 교차 평면 필터는 하이 패스 필터를 포함함 - ;
    향상된 크로마 샘플을 결정하기 위해 상기 대응하는 크로마 샘플에 상기 오프셋을 적용하고; 및
    상기 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하도록 구성되는 것인, 비디오 코딩 디바이스.
  12. 제 11 항에 있어서, 상기 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함하고, 상기 프로세서는 또한, 상기 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하기 이전에, 상기 이용 불가능한 루마 샘플을 이웃하는 재구성된 루마 샘플로 대체하도록 구성되는 것인, 비디오 코딩 디바이스.
  13. 제 11 항에 있어서, 상기 프로세서는 또한, 크로마 향상 표시자에 기초하여, 상기 교차 평면 필터를 적용할지 여부를 결정하도록 구성되고,
    상기 크로마 향상 표시자는 블록 레벨에서 획득되는 것인, 비디오 코딩 디바이스.
  14. 제 11 항에 있어서, 상기 루마 샘플 영역은 제 1 루마 샘플 영역이고, 상기 복수의 루마 샘플들은 제 1 의 복수의 루마 샘플들이고, 상기 예측된 루마 샘플들은 제 1 의 예측된 루마 샘플들이고, 상기 오프셋은 제 1 오프셋이고, 상기 대응하는 크로마 샘플은 제 1 의 대응하는 크로마 샘플이며, 상기 향상된 크로마 샘플은 제 1 의 향상된 크로마 샘플이고,
    상기 프로세서는 또한,
    제 2 의 복수의 기준 샘플들 중 제 2 의 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 제 2 루마 샘플 영역을 결정하고 - 상기 제 2 루마 샘플 영역은 상기 비디오 블록 내의 제 2 의 예측된 루마 샘플들을 포함함 - ;
    상기 제 2 의 예측된 루마 샘플들의 재구성 전에, 제 2 오프셋을 결정하기 위해 상기 제 2 루마 샘플 영역 내의 제 2 의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하고;
    제 2 의 향상된 크로마 샘플을 결정하기 위해 상기 제 2 의 대응하는 크로마 샘플에 상기 제 2 오프셋을 적용하고; 및
    상기 제 2 의 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하도록 구성되는 것인, 비디오 코딩 디바이스.
  15. 제 11 항에 있어서, 상기 프로세서는 또한,
    선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 적용할 상기 교차 평면 필터를 결정하고,
    상기 선택된 인트라 예측 모드 또는 상기 선택된 인터 예측 모드 중 적어도 하나에 기초하여 상기 루마 샘플 영역을 결정하도록 구성되는 것인, 비디오 코딩 디바이스.
  16. 제 1 항에 있어서,
    상기 예측된 루마 샘플들은 상기 루마 샘플 영역 내의 패딩된(padded) 루마 샘플들을 포함하는 것인, 비디오 코딩 방법.
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
KR1020187002181A 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩 Active KR102291835B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020217025704A KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562190008P 2015-07-08 2015-07-08
US62/190,008 2015-07-08
PCT/US2016/041445 WO2017007989A1 (en) 2015-07-08 2016-07-08 Enhanced chroma coding using cross plane filtering

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020217025704A Division KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Publications (2)

Publication Number Publication Date
KR20180039052A KR20180039052A (ko) 2018-04-17
KR102291835B1 true KR102291835B1 (ko) 2021-08-23

Family

ID=56555775

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020227037335A Active KR102570911B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020237028450A Active KR102741824B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020187002181A Active KR102291835B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020217025704A Active KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020227037335A Active KR102570911B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020237028450A Active KR102741824B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020217025704A Active KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Country Status (7)

Country Link
US (2) US11438605B2 (ko)
EP (2) EP3320684B1 (ko)
JP (4) JP2018527784A (ko)
KR (4) KR102570911B1 (ko)
CN (2) CN107836116B (ko)
TW (1) TWI715598B (ko)
WO (1) WO2017007989A1 (ko)

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
KR20190052128A (ko) * 2016-10-04 2019-05-15 김기백 영상 데이터 부호화/복호화 방법 및 장치
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
WO2019059107A1 (ja) * 2017-09-20 2019-03-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
US20210067802A1 (en) * 2017-09-26 2021-03-04 Samsung Electronics Co., Ltd. Video decoding method and device using cross-component prediction, and video encoding method and device using cross-component prediction
CN118413668A (zh) 2017-11-28 2024-07-30 Lx 半导体科技有限公司 图像编码/解码方法、图像数据的传输方法和存储介质
CN115695788A (zh) 2018-01-15 2023-02-03 三星电子株式会社 编码方法及其设备以及解码方法及其设备
KR20200112945A (ko) 2018-01-29 2020-10-05 인터디지털 브이씨 홀딩스 인코포레이티드 재구성된 픽처의 정제를 갖는 인코딩 및 디코딩
CN112690000B (zh) 2018-09-21 2022-02-18 华为技术有限公司 用于进行反量化的装置和方法
WO2020057506A1 (zh) * 2018-09-21 2020-03-26 华为技术有限公司 色度块预测方法及装置
KR20250079248A (ko) * 2018-10-05 2025-06-04 후아웨이 테크놀러지 컴퍼니 리미티드 인트라 예측 방법 및 디바이스
EP3861739A4 (en) 2018-11-06 2022-04-06 Beijing Bytedance Network Technology Co., Ltd. Simplified parameter derivation for intra prediction
CN113170122B (zh) 2018-12-01 2023-06-27 北京字节跳动网络技术有限公司 帧内预测的参数推导
MX2021006562A (es) * 2018-12-07 2021-08-16 Fraunhofer Ges Forschung Codificador, decodificador y métodos para mejorar una robustez para el cálculo de los parámetros de modelo lineal de componentes cruzados.
MX2021006254A (es) 2018-12-07 2021-07-06 Beijing Bytedance Network Tech Co Ltd Intraprediccion basada en contexto.
CN113068026B (zh) * 2018-12-25 2023-05-05 Oppo广东移动通信有限公司 编码预测方法、装置及计算机存储介质
EP3922025B1 (en) 2019-02-07 2023-05-24 Vid Scale, Inc. Systems, apparatus and methods for inter prediction refinement with optical flow
CN113439437B (zh) 2019-02-22 2023-11-24 北京字节跳动网络技术有限公司 用于帧内预测的邻近样点选择
MX392417B (es) 2019-02-24 2025-03-24 Beijing Bytedance Network Tech Co Ltd Derivación de parámetros para intrapredicción.
WO2020192642A1 (en) * 2019-03-24 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Conditions in parameter derivation for intra prediction
WO2020192717A1 (en) * 2019-03-26 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for inter prediction
WO2020210531A1 (en) * 2019-04-09 2020-10-15 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatuses for signaling of merge modes in video coding
JP7299342B2 (ja) 2019-04-12 2023-06-27 北京字節跳動網絡技術有限公司 ビデオ処理方法、装置、記憶媒体、及び記憶方法
CN113748676B (zh) 2019-04-16 2024-05-10 北京字节跳动网络技术有限公司 帧内编解码模式下的矩阵推导
KR102736164B1 (ko) 2019-05-01 2024-12-03 두인 비전 컴퍼니 리미티드 필터링을 이용한 행렬 기반 인트라 예측
CN117097912A (zh) 2019-05-01 2023-11-21 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的上下文编码
WO2020233663A1 (en) 2019-05-22 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Matrix-based intra prediction using upsampling
KR102744572B1 (ko) 2019-05-31 2024-12-20 두인 비전 컴퍼니 리미티드 행렬 기반 인트라 예측에서의 제한된 업샘플링 프로세스
EP3963885A4 (en) 2019-06-05 2022-12-14 Beijing Bytedance Network Technology Co., Ltd. Context determination for matrix-based intra prediction
US12160582B2 (en) * 2019-06-21 2024-12-03 Interdigital Vc Holdings, Inc. Precision refinement for motion compensation with optical flow
CN114097232A (zh) * 2019-06-25 2022-02-25 交互数字Vc控股法国有限公司 用于译码/解码图片数据的方法和装置
CN120186347A (zh) 2019-08-08 2025-06-20 松下电器（美国）知识产权公司 用于视频编码的系统和方法
WO2021025168A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
CN119996683A (zh) 2019-08-08 2025-05-13 松下电器（美国）知识产权公司 用于视频编码的系统和方法
WO2021025167A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
US11197030B2 (en) 2019-08-08 2021-12-07 Panasonic Intellectual Property Corporation Of America System and method for video coding
GB2586484B (en) * 2019-08-20 2023-03-08 Canon Kk A filter
CN119520777A (zh) * 2019-08-28 2025-02-25 株式会社Kt 对视频解码或编码的方法及用于传输压缩的视频数据的装置
ES2994118T3 (en) * 2019-08-29 2025-01-17 Lg Electronics Inc Apparatus and method for coding image
WO2021045130A1 (en) 2019-09-03 2021-03-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
WO2021049593A1 (en) 2019-09-11 2021-03-18 Panasonic Intellectual Property Corporation Of America System and method for video coding
EP4018671A4 (en) 2019-09-19 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. Deriving reference sample positions in video coding
EP4014502A4 (en) 2019-09-20 2022-11-09 Beijing Bytedance Network Technology Co., Ltd. SCALING METHOD FOR ENCODER BLOCK
WO2021061814A1 (en) * 2019-09-23 2021-04-01 Vid Scale, Inc. Joint component video frame filtering
JP7404526B2 (ja) 2019-10-28 2023-12-25 北京字節跳動網絡技術有限公司 カラーコンポーネントに基づくシンタックスシグナリング及び構文解析
WO2021083257A1 (en) 2019-10-29 2021-05-06 Beijing Bytedance Network Technology Co., Ltd. Cross-component adaptive loop filter
KR20220113379A (ko) 2019-12-27 2022-08-12 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 픽처 헤더의 슬라이스 유형의 시그널링
CN113132739B (zh) * 2019-12-31 2022-11-01 杭州海康威视数字技术股份有限公司 边界强度确定、编解码方法、装置及其设备
US11303936B2 (en) * 2020-02-21 2022-04-12 Tencent America LLC Method and apparatus for filtering
US11575909B2 (en) * 2020-04-07 2023-02-07 Tencent America LLC Method and apparatus for video coding
US11800124B2 (en) * 2020-07-28 2023-10-24 Beijing Dajia Internet Information Technology Co., Ltd. Chroma coding enhancement in cross-component sample adaptive offset
WO2022035687A1 (en) 2020-08-13 2022-02-17 Beijing Dajia Internet Information Technology Co., Ltd. Chroma coding enhancement in cross-component sample adaptive offset
CN118318438A (zh) * 2021-11-25 2024-07-09 北京达佳互联信息技术有限公司 跨分量样本自适应偏移
US12052422B2 (en) * 2022-01-31 2024-07-30 Tencent America LLC Cross-component planar prediction in image and video compression
CN120226347A (zh) * 2022-11-21 2025-06-27 现代自动车株式会社 利用基于重构的参考样本的交叉分量预测的视频编解码的方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130114696A1 (en) * 2011-11-07 2013-05-09 Futurewei Technologies, Co. Angular Table for Improving Intra Prediction
US20140092999A1 (en) * 2012-09-28 2014-04-03 Vid Scale, Inc. Cross-plane filtering for chroma signal enhancement in video coding
US20140185680A1 (en) * 2012-12-28 2014-07-03 Qualcomm Incorporated Device and method for scalable and multiview/3d coding of video information

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4701783A (en) 1982-09-14 1987-10-20 New York Institute Of Technology Technique for encoding and decoding video with improved separation of chrominance and luminance
US5450216A (en) * 1994-08-12 1995-09-12 International Business Machines Corporation Color image gamut-mapping system with chroma enhancement at human-insensitive spatial frequencies
US6462790B1 (en) * 1999-03-12 2002-10-08 Fortel Dtv, Inc. Digital comb filter for decoding composite video signals
US7102669B2 (en) 2002-04-02 2006-09-05 Freescale Semiconductor, Inc. Digital color image pre-processing
US7333544B2 (en) 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7822286B2 (en) * 2003-11-07 2010-10-26 Mitsubishi Electric Research Laboratories, Inc. Filtering artifacts in images with 3D spatio-temporal fuzzy filters
US7397515B2 (en) 2004-01-30 2008-07-08 Broadcom Corporation Method and system for cross-chrominance removal using motion detection
US7724949B2 (en) * 2004-06-10 2010-05-25 Qualcomm Incorporated Advanced chroma enhancement
US20090022220A1 (en) 2005-04-13 2009-01-22 Universitaet Hannover Method and apparatus for enhanced video coding
TWI314720B (en) 2005-05-31 2009-09-11 Himax Tech Inc 2d yc separation device and yc separation system
CN101009842B (zh) 2006-01-11 2012-02-01 华为技术有限公司 可分级视频压缩中插值的方法与装置
KR101266168B1 (ko) 2006-08-16 2013-05-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
KR20120079180A (ko) * 2008-07-04 2012-07-11 가부시끼가이샤 도시바 동화상 복호화 방법 및 장치
US8270466B2 (en) 2008-10-03 2012-09-18 Sony Corporation Adaptive decimation filter
CN101778371B (zh) 2009-01-09 2012-08-29 电信科学技术研究院 寻呼方法及装置
JPWO2011033643A1 (ja) 2009-09-17 2013-02-07 株式会社東芝 動画像符号化方法及び動画像復号化方法
US8638342B2 (en) * 2009-10-20 2014-01-28 Apple Inc. System and method for demosaicing image data using weighted gradients
US8514491B2 (en) * 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US20120243611A1 (en) * 2009-12-22 2012-09-27 Sony Corporation Image processing apparatus and method as well as program
KR101682147B1 (ko) * 2010-04-05 2016-12-05 삼성전자주식회사 변환 및 역변환에 기초한 보간 방법 및 장치
KR102759392B1 (ko) * 2010-04-13 2025-01-24 지이 비디오 컴프레션, 엘엘씨 평면 간 예측
CN201726499U (zh) 2010-05-04 2011-01-26 武汉光华芯科技有限公司 复合视频信号亮色分离系统
CN106060546A (zh) * 2010-06-17 2016-10-26 夏普株式会社 解码装置及编码装置
CN101902653B (zh) 2010-06-25 2013-04-24 杭州爱威芯科技有限公司 一种基于亮度样本的方向预测的场内yc分离方法
US20120008687A1 (en) 2010-07-06 2012-01-12 Apple Inc. Video coding using vector quantized deblocking filters
KR101663762B1 (ko) * 2010-07-20 2016-10-07 에스케이 텔레콤주식회사 다중 예측 필터를 이용하는 경쟁기반 인트라 예측 부호화/복호화 장치 및 방법
US9008175B2 (en) * 2010-10-01 2015-04-14 Qualcomm Incorporated Intra smoothing filter for video coding
US10142630B2 (en) * 2010-12-10 2018-11-27 Texas Instruments Incorporated Mode adaptive intra prediction smoothing in video coding
KR20120090740A (ko) * 2011-02-07 2012-08-17 (주)휴맥스 정밀한 단위의 필터 선택을 적용한 영상 부호화/복호화 장치 및 방법
JP6004375B2 (ja) 2011-06-03 2016-10-05 サン パテント トラスト 画像符号化方法および画像復号化方法
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
SG10201408720TA (en) 2011-06-28 2015-01-29 Samsung Electronics Co Ltd Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9641866B2 (en) 2011-08-18 2017-05-02 Qualcomm Incorporated Applying partition-based filters
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
CN104054343B (zh) * 2012-01-13 2019-01-18 夏普株式会社 图像解码装置、图像编码装置
WO2013155662A1 (en) 2012-04-16 2013-10-24 Mediatek Singapore Pte. Ltd. Methods and apparatuses of simplification for intra chroma lm mode
US20150036744A1 (en) 2012-05-02 2015-02-05 Sony Corporation Image processing apparatus and image processing method
US9420280B2 (en) * 2012-06-08 2016-08-16 Qualcomm Incorporated Adaptive upsampling filters
US20140086316A1 (en) 2012-09-24 2014-03-27 Louis Joseph Kerofsky Video compression with color space scalability
JP6636802B2 (ja) * 2012-10-01 2020-01-29 ジーイー ビデオ コンプレッション エルエルシー エンハンスメント層予測に中間層の予測寄与を使用するスケーラブルビデオ符号化
US20140192862A1 (en) * 2013-01-07 2014-07-10 Research In Motion Limited Methods and systems for prediction filtering in video coding
US20140198846A1 (en) * 2013-01-16 2014-07-17 Qualcomm Incorporated Device and method for scalable coding of video information
WO2014115283A1 (ja) * 2013-01-24 2014-07-31 シャープ株式会社 画像復号装置、および画像符号化装置
KR101835316B1 (ko) * 2013-04-02 2018-03-08 주식회사 칩스앤미디어 동영상 처리 방법 및 장치
US9503732B2 (en) 2013-04-10 2016-11-22 Arris Enterprises, Inc. Re-sampling with phase offset adjustment for luma and chroma to select filters in scalable video coding
US8810727B1 (en) * 2013-05-07 2014-08-19 Qualcomm Technologies, Inc. Method for scaling channel of an image
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
WO2015003753A1 (en) 2013-07-12 2015-01-15 Nokia Solutions And Networks Oy Redirection of m2m devices
WO2015057947A1 (en) * 2013-10-17 2015-04-23 Huawei Technologies Co., Ltd. Improved reference pixel selection and filtering for intra coding of depth map
RU2633526C1 (ru) 2013-11-01 2017-10-13 Хуавэй Текнолоджиз Ко., Лтд. Способ выбора сети и основное сетевое устройство
JP6750234B2 (ja) 2016-01-28 2020-09-02 横浜ゴム株式会社 タイヤ運用サービスシステムおよび方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130114696A1 (en) * 2011-11-07 2013-05-09 Futurewei Technologies, Co. Angular Table for Improving Intra Prediction
US20140092999A1 (en) * 2012-09-28 2014-04-03 Vid Scale, Inc. Cross-plane filtering for chroma signal enhancement in video coding
US20140185680A1 (en) * 2012-12-28 2014-07-03 Qualcomm Incorporated Device and method for scalable and multiview/3d coding of video information

Also Published As

Publication number Publication date
US11438605B2 (en) 2022-09-06
EP3320684A1 (en) 2018-05-16
KR102460912B1 (ko) 2022-10-28
JP2023030205A (ja) 2023-03-07
TW201724854A (zh) 2017-07-01
JP7208288B2 (ja) 2023-01-18
EP4404572A2 (en) 2024-07-24
US20220329831A1 (en) 2022-10-13
KR20180039052A (ko) 2018-04-17
TWI715598B (zh) 2021-01-11
JP7485798B2 (ja) 2024-05-16
CN107836116A (zh) 2018-03-23
JP2024102228A (ja) 2024-07-30
KR20210104929A (ko) 2021-08-25
KR20220146717A (ko) 2022-11-01
JP2021103889A (ja) 2021-07-15
JP2018527784A (ja) 2018-09-20
EP3320684B1 (en) 2024-09-04
WO2017007989A1 (en) 2017-01-12
KR102570911B1 (ko) 2023-08-24
KR20230128138A (ko) 2023-09-01
KR102741824B1 (ko) 2024-12-11
EP4404572A3 (en) 2024-10-16
CN113810691A (zh) 2021-12-17
US20180220138A1 (en) 2018-08-02
CN107836116B (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
JP7485798B2 (ja) クロスプレーンフィルタリングを使用する強化されたクロマコーディング
JP7634587B2 (ja) スクリーンコンテンツ符号化のためのイントラブロックコピーモード
CN114666582B (zh) 用于利用光流的帧间预测细化的系统、装置和方法
US10484686B2 (en) Palette coding modes and palette flipping
EP3251350B1 (en) Intra-block copy searching
US20150103898A1 (en) Weighted prediction parameter signaling for video coding

Legal Events

Date Code Title Description
PA0105 International application

Patent event date: 20180123

Patent event code: PA01051R01D

Comment text: International Patent Application

PG1501 Laying open of application
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20181207

Comment text: Request for Examination of Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20201203

Patent event code: PE09021S01D

N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20210216

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20210525

PA0104 Divisional application for international application

Comment text: Divisional Application for International Patent

Patent event code: PA01041R01D

Patent event date: 20210812

PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20210813

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20210817

End annual number: 3

Start annual number: 1

PG1601 Publication of registration