[go: up one dir, main page]

KR102292592B1 - 영상 복호화 방법 및 장치 - Google Patents

영상 복호화 방법 및 장치 Download PDF

Info

Publication number
KR102292592B1
KR102292592B1 KR1020190004900A KR20190004900A KR102292592B1 KR 102292592 B1 KR102292592 B1 KR 102292592B1 KR 1020190004900 A KR1020190004900 A KR 1020190004900A KR 20190004900 A KR20190004900 A KR 20190004900A KR 102292592 B1 KR102292592 B1 KR 102292592B1
Authority
KR
South Korea
Prior art keywords
intra prediction
mode
prediction mode
block
current block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020190004900A
Other languages
English (en)
Other versions
KR20190016988A (ko
Inventor
박신지
Original Assignee
유한회사 제이에이치스트림
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유한회사 제이에이치스트림 filed Critical 유한회사 제이에이치스트림
Publication of KR20190016988A publication Critical patent/KR20190016988A/ko
Application granted granted Critical
Publication of KR102292592B1 publication Critical patent/KR102292592B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명에 따른 영상 복호화 방법은 현재 블록의 인트라 예측모드 그룹 지시자 및 예측모드 인덱스를 복원하고, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹(MPM 그룹)을 구성하고, 상기 인트라 예측모드 그룹지시자가 제1 그룹을 나타내면, 상기 제1 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하고, 상기 인트라 예측모드 그룹지시자가 제2 그룹을 나타내면, 상기 제2 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하여, 예측블록을 생성하고, 상기 예측블록의 크기는 변환 크기 정보에 따라 결정되는 것을 특징으로 한다.
따라서, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드에 따라 현재 블록의 인트라 예측 모드와 동일할 가능성이 높은 모드들을 제1 그룹에 포함시키고, 상기 제1 그룹을 이용하여 현재 블록의 부호화할 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정함으로써, 부호화할 인트라 예측 모드의 정보량을 줄일 수 있다. 또한, 상기 현재 블록과 유사한 예측 블록을 생성함으로써, 부호화/복호화할 잔차 블록의 비트수를 줄임으로써, 부호화 및 복호화 효율을 높일 수 있다.

Description

영상 복호화 방법 및 장치 {METHOD AND APPARATUS FOR DECODING IMAGE}
본 발명은 영상 복호화 부호화 방법 및 장치에 관한 것으로, 보다 상세하게는 예측 블록의 크기 정보에 따라 현재 블록 또는 현재 블록의 서브블록의 인트라 예측 블록을 생성하여 복원 블록을 생성하는 방법 및 장치에 관한 것이다.
영상 데이터를 효율적으로 저장하거나 전송하기 위해서는 영상 데이터를 부호화하여야 한다. 영상 데이터를 부호화하는 기술로는 MPEG-1, MPEG-2, MPEG-4, H.264/MPEG-4 AVC(Advanced Video coding) 등이 있다. 상기 기술들은 하나의 픽처를 매크로 블록으로 나누고, 상기 매크로 블록 단위로 인트라 부호화를 수행할지 인터 부호화를 수행할지를 결정한 후, 상기 결정된 방식으로 각각의 매크로 블록을 부호화한다.
가장 최근의 영상 압축 기술인 H.264에서는 인트라 부호화의 효율을 높이기 위해 인트라 예측을 수행한다. 즉, 현재 블록을 부호화하기 위해서 참조 픽처를 참조하는 것이 아니라, 부호화하려는 현재 블록과 공간적으로 인접한 화소값을 이용하여 예측 블록을 생성한다. 구체적으로, 인접한 화소값을 이용하여 원본 매크로 블록과 비교하여 왜곡이 적은 인트라 예측 모드를 선택하고, 선택된 인트라 예측 모드 및 인접한 화소값을 이용하여 부호화하려는 현재 블록에 대한 예측 블록을 생성한다. 그리고, 현재 블록과 예측 블록의 차이신호들로 구성되는 잔차블록을 생성하고, 상기 잔차 블록을 변환, 양자화, 엔트로피 부호화한다. 또한, 상기 예측 블록을 생성하는데 이용된 인트라 예측 모드도 부호화한다.
그러나, H.264에서는 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드들의 방향성과 무관하게 현재 블록의 인트라 예측 모드를 부호화하여 부호화 효율이 떨어지는 문제점이 있다. 또한, 잔차블록의 부호화 효율을 증가시키기 위해 인트라 예측 모드의 수가 증가하는 경우에는 H.264의 인트라 예측 모드 부호화 방식보다 더욱 부호화 효율이 높은 인트라 예측 모드를 부호화/복호화하는 방식이 요구된다.
또한, H.264에서는 현재 블록의 인트라 예측 모드를 이용하여 동일한 크기의 복원블록만을 생성하였다. 따라서, 현재 블록의 크기가 커질 경우 예측 블록과 원본 블록의 잔차신호가 커지게 되어 부호화 효율이 떨어지는 문제가 있다. 따라서, 원본 블록과 유사한 예측 블록을 생성하는 새로운 인트라 예측 부호화/복호화 방식이 요구된다.
본 발명이 이루고자 하는 목적은 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드를 이용하여 현재 블록의 인트라 예측 모드를 부호화하는데 소요되는 비트수를 줄임으로서, 영상의 압축효율을 향상시키는 방법 및 장치를 제공하는 것이다.
본 발명이 이루고자 하는 다른 목적은 현재 블록의 인트라 예측 모드를 이용하여 현재 블록과 보다 유사한 예측 블록을 생성하여, 잔차 블록을 부호화하는데 소요되는 비트수를 줄임으로서, 영상의 압축 효율을 향상시키는 방법 및 장치를 제공하는 것이다.
상기 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 영상 복호화 방법은 현재 블록의 인트라 예측모드 그룹 지시자 및 예측모드 인덱스를 복원하고, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹(MPM 그룹)을 구성하고, 상기 인트라 예측모드 그룹지시자가 제1 그룹을 나타내면, 상기 제1 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하고, 상기 인트라 예측모드 그룹지시자가 제2 그룹을 나타내면, 상기 제2 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하여, 예측블록을 생성하고, 상기 예측블록의 크기는 변환 크기 정보에 따라 결정되는 것을 특징으로 한다.
상기 영상 복호화 방법은 상기 제1 그룹은 3개의 인트라 예측 모드로 구성되고, 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드 중 하나만이 유효한 경우, 2개의 인트라 예측 모드가 상기 제1 그룹에 추가되고, 상기 추가되는 2개의 인트라 예측모드는 상기 유효한 인트라 예측 모드에 따라 결정되는 것을 특징으로 한다.
본 발명에 따른 영상 복호화 방법은 현재 블록의 인트라 예측모드 그룹 지시자 및 예측모드 인덱스를 복원하고, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹(MPM 그룹)을 구성하고, 상기 인트라 예측모드 그룹지시자가 제1 그룹을 나타내면, 상기 제1 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하고, 상기 인트라 예측모드 그룹지시자가 제2 그룹을 나타내면, 상기 제2 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하여, 예측블록을 생성하고, 상기 예측블록의 크기는 변환 크기 정보에 따라 결정되는 것을 특징으로 한다.
따라서, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드에 따라 현재 블록의 인트라 예측 모드와 동일할 가능성이 높은 모드들을 제1 그룹에 포함시키고, 상기 제1 그룹을 이용하여 현재 블록의 부호화할 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정함으로써, 부호화할 인트라 예측 모드의 정보량을 줄일 수 있다. 또한, 상기 현재 블록과 유사한 예측 블록을 생성함으로써, 부호화/복호화할 잔차 블록의 비트수를 줄임으로써, 부호화 및 복호화 효율을 높일 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치를 나타내는 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 동영상 복호화 장치를 나타내는 블록 구성도이다.
도 3은 본 발명의 일 실시예에 따른 동영상 복호화 장치에서의 인트라 예측 블록을 생성하는 방법에 대해 설명한다.
도 4는 본 발명에 일 실시예에 따른 인트라 예측 모드를 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른 인트라 예측 블록 장치(300)를 나타내는 블록 구성도이다.
도 6은 본 발명의 일 실시예에 따른 복원블록 생성 과정을 나타낸다.
도 7은 본 발명의 다른 실시예에 따른 복원블록 생성 과정을 나타낸다.
이하, 본 발명의 여러가지 실시예들을 예시적인 도면을 통해 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
본 발명에 따른 동영상 부호화 장치 및 동영상 복호화 장치는 개인용 컴퓨터, 노트북, 개인용 휴대 단말기, 휴대형 멀티미디어 플레이, 스마트폰, 무선 통신 단말기, TV 등의 사용자 단말기 또는 서비스를 제공하는 서버 등일 수 있다. 또한, 상기 동영상 부호화 장치 및 동영상 복호화 장치는 각종 기기 또는 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 부호화하거나 복호화하거나 부호화 또는 복호화를 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 장치일 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치를 나타내는 블록 구성도이다.
본 발명에 일 실시예에 따른 동영상 부호화 장치(100)는 인트라 예측부(110), 인터 예측부(120), 변환 및 양자화부(130), 엔트로피 부호화부(140), 역양자화 및 역변환부(150), 후처리부(160), 픽쳐 버퍼(170), 감산부(190) 및 가산부(195)를 포함한다.
인트라 예측부(110)는 현재 블록이 포함되는 픽쳐 또는 슬라이스의 복원된 화소들을 이용하여 인트라 예측 블록을 생성한다. 인트라 예측부(110)는 예측 부호화할 현재 블록의 크기에 따라 미리 설정된 개수의 인트라 예측 모드 중에 하나를 선택하고, 상기 선택된 인트라 예측 모드에 따라 예측 블록을 생성한다.
인터 예측부(120)는 상기 픽쳐 버퍼(170)에 저장된 참조 픽쳐들을 이용하여 움직임 추정을 수행하고, 움직임 예측을 위하여 참조 픽쳐 인덱스 및 움직임 벡터를 결정한다. 그리고, 상기 참조 픽쳐 인덱스 및 움직임 벡터를 이용하여 현재 블록의 인터 예측 블록을 생성한다.
변환 및 양자화부(130)는 현재 블록과 인트라 예측부(110) 또는 인터 예측부(120)에서 생성된 예측 블록의 잔차 블록을 변환하고 양자화한다. 상기 변환은 수평 및 수직 방향의 1차원 변환 매트릭스에 의해 행해진다. 인트라 예측의 잔차 블록은 변환 블록의 크기(즉, 잔차 블록의 크기) 및 인트라 예측 모드에 따라 결정되는 변환 매트릭스에 의해 변환된다. 인터 예측의 잔차 블록은 미리 정해진 변환 매트릭스에 의해 변환된다.
변환 및 양자화부(130)는 상기 변환 블록을 양자화 스텝 사이즈를 이용하여 양자화한다. 상기 양자화 스텝 사이즈는 미리 정해진 크기 이상의 부호화 단위별로 변경될 수 있다.
상기 양자화된 변환 블록은 역양자화 및 역변환부(150)와 엔트로피 부호화부(140)로 제공된다.
역양자화 및 역변환부(150)는 상기 양자화된 변환 블록을 역양자화하고, 상기 역양화된 변환 블록을 역변환하여 잔차 블록을 복원한다. 가산기는 상기 역양자화 및 역변환부(150)에 의해 복원된 잔차 블록과 인트라 예측부(110) 또는 인터 예측부(120)로부터의 예측 블록을 더하여 복원 블록을 생성한다.
후처리부(160)는 복원된 픽쳐의 화질을 개선하기 위한 것으로, 디블로킹 필터링부(161), 오프셋 적용부(162) 및 루프 필터링부(163)을 포함한다.
디블록킹 필터링부(161)는 예측 블록 및 변환 변환 블록의 경계에 디블록킹 필터를 적응적으로 적용한다. 상기 경계는 8x8 그리드에 놓여 있는 경계로 한정할 수 있다. 디블록킹 필터링부(161)는 필터링할 경계(boundary)를 결정하고, 상기 경계 강도(bounary strength)를 결정하고, 상기 경계 강도가 0보다 큰 경우에는 디블록킹 필터를 상기 경계에 적용할지 여부를 판단한다. 상기 경계를 필터링할 것으로 결정하면, 상기 경계에 적용할 필터를 선택하고, 선택된 필터로 경계를 필터링한다.
오프셋 적용부(162)는 디블록킹 필터링부를 거친 영상내의 화소와 원본 화소간의 차이값(distortion)을 감소시키기 위하여, 픽쳐 또는 슬라이스 단위로 오프셋을 적용할지 여부를 결정한다. 또는 슬라이스를 복수개의 오프셋 영역들로 분할하고, 각 오프셋 영역별로 오프셋 타입을 결정할 수 있다. 오프셋 타입은 미리 정해진 개수의 에지 오프셋 타입과 밴드 오프셋 타입을 포함할 수 있다. 오프셋 타입이 에지 오프셋 타입일 경우에는 각 화소가 속하는 에지 타입을 결정하여, 이에 대응하는 오프셋을 적용한다. 상기 에지 타입은 현재 화소와 인접하는 2개의 화소값의 분포를 기준으로 결정한다.
루프 필터링부(163)는 오프셋 적용부(162)를 거친 복원된 영상과 원본 영상을 비교한 값을 기초로 복원 영상을 적응적으로 루프 필터링한다. 코딩 단위로 복원 영상을 루프 필터링할지 여부가 결정된다. 각 코딩 유닛에 따라 적용될 루프 필터의 크기 및 계수는 달라질 수 있다. 코딩 유닛별 상기 적응적 루프 필터의 적용 여부를 나타내는 정보는 각 슬라이스 헤더에 포함될 수 있다. 색차 신호의 경우에는, 픽쳐 단위로 적응적 루프 필터의 적용 여부를 결정할 수 있다. 따라서, 색차 성분 각각이 필터링되는지 여부를 나타내는 정보를 슬라이스 헤더 또는 픽쳐 헤더가 포함할 수 있다.
픽쳐 버퍼(170)는 후처리된 영상 데이터를 후처리부(160)로부터 입력 받아 픽쳐(picture) 단위로 영상을 복원하여 저장한다. 픽쳐는 프레임 단위의 영상이거나 필드 단위의 영상일 수 있다.
엔트로피 부호화부(140)는 변환 및 양자화부(130)에 의해 양자화된 양자화 계수정보, 인트라 예측부(140)로부터 수신된 인트라 예측 정보, 인터 예측부(150)로부터 수신된 움직임 정보 등를 엔트로피 부호화한다. 엔트로피 부호화부(140)는 상기 양자화된 변환 블록의 계수들을 1차원의 양자화 계수정보들로 변환하기 위해, 스캔부(145)를 포함한다.
스캔부(145)는 상기 양자화된 변환 블록의 계수들을 1차원으로 변환하기 위한 스캔 타입을 결정한다. 스캔 타입은 방향성 인트라 예측 모드 및 변환 블록의 크기에 따라 달라질 수 있다. 양자화 계수들의 스캔순서는 역방향으로 스캔한다.
상기 양자화된 변호나 블록이 소정 크기보다 큰 경우에는, 상기 변환 계수들이 복수개의 하위블록으로 분할되어 스캔된다. 각각의 하위블록의 상기 변환 계수들에 적용되는 스캔타입은 동일하다. 상기 하위 블록들 사이에 적용되는 스캔 타입은 지그재그 스캔일 수도 있고, 상기 각 하위블록의 변환계수들에 적용되는 스캔 타입과 동일할 수도 있다.
도2는 본 발명의 일 실시예에 따른 동영상 복호화 장치(200)를 나타내는 블록 구성도이다.
본 발명의 일실시예에 따른 동영상 복호화 장치(200)는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트라 예측부(240), 인터 예측부(250), 후처리부(260), 픽쳐 버퍼(270), 가산부(280)를 포함한다.
엔트로피 복호화부(210)는 수신된 비트스트림을 복호하여, 인트라 예측 정보, 인터 예측 정보, 양자화 계수 정보 등으로 분리한다. 엔트로피 복호화부(210)는 복호화된 인트라 예측정보를 인트라 예측부(240)로 공급하고, 복호화된 인터 예측 정보를 인터 예측부(250)에 공급한다. 엔트로피 복호화(210)는 상기 복호화된 양자화 계수 정보를 역스캔하기 위한 역스캔부(215)를 포함한다.
역스캔부(215)는 상기 양자화 계수 정보를 2차원 배열의 양자화 블록으로 변환한다. 상기 변환을 위해 복수개의 스캔 타입 중에 하나를 선택한다. 스캔 타입은 방향성 인트라 예측 모드 및 변환 블록의 크기에 따라 달라질 수 있다. 양자화 계수들의 스캔순서는 역방향으로 스캔한다. 상기 양자화된 변호나 블록이 소정 크기보다 큰 경우에는, 상기 변환 계수들이 복수개의 하위블록으로 분할되어 스캔된다. 각각의 하위블록의 상기 변환 계수들에 적용되는 스캔타입은 동일하다. 상기 하위 블록들 사이에 적용되는 스캔 타입은 지그재그 스캔일 수도 있고, 상기 각 하위블록의 변환계수들에 적용되는 스캔 타입과 동일할 수도 있다.
역양자화부(220)는 현재 코딩 유닛의 양자화 스텝 사이즈 예측자를 결정하고, 상기 결정된 양자화 스텝 사이즈 예측자와 수신된 잔차 양자화 스텝 사이즈를 더하여 현재 코딩 유닛의 양자화 스텝 사이즈를 복원한다. 역양자화부(220)는 상기 양자화 스텝 사이즈와 역양자화 매트릭스를 이용하여 상기 양자화 블록을 역양자화한다. 상기 양자화 블록의 크기 및 예측모드에 따라 상기 양자화 매트릭스가 결정된다. 즉, 동일 크기의 양자화 블록에 대해서도 상기 현재 블록의 예측 모드 및 인트라 예측 모드 중 적어도 하나에 기초하여 양자화 매트릭스가 선택된다.
역변환부(230)는 역양자화된 변환 블록을 역변환하여 잔차 블록을 복원한다. 상기 역양자화 블록에 적용할 역변환 매트릭스는 예측 모드 및 인트라 예측 모드에 따라 결정될 수 있다.
가산부(280)는 역변환부(230)에 의해 복원된 잔차 블록과 인트라 예측부(240) 또는 인터 예측부(250)에 의해 생성되는 예측 블록을 더하여 복원 블록을 생성한다.
인트라 예측부(240)는 엔트로피 복호화부(210)로부터 수신된 인트라 예측 정보에 기초하여 현재 블록의 인트라 예측 모드를 복원한다. 그리고, 복원된 인트라 예측 모드에 따라 예측 블록을 생성한다.
인터 예측부(250)는 엔트로피 복호화부(210)로부터 수신된 인터 예측 정보에 기초하여 참조 픽쳐 인덱스와 움직임 벡터를 복원한다. 그리고, 상기 참조 픽쳐 인덱스와 움직임 벡터를 이용하여 현재 블록에 대한 예측 블록을 생성한다. 소수 정밀도의 움직임 보상이 적용될 경우에는 선택된 보간 필터를 적용하여 예측 블록을 생성한다.
후처리부(260)의 동작은 도 1의 후처리부(160)의 동작과 동일하므로 생략한다.
픽쳐 버퍼(270)는 후처리부(260)에 의해 후처리된 복호 영상을 픽쳐 단위로 저장한다.
도 3은 본 발명의 일 실시예에 따른 인트라 예측 블록을 생성하는 방법에 대해 설명한다.
먼저, 수신된 비트스트림으로부터 인트라 예측 정보를 엔트로피 복호화한다(S110).
인트라 예측 정보는 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 포함한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타낸다. 예측모드 인덱스는 인트라 예측 모드 그룹 지시자가 나타내는 인트라 예측 모드 그룹 내에서의 특정 인트라 예측 모드를 나타내는 정보이다.
상기 인트라 예측 모드 그룹 지시자는 unsigned integer의 형태로 수신될 수 있다. 이 경우, 상기 인트라 예측 모드 그룹 지시자는 엔트로피 복호화되지 않고 사용될 수도 있다. 또는 상기 인트라 예측 모드 그룹 지시자는 현재 슬라이스의 타입에 따라 적응적으로 엔트로피 부호화될 수도 있다. 예를 들어, 상기 슬라이스 타입에 따라 결정되는 컨텍스트를 이용하여 엔트로피 부호화될 수 있다. 따라서, 복원시에도 현재 슬라이스 타입에 따라 결정되는 컨텍스트를 이용하여 복원될 수 있다. 상기 예측 모드 인덱스는 MPM 그룹에 속하는 경우와, 그렇지 않은 경우에 서로 다른 방식으로 엔트로피 부호화된다. 따라서, 엔트로피 복호화시에도 서로 방식으로 엔트로피 복호화된다. 구체적으로, 상기 인트라 예측 모드 그룹 지시자가 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는 것을 나타내면, 상기 예측 모드 인덱스는 truncated Exp-Golomb code 또는 truncated unary 방식으로 이진화되어 엔트로피 부호화된다. 따라서, 엔트로피 복호화를 수행하여 이진화 정보를 얻은 후에, 상기 방식들을 이용하여 예측모드 인덱스를 복원한다. 상기 인트라 예측 모드 그룹 지시자가 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하지 않는 것을 나타내면, 상기 예측 모드 인덱스는 고정길이로 이진화될 수 있다. 따라서, 엔트로피 복호화를 수행하여 이진화 정보를 얻은 후에, 상기 예측모드 인덱스를 복원할 수 있다.
다음으로, 현재 블록에 인접한 블록들의 인트라 예측 모드를 이용하여 MPM 그룹을 생성하고, 상기 MPM 그룹을 이용하여 현재 블록의 인트라 예측모드를 복원한다(S120). MPM 그룹은 3개의 인트라 예측 모드로 구성된다. 도 4를 참조하여 설명한다. 도 4는 본 발명에 일 실시예에 따른 인트라 예측 모드를 나타내는 도면이다.
1) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 서로 다른 경우, 상기 MPM 그룹은 상기 2개의 인트라 예측 모드와 1개의 추가 인트라 예측 모드로 구성된다.
상기 2개의 인트라 예측 모드들 중 하나가 DC 모드이고, 다른 하나가 플래터 모드가 아닌 경우에는 상기 추가 인트라 예측 모드는 플래너 모드일 수 있다. 마찬가지로, 상기 두 개의 인트라 예측 모드 중 하나가 플래너 모드이고, 다른 하나가 DC 모드인 경우에는 상기 추가 인트라 예측 모드는 DC 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드인 경우에는 상기 추가 인트라 예측 모드는 수직 모드 또는 수평 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는, 상기 추가 인트라 예측 모드는 상기 2개의 인트라 예측 모드 사이들 사이의 방향성을 갖는 인트라 예측모드이거나, DC 모드 또는 플래너 모드일 수 있다.
2) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 동일한 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다.
상기 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 인접하는 2개의 인트라 예측 모드들로 설정된다. 상기 인트라 예측 모드가 DC 모드이면, 상기 2개의 추가 인트라 예측 모드들은 플래너 모드 및 수직 모드일 수 있다.
3) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들 중 하나만이 존재하는 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다. 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 의해 결정된다.
4) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들이 모두 존재하지 않는 경우, 상기 MPM 그룹은 DC 모드, 플래너 모드 및 수직 모드를 포함할 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내면, 상기 예측모드 인덱스가 나타내는 인트라 예측 모드를 상기 MPM 그룹에서 선택하여 현재 블록의 인트라 예측 모드로 결정한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타내는 플래그 정보일 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내지 않으면, 인트라 예측부(240)는 MPM 그룹에 속한 인트라 예측 모드들을 제외한 인트라 예측 모드들(이하, 잔여 인트라 예측 모드들이라 함) 중에서 상기 예측 모드 인덱스가 나타내는 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 결정한다. 상기 잔여 인트라 예측 모드들에 주어지는 예측 모드 인덱스는 MPM 그룹의 구성에 따라 달라진다. 즉, 상기 복호된 예측 모드 인덱스는 MPM 그룹의 구성에 따라 재배열된 잔여 인트라 예측 모드들의 인덱스를 나타낸다. 따라서, 상기 복호된 예측 모드 인덱스 및 MPM 그룹에 속하는 인트라 예측 모드들에 따라 현재 블록의 인트라 예측 모드를 상기 잔여 인트라 예측 모드들 중에서 선택한다.
구체적으로, 현재 블록의 상기 잔여 인트라 예측 모드들을 모드번호순으로 재배열하고, 상기 수신된 예측 모드 인덱스에 대응하는 순서의 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 선택한다. 이 경우, 상기 잔여 인트라 예측 모드들을 재배열할 수도 있지만, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수도 있다.
상기 방법은 비방향성 모드 중 DC에 모드번호 2, 플래너 모드에 모드번호 34를 부여하고, 나머지 모드들에 방향성 모드들을 부여한 경우에 적용될 수 있다. 그러나, 현재 블록의 인트라 예측 모드로 플래너 모드 및 DC 모드가 선택될 확률이 다른 방향성 모드들보다 높기 때문에, 플래너 모드에 작은 모드번호(예를 들어, 모드 번호 0)을 적용하여 상기 방법을 적용할 수 있다. 이 경우, 다른 후순위 모드번호들의 모드번호가 1씩 증가하게 된다.
또는 비방향성 모드들에 가장 낮은 인덱스들을 부여할 수도 있다. 일예로, 현재 블록의 인트라 예측 모드가 플래너 모드이고, 상기 잔여 인트라 예측모드에 플래너 모드가 포함되는 경우, 상기 인트라 예측모드 인덱스는 0을 포함할 수 있다. 다른 예로, 상기 잔여 인트라 예측 모드에 플래너 모드 및 DC 모드가 포함되는 경우, 플래너 모드, DC 모드, 방향성 모드들 순으로 정렬된 상태에서 상기 예측모드 인덱스에 대응하는 순서의 인트라 예측모드가 현재 블록의 인트라 예측모드로 설정될 수 있다. 또 다른 예로, 플래너 모드에 모드번호 0, DC 모드에 모드번호 1을 할당하거나, DC 모드에 모드번호 0, 플래너 모드에 모드번호 1을 할당할 수도 있다. 이 경우, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수 있다.
다음으로, 현재 블록의 변환 크기를 나타내는 정보를 이용하여 예측 블록의 크기를 결정한다(S130).
상기 예측 블록의 크기가 현재 블록의 크기와 동일한 경우에는, 현재 블록의 인트라 예측 모드 및 현재 블록의 참조 화소들을 이용하여 예측 블록을 생성한다. 상기 참조화소는 현재 블록 이전에 복원된 화소들 또는 생성된 화소들이다.
상기 예측 블록의 크기가 현재 블록의 크기보다 작은 경우, 즉, 현재 블록이 복수개의 서브블록으로 나누어져 인트라 예측이 수행되는 경우에는, 각 서브블록의 예측 블록 생성시에 동일한 인트라 예측 모드(즉, 현재 블록의 인트라 예측 모드)가 이용된다. 또한, 복호화 순서상 두번째 이후의 서브블록들의 예측 블록은 선행하는 서브블록들의 복원화소를 이용하여 생성된다. 따라서, 각 서브블록 단위로 예측블록 생성, 잔차블록 생성 및 복원블록 생성이 끝난 후에 다음 순서의 서브블록의 예측블록이 생성된다.
다음으로, 상기 예측 블록의 크기에 대응하는 블록의 참조화소들이 모두 유효한지를 판단한다(S140). 상기 참조화소들은 이미 복호화되어 복원된 화소들이다. 상기 참조화소들 중 적어도 하나가 유효하지 않은 것으로 판단되는 경우에는 참조화소들을 생성한다(S150).
구체적으로, 모든 참조화소들이 유효하지 않은 것으로 판단되는 경우에는, 2L-1 값으로 대체한다. 여기서 L은 휘도성분의 계조를 나타내기 위한 비트수이다.
유효하지 않은 참조화소 위치를 기준으로 한쪽 방향으로만 유효한 참조화소가 존재하는 경우에는 상기 유효한 참조화소 중 가장 가까운 위치에 있는 참조화소를 복사하여 참조화소들을 생성한다.
유효하지 않은 참조화소 위치를 기준으로 유효한 참조화소가 양쪽방향 모두에 존재할 경우, 미리 정해진 방향의 가장 가까운 위치의 참조화소를 복사하거나, 각각의 방향으로 가장 인접한 참조화소 2개의 평균값으로 참조화소를 생성할 수 있다.
다음으로, 참조화소를 필터링할지 여부를 결정한다(S160). 상기 복원된 인트라 예측 모드 및 예측 블록의 크기에 따라 상기 참조화소들을 적응적으로 필터링한다(S170).
인트라 예측 모드가 DC 모드인 경우에는 참조화소들을 필터링하지 않는다. 인트라 예측 모드가 수직 모드 및 수평 모드인 경우에도 참조화소들을 필터링하지 않는다. 그러나, 인트라 예측 모드가 상기 수직 모드 및 수평 모드 이외의 방향성 모드들인 경우에는, 상기 인트라 예측 모드 및 상기 예측 블록의 크기에 따라 적응적으로 참조 화소를 필터링한다. 상기 예측 블록의 크기가 4x4인 경우에는, 인트라 예측 모드에 관계없이, 복잡도 감소를 위해 참조화소를 필터링하지 않을 수 있다. 상기 필터링은 참조화소들 사이의 화소값의 변화량을 스무딩(smoothing)하기 위한 것으로, low-pass filter를 이용한다. Low-pass filter는 3-tap 필터인 [1, 2, 1] 또는 5-tap 필터인 [1, 2, 4, 2, 1]일 수 있다. 상기 예측 블록의 크기가 8x8~32x32인 경우, 상기 예측블록의 크기가 커짐에 따라 더 많은 수의 인트라 예측 모드들에서 참조화소를 필터링한다.
다음으로, 인트라 예측 모드에 따라 예측 블록을 생성한다(S180). 상기 예측 블록에 사용되는 참조화소들은 상기 예측 블록의 크기 및 인트라 예측모드에 따라 적응적으로 필터링된 화소들일 수 있다.
DC 모드에서는 (x=0,..N-1, y=-1) 위치의 N개의 상측 참조화소들과 (x=-1, y=0,..M-1) 위치의 좌측 참조화소들 및 (x=-1, y=-1) 위치의 코너화소의 평균값이 예측블록의 예측화소로 결정될 수 있다. 그러나, 상기 참조화소들과 인접하는 위치의 예측 화소는 상기 평균값과 상기 예측화소에 인접하는 참조화소의 가중평균을 이용하여 생성할 수 있다. 플래너 모드에서도, 상기 DC 모드에서와 동일한 방식으로 예측화소를 생성할 수 있다.
수직 모드에서는 수직방향에 위치하는 참조화소가 예측화소가 된다. 그러나, 좌측 화소와 인접한 예측 화소들은 상기 수직방향의 참조화소와, 상기 좌측 참조화소들의 변화량을 이용하여 생성될 수 있다. 상기 변화량은 코너 참조화소와 상기 예측 화소에 인접하는 참조화소 사이의 변화량을 나타낸다. 수평 모드에서도 상기 수직모드와 방향만 틀릴 뿐, 동일한 방식으로 예측화소를 생성할 수 있다.
도 5는 본 발명의 일 실시예에 따른 인트라 예측 블록 장치(300)를 나타내는 블록 구성도이다. 본 발명에 따른 인트라 예측 블록 생성 장치(300)는 파싱부(310), 예측모드 복호화부(320), 예측블록 크기 결정부(330), 참조화소 유효성 판단부(340), 참조화소 생성부(350), 참조화소 필터링부(360), 예측 블록 생성부(370)를 포함한다.
파싱부(310)는 수신된 비트스트림으로부터 인트라 예측 정보 및 변환블록 크기 정보를 엔트로피 복호화한다.
인트라 예측 정보는 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 포함한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타낸다. 예측모드 인덱스는 인트라 예측 모드 그룹 지시자가 나타내는 인트라 예측 모드 그룹 내에서의 특정 인트라 예측 모드를 나타내는 정보이다. 상기 인트라 예측 정보의 엔트로피 복호화 방법은 도 3의 S110과 동일하다.
상기 변환 크기 정보는 부호기로부터 전송되는 변환 크기를 나타내는 적어도 하나 이상의 플래그(split_transform_flag)를 포함한다.
예측모드 복호화부(320)는 현재 블록에 인접한 블록들의 인트라 예측 모드를 이용하여 MPM 그룹을 생성하고, 상기 MPM 그룹 및 상기 엔트로피 복호화된 인트라 예측 정보를 이용하여 현재 블록의 인트라 예측모드를 복원한다. MPM 그룹은 3개의 인트라 예측 모드로 구성된다. 예측모드 복호화부(320)는
1) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 서로 다른 경우, 상기 MPM 그룹은 상기 2개의 인트라 예측 모드와 1개의 추가 인트라 예측 모드로 구성된다.
상기 2개의 인트라 예측 모드들 중 하나가 DC 모드이고, 다른 하나가 플래터 모드가 아닌 경우에는 상기 추가 인트라 예측 모드는 플래너 모드일 수 있다. 마찬가지로, 상기 두 개의 인트라 예측 모드 중 하나가 플래너 모드이고, 다른 하나가 DC 모드인 경우에는 상기 추가 인트라 예측 모드는 DC 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드인 경우에는 상기 추가 인트라 예측 모드는 수직 모드 또는 수평 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는, 상기 추가 인트라 예측 모드는 상기 2개의 인트라 예측 모드 사이들 사이의 방향성을 갖는 인트라 예측모드이거나, DC 모드 또는 플래너 모드일 수 있다.
2) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 동일한 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다.
상기 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 인접하는 2개의 인트라 예측 모드들로 설정된다. 상기 인트라 예측 모드가 DC 모드이면, 상기 2개의 추가 인트라 예측 모드들은 플래너 모드 및 수직 모드일 수 있다.
3) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들 중 하나만이 존재하는 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다. 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 의해 결정된다.
4) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들이 모두 존재하지 않는 경우, 상기 MPM 그룹은 DC 모드, 플래너 모드 및 수직 모드를 포함할 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내면, 상기 예측모드 인덱스가 나타내는 인트라 예측 모드를 상기 MPM 그룹에서 선택하여 현재 블록의 인트라 예측 모드로 결정한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타내는 플래그 정보일 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내지 않으면, 인트라 예측부(240)는 MPM 그룹에 속한 인트라 예측 모드들을 제외한 인트라 예측 모드들(이하, 잔여 인트라 예측 모드들이라 함) 중에서 상기 예측 모드 인덱스가 나타내는 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 결정한다. 상기 잔여 인트라 예측 모드들에 주어지는 예측 모드 인덱스는 MPM 그룹의 구성에 따라 달라진다. 즉, 상기 복호된 예측 모드 인덱스는 MPM 그룹의 구성에 따라 재배열된 잔여 인트라 예측 모드들의 인덱스를 나타낸다. 따라서, 상기 복호된 예측 모드 인덱스 및 MPM 그룹에 속하는 인트라 예측 모드들에 따라 현재 블록의 인트라 예측 모드를 상기 잔여 인트라 예측 모드들 중에서 선택한다.
구체적으로, 현재 블록의 상기 잔여 인트라 예측 모드들을 모드번호순으로 재배열하고, 상기 수신된 예측 모드 인덱스에 대응하는 순서의 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 선택한다. 이 경우, 상기 잔여 인트라 예측 모드들을 재배열할 수도 있지만, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수도 있다.
상기 MPM 그룹 구성 방법은 비방향성 모드 중 DC에 모드번호 2, 플래너 모드에 모드번호 34를 부여하고, 나머지 모드들에 방향성 모드들을 부여한 경우에 적용될 수 있다. 그러나, 현재 블록의 인트라 예측 모드로 플래너 모드 및 DC 모드가 선택될 확률이 다른 방향성 모드들보다 높기 때문에, 플래너 모드에 작은 모드번호(예를 들어, 모드 번호 0)을 적용하여 상기 방법을 적용할 수 있다. 이 경우, 다른 후순위 모드번호들의 모드번호가 1씩 증가하게 된다.
또는 비방향성 모드들에 가장 낮은 인덱스들을 부여할 수도 있다. 일예로, 현재 블록의 인트라 예측 모드가 플래너 모드이고, 상기 잔여 인트라 예측모드에 플래너 모드가 포함되는 경우, 상기 인트라 예측모드 인덱스는 0을 포함할 수 있다. 다른 예로, 상기 잔여 인트라 예측 모드에 플래너 모드 및 DC 모드가 포함되는 경우, 플래너 모드, DC 모드, 방향성 모드들 순으로 정렬된 상태에서 상기 예측모드 인덱스에 대응하는 순서의 인트라 예측모드가 현재 블록의 인트라 예측모드로 설정될 수 있다. 또 다른 예로, 플래너 모드에 모드번호 0, DC 모드에 모드번호 1을 할당하거나, DC 모드에 모드번호 0, 플래너 모드에 모드번호 1을 할당할 수도 있다. 이 경우, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수 있다.
예측블록 크기 결정부(330)는 상기 블록 변환 크기를 이용하여 현재 블록의 예측 블록의 크기를 결정한다. 예측 블록의 크기는 현재 블록의 크기 또는 현재 블록의 서브블록의 크기를 가질 수 있다.
상기 예측 블록의 크기가 현재 블록의 크기와 동일한 경우에는, 현재 블록의 인트라 예측 모드 및 현재 블록의 참조 화소들을 이용하여 예측 블록을 생성한다. 상기 참조화소는 현재 블록 이전에 복원된 화소들 또는 생성된 화소들이다.
상기 예측 블록의 크기가 현재 블록의 크기보다 작은 경우, 즉, 현재 블록이 복수개의 서브블록으로 나누어져 인트라 예측이 수행되는 경우에는, 각 서브블록의 예측 블록 생성시에 동일한 인트라 예측 모드(즉, 현재 블록의 인트라 예측 모드)가 이용된다. 또한, 복호화 순서상 두번째 이후의 서브블록들의 예측 블록은 선행하는 서브블록들의 복원화소를 이용하여 생성된다. 따라서, 각 서브블록 단위로 예측블록 생성, 잔차블록 생성 및 복원블록 생성이 끝난 후에 다음 순서의 서브블록의 예측블록이 생성된다.
상술된 구체적 과정은 후술한다.
참조화소 유효성 판단부(340)는 상기 예측 블록의 크기에 대응하는 블록의 참조화소들이 모두 유효한지를 판단한다. 상기 참조화소들은 이미 복호화되어 복원된 화소들이다.
참조화소 생성부(350)는 상기 참조화소들 중 적어도 하나가 유효하지 않은 것으로 판단되는 경우에는 참조화소들을 생성한다.
구체적으로, 모든 참조화소들이 유효하지 않은 것으로 판단되는 경우에는, 2L-1 값으로 대체한다. 여기서 L은 휘도성분의 계조를 나타내기 위한 비트수이다.
유효하지 않은 참조화소 위치를 기준으로 한쪽 방향으로만 유효한 참조화소가 존재하는 경우에는 상기 유효한 참조화소 중 가장 가까운 위치에 있는 참조화소를 복사하여 참조화소들을 생성한다.
유효하지 않은 참조화소 위치를 기준으로 유효한 참조화소가 양쪽방향 모두에 존재할 경우, 미리 정해진 방향의 가장 가까운 위치의 참조화소를 복사하거나, 각각의 방향으로 가장 인접한 참조화소 2개의 평균값으로 참조화소를 생성할 수 있다.
참조화소 필터링부(360)는 참조화소를 필터링할지 여부를 결정하고, 상기 복원된 인트라 예측 모드 및 예측 블록의 크기에 따라 상기 참조화소들을 적응적으로 필터링한다.
인트라 예측 모드가 DC 모드인 경우에는 참조화소들을 필터링하지 않는다. 인트라 예측 모드가 수직 모드 및 수평 모드인 경우에도 참조화소들을 필터링하지 않는다. 그러나, 인트라 예측 모드가 상기 수직 모드 및 수평 모드 이외의 방향성 모드들인 경우에는, 상기 인트라 예측 모드 및 상기 예측 블록의 크기에 따라 적응적으로 참조 화소를 필터링한다. 상기 예측 블록의 크기가 4x4인 경우에는, 인트라 예측 모드에 관계없이, 복잡도 감소를 위해 참조화소를 필터링하지 않을 수 있다. 상기 필터링은 참조화소들 사이의 화소값의 변화량을 스무딩(smoothing)하기 위한 것으로, low-pass filter를 이용한다. Low-pass filter는 3-tap 필터인 [1, 2, 1] 또는 5-tap 필터인 [1, 2, 4, 2, 1]일 수 있다. 상기 예측 블록의 크기가 8x8~32x32인 경우, 상기 예측블록의 크기가 커짐에 따라 더 많은 수의 인트라 예측 모드들에서 참조화소를 필터링한다.
예측블록 생성부(370)는 인트라 예측 모드에 따라 예측 블록을 생성한다. 상기 예측 블록에 사용되는 참조화소들은 상기 예측 블록의 크기 및 인트라 예측모드에 따라 적응적으로 필터링된 화소들일 수 있다.
DC 모드에서는 (x=0,..N-1, y=-1) 위치의 N개의 상측 참조화소들과 (x=-1, y=0,..M-1) 위치의 좌측 참조화소들 및 (x=-1, y=-1) 위치의 코너화소의 평균값이 예측블록의 예측화소로 결정될 수 있다. 그러나, 상기 참조화소들과 인접하는 위치의 예측 화소는 상기 평균값과 상기 예측화소에 인접하는 참조화소의 가중평균을 이용하여 생성할 수 있다. 플래너 모드에서도, 상기 DC 모드에서와 동일한 방식으로 예측화소를 생성할 수 있다.
수직 모드에서는 수직방향에 위치하는 참조화소가 예측화소가 된다. 그러나, 좌측 화소와 인접한 예측 화소들은 상기 수직방향의 참조화소와, 상기 좌측 참조화소들의 변화량을 이용하여 생성될 수 있다. 상기 변화량은 코너 참조화소와 상기 예측 화소에 인접하는 참조화소 사이의 변화량을 나타낸다. 수평 모드에서도 상기 수직모드와 방향만 틀릴 뿐, 동일한 방식으로 예측화소를 생성할 수 있다.
도 6은 본 발명의 일 실시예에 따른 복원블록 생성 과정을 나타낸다. 도 6은 상기 예측 블록의 크기와 현재 블록의 크기가 동일한 경우의 복원블록 생성 과정을 나타낸다.
먼저, 현재 블록의 인트라 예측 모드를 복원한다(S210). 상기 인트라 예측 모드는 상술된 도 3의 단계 S120와 동일하다.
다음으로, 현재 블록의 미리 정해진 위치의 참조화소들이 모두 유효한지를 판단한다(S220). 미리 정해진 위치의 참조화소들 중 적어도 하나가 유효하지 않은 경우에는 유효하지 않은 위치의 참조화소들을 생성한다(S230). 상기 참조화소의 생성 방법은 상술한 도 3의 단계150과 동일한다. 다만, 예측 블록의 크기가 현재 블록의 크기와 동일하다.
다음으로, 현재 블록의 참조화소들을 필터링할지 여부를 결정한다(S240). 상기 복원된 인트라 예측 모드 및 현재 블록의 크기에 따라 상기 참조화소들의 필터링 여부가 결정된다. 상기 필터링 여부는 도 3의 단계 170과 동일하다. 현재 블록의 참조화소들이 필터링 될 것으로 결정되면 현재 블록의 참조화소들을 필터링한다(S250).
다음으로, 상기 복원된 인트라 예측 모드에 따라 현재 블록의 예측 블록을 생성한다(S260). 또한, 상기 복원된 인트라 예측 모드에 따라 잔차 블록을 생성한다(S270). 상기 잔차 블록의 크기는 현재 블록의 크기와 동일하다.
다음으로, 상기 현재 블록의 예측 블록과, 현재 블록의 잔차블록을 더하여 복원블록을 생성한다(S280).
도 7은 본 발명의 다른 실시예에 따른 복원블록 생성 과정을 나타낸다. 도 7은 상기 예측 블록의 크기와 현재 블록의 크기보다 작은 경우의 현재 블록의 복원블록 생성 과정을 나타낸다.
먼저, 현재 블록의 인트라 예측 모드를 복원한다(S310). 상기 인트라 예측 모드는 상술된 도 3의 단계 S120와 동일하다.
다음으로, 복원할 현재 블록의 서브블록을 결정한다(S320).
다음으로, 상기 서브블록의 미리 정해진 위치의 참조화소들이 모두 유효한지를 판단한다(S330). 미리 정해진 위치의 참조화소들 중 적어도 하나가 유효하지 않은 경우에는 유효하지 않은 위치의 참조화소들을 생성한다(S340). 상기 참조화소의 생성 방법은 상술한 도 3의 단계 150과 동일하다.
다음으로, 상기 서브블록의 참조화소들을 필터링할지 여부를 결정한다(S350). 상기 복원된 인트라 예측 모드 및 상기 서브블록의 크기에 따라 상기 참조화소들의 필터링 여부가 결정된다. 상기 필터링 여부는 도 3의 단계 170과 동일하다. 상기 서브블록의 참조화소들이 필터링될 것으로 결정되면 상기 참조화소들을 필터링한다(S360).
다음으로, 상기 복원된 인트라 예측 모드에 따라 상기 서브블록의 예측 블록을 생성한다(S370). 또한, 상기 복원된 인트라 예측 모드에 따라 상기 서브블록의 잔차 블록을 생성한다(S380).
다음으로, 상기 현재 블록의 예측 블록과, 현재 블록의 잔차블록을 더하여 복원블록을 생성한다(S390).
다음으로, 상기 서브블록이 현재 블록의 마지막 서브블록인지 여부를 판단한다(S395). 상기 서브블록이 현재 블록의 마지막 서브블록이 아니면, 부호화 순서상 다음이 서브블록을 결정하는 과정(S320)부터 서브블록의 예측블록을 생성하는 과정(S390)이 반복된다. 이 경우, 복호화 순서상 첫번째 이후의 서브블록들은 복원된 이전의 서브블록의 일부화소들을 상기 서브블록의 참조화소로 이용한다. 또한, 상기 첫번째 이후의 서브블록들에 대해서는 유효하지 않은 참조화소들이 늘 존재하기 때문에 단계 S330은 생략되고 단계 S340이 바로 진행될 수도 있다. 또한, 서브블록들의 크기가 동일한 경우, 참조화소 필터링 과정도 첫번째 서브블록에 대해서만 수행하고, 그 이후의 서브블록들에 대해서는 수행하지 않을 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
110:인트라 예측부

Claims (1)

  1. 현재 블록의 인트라 예측모드 그룹 지시자 및 예측모드 인덱스를 복원하는 단계;
    상기 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측모드를 이용하여 MPM 그룹을 나타내는 제1 그룹을 구성하는 단계;
    상기 인트라 예측모드 그룹지시자가 제1 그룹을 나타내면, 상기 제1 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하고, 상기 인트라 예측모드 그룹지시자가 제2 그룹을 나타내면, 상기 제2 그룹에서 상기 예측모드 인덱스에 대응하는 인트라 예측모드를 현재 블록의 인트라 예측모드로 결정하는 단계로서, 상기 제2 그룹은 MPM 이외의 나머지 예측 인트라 모드 그룹을 나타냄; 및
    상기 결정된 현재 블록의 인트라 예측모드에 따라 예측블록을 생성하는 단계를 포함하고,
    상기 예측블록의 크기는 변환 크기 정보에 따라 결정되고,
    인트라 예측모드들 중 플래너 모드(Planar mode)에 0의 모드 번호가 부여되고, DC 모드에 1의 모드 번호가 부여되고,
    상기 현재 블록의 좌측 및 상측 블록의 인트라 예측모드가 모두 유효하고 서로 동일하지 않은 경우, 상기 제1 그룹은 상기 좌측 및 상측 블록의 인트라 예측모드들을 포함하고, 상기 좌측 및 상측 블록의 인트라 예측모드에 기초하여 결정되는 1개의 인트라 예측모드가 상기 제1 그룹에 추가되고,
    상기 좌측 및 상측 블록의 인트라 예측모드들이 모두 플래너 모드가 아닌 경우, 상기 추가되는 인트라 예측모드는 플래너 모드이고,
    상기 현재 블록의 인트라 예측 모드가 DC 모드인 경우 상기 현재 블록의 참조화소들에 필터링이 수행되지 않고,
    상기 현재 블록의 상측 및 좌측 블록의 인트라 예측모드 중 하나만이 유효한 경우, 2개의 인트라 예측모드가 상기 제1 그룹에 추가되고,
    상기 현재 블록의 크기가 상기 예측블록의 크기보다 큰 경우, 상기 현재 블록에 포함되는 복수개의 예측 블록은 상기 현재 블록의 인트라 예측모드를 이용하여 생성되는 것을 특징으로 하는 영상 복호화 방법.
KR1020190004900A 2011-10-24 2019-01-14 영상 복호화 방법 및 장치 Active KR102292592B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20110108455 2011-10-24
KR1020110108455 2011-10-24
KR1020120041302A KR101947658B1 (ko) 2011-10-24 2012-04-20 영상 복호화 방법 및 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020120041302A Division KR101947658B1 (ko) 2011-10-24 2012-04-20 영상 복호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20190016988A KR20190016988A (ko) 2019-02-19
KR102292592B1 true KR102292592B1 (ko) 2021-08-24

Family

ID=48168002

Family Applications (7)

Application Number Title Priority Date Filing Date
KR1020120041302A Active KR101947658B1 (ko) 2011-10-24 2012-04-20 영상 복호화 방법 및 장치
KR1020120041319A Withdrawn KR20130045154A (ko) 2011-10-24 2012-04-20 영상 복호화 장치
KR1020190004900A Active KR102292592B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004897A Active KR102292589B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004899A Active KR102292591B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004898A Active KR102292590B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004901A Active KR102292593B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020120041302A Active KR101947658B1 (ko) 2011-10-24 2012-04-20 영상 복호화 방법 및 장치
KR1020120041319A Withdrawn KR20130045154A (ko) 2011-10-24 2012-04-20 영상 복호화 장치

Family Applications After (4)

Application Number Title Priority Date Filing Date
KR1020190004897A Active KR102292589B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004899A Active KR102292591B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004898A Active KR102292590B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치
KR1020190004901A Active KR102292593B1 (ko) 2011-10-24 2019-01-14 영상 복호화 방법 및 장치

Country Status (17)

Country Link
US (10) US9769479B2 (ko)
EP (5) EP2773118B1 (ko)
JP (5) JP5611498B1 (ko)
KR (7) KR101947658B1 (ko)
CN (9) CN105338346B (ko)
CY (1) CY1123669T1 (ko)
DK (1) DK2773118T3 (ko)
ES (1) ES2828734T3 (ko)
HR (1) HRP20201980T1 (ko)
HU (1) HUE052290T2 (ko)
LT (1) LT2773118T (ko)
MX (4) MX350187B (ko)
PL (1) PL2773118T3 (ko)
PT (1) PT2773118T (ko)
RS (1) RS61146B1 (ko)
SI (1) SI2773118T1 (ko)
WO (2) WO2013062197A1 (ko)

Families Citing this family (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101356448B1 (ko) 2008-10-01 2014-02-06 한국전자통신연구원 예측 모드를 이용한 복호화 장치
US8867854B2 (en) 2008-10-01 2014-10-21 Electronics And Telecommunications Research Institute Image encoder and decoder using undirectional prediction
CN107105234B (zh) * 2010-08-17 2019-11-01 M&K控股株式会社 用于解码图像的装置
US11284072B2 (en) 2010-08-17 2022-03-22 M&K Holdings Inc. Apparatus for decoding an image
SI2773118T1 (sl) * 2011-10-24 2021-02-26 Innotive Ltd Postopek in naprava za dekodiranje slike
MX2014003543A (es) 2011-10-24 2015-01-22 Infobridge Pte Ltd Aparato para la decodificacion de imagenes.
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130049525A (ko) * 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
KR20130049523A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
KR20130049526A (ko) 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
CN103220506B (zh) 2012-01-19 2015-11-25 华为技术有限公司 一种编解码方法和设备
US20160373782A1 (en) * 2015-06-18 2016-12-22 Qualcomm Incorporated Intra prediction and intra mode coding
US20160373742A1 (en) * 2015-06-18 2016-12-22 Qualcomm Incorporated Intra prediction and intra mode coding
US10841593B2 (en) * 2015-06-18 2020-11-17 Qualcomm Incorporated Intra prediction and intra mode coding
US11463689B2 (en) 2015-06-18 2022-10-04 Qualcomm Incorporated Intra prediction and intra mode coding
US10142627B2 (en) * 2015-06-18 2018-11-27 Qualcomm Incorporated Intra prediction and intra mode coding
GB2557544B (en) * 2015-09-11 2021-12-01 Kt Corp Method and device for processing video signal
KR20170058837A (ko) * 2015-11-19 2017-05-29 한국전자통신연구원 화면내 예측모드 부호화/복호화 방법 및 장치
CN118900323A (zh) * 2015-11-19 2024-11-05 Lx半导体科技有限公司 图像编码/解码方法和图像数据的传输方法
CN108605129A (zh) * 2016-01-28 2018-09-28 日本放送协会 编码装置、解码装置以及程序
KR20250161683A (ko) * 2016-02-16 2025-11-17 삼성전자주식회사 영상을 부호화/복호화 하는 방법 및 그 장치
CN105554507B (zh) * 2016-03-01 2018-10-02 福州瑞芯微电子股份有限公司 一种hevc sao硬件计算装置及方法
CN114615493A (zh) 2016-03-24 2022-06-10 英迪股份有限公司 视频解码方法、视频编码方法和可读记录介质
KR20230101932A (ko) * 2016-04-29 2023-07-06 인텔렉추얼디스커버리 주식회사 영상 신호 부호화/복호화 방법 및 장치
US10547854B2 (en) * 2016-05-13 2020-01-28 Qualcomm Incorporated Neighbor based signaling of intra prediction modes
WO2018026148A1 (ko) * 2016-08-01 2018-02-08 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US11405620B2 (en) * 2016-08-01 2022-08-02 Electronics And Telecommunications Research Institute Image encoding/decoding method and apparatus with sub-block intra prediction
CN114286091B (zh) * 2016-09-05 2024-06-04 罗斯德尔动力有限责任公司 图像编码和解码方法、比特流存储介质及数据传输方法
CN117201776A (zh) 2016-09-13 2023-12-08 韩国电子通信研究院 视频编码/解码方法和装置以及存储比特流的记录介质
US10958903B2 (en) * 2016-10-04 2021-03-23 Electronics And Telecommunications Research Institute Method and apparatus for encoding/decoding image and recording medium storing bit stream
CN117176947A (zh) 2016-10-04 2023-12-05 有限公司B1影像技术研究所 图像编码/解码方法、记录介质和传输比特流的方法
KR102531386B1 (ko) 2016-10-04 2023-05-12 주식회사 비원영상기술연구소 영상 데이터 부호화/복호화 방법 및 장치
US20190253624A1 (en) * 2017-07-17 2019-08-15 Ki Baek Kim Image data encoding/decoding method and apparatus
CN107920247A (zh) * 2016-10-07 2018-04-17 财团法人工业技术研究院 选择画面内预测模式的方法、视频编码装置及处理设备
JP2019528621A (ja) * 2016-10-13 2019-10-10 富士通株式会社 画像コーディング／デコーディング方法、装置及び画像処理機器
KR20180043149A (ko) * 2016-10-19 2018-04-27 에스케이텔레콤 주식회사 영상 부호화 또는 복호화하기 위한 장치 및 방법
WO2018074812A1 (ko) 2016-10-19 2018-04-26 에스케이텔레콤 주식회사 영상 부호화 또는 복호화하기 위한 장치 및 방법
TWI626558B (zh) * 2016-10-27 2018-06-11 富邦金融控股股份有限公司 智能合約的實名帳戶建立系統及其方法
US11039130B2 (en) * 2016-10-28 2021-06-15 Electronics And Telecommunications Research Institute Video encoding/decoding method and apparatus, and recording medium in which bit stream is stored
CN117041561A (zh) * 2016-12-07 2023-11-10 株式会社Kt 对视频进行解码或编码的方法和存储视频数据的设备
ES2945694T3 (es) * 2016-12-23 2023-07-05 Huawei Tech Co Ltd Un aparato de codificación para señalizar un modo de intrapredicción direccional de ampliación dentro de un conjunto de modos de intrapredicción direccional
CN117156132A (zh) * 2017-01-02 2023-12-01 Lx 半导体科技有限公司 图像编码/解码方法、发送图像数据的方法以及存储介质
CN109257608B (zh) * 2017-07-13 2021-11-30 华为技术有限公司 图像处理方法、设备及系统
CN118413670A (zh) 2017-11-28 2024-07-30 Lx 半导体科技有限公司 图像编码/解码方法、图像数据的传输方法和存储介质
CN118200536A (zh) 2018-01-15 2024-06-14 有限公司B1影像技术研究所 图像编码/解码方法、存储介质和传输比特流的方法
KR102769033B1 (ko) * 2018-03-08 2025-02-18 삼성전자주식회사 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
CN112204963B (zh) * 2018-03-29 2024-06-07 弗劳恩霍夫应用研究促进协会 逐块图像编码的帧内预测模式概念
US11277644B2 (en) 2018-07-02 2022-03-15 Qualcomm Incorporated Combining mode dependent intra smoothing (MDIS) with intra interpolation filter switching
CN112840648B (zh) * 2018-08-12 2023-06-16 Lg电子株式会社 用于处理图像信号的方法和装置
AU2019335453B2 (en) 2018-09-03 2023-06-15 Huawei Technologies Co., Ltd. Method and apparatus for intra prediction
KR20200028856A (ko) 2018-09-07 2020-03-17 김기백 인트라 예측을 이용한 영상 부호화/복호화 방법 및 장치
US11695926B2 (en) * 2018-09-21 2023-07-04 Electronics And Telecommunications Research Institute Method and apparatus for encoding/decoding image, and recording medium for storing bitstream
KR20200041801A (ko) 2018-10-12 2020-04-22 인텔렉추얼디스커버리 주식회사 영상 부호화/복호화 방법 및 장치
US11303885B2 (en) 2018-10-25 2022-04-12 Qualcomm Incorporated Wide-angle intra prediction smoothing and interpolation
MX2021008166A (es) * 2019-01-08 2021-08-11 Lg Electronics Inc Metodo y dispositivo de codificacion de video basados en prediccion intra que utilizan lista de mpm.
WO2020145620A1 (ko) * 2019-01-09 2020-07-16 엘지전자 주식회사 Mpm 리스트를 사용하는 인트라 예측 기반 영상 코딩 방법 및 장치
GB2581139A (en) 2019-01-31 2020-08-12 Ernst & Young Gmbh Interactive user interface for time series planning, evaluation and prediction system
WO2020184821A1 (ko) * 2019-03-12 2020-09-17 엘지전자 주식회사 Mpm 리스트를 구성하는 방법 및 장치
HUE068872T2 (hu) 2019-03-13 2025-01-28 Guangdong Oppo Mobile Telecommunications Képkódoló/-dekódoló eljárás és készülék, valamint bitfolyam átvitelére szolgáló eljárás
KR20250008982A (ko) * 2019-04-12 2025-01-16 두인 비전 컴퍼니 리미티드 행렬 기반 인트라 예측에서의 산출
CN111836043B (zh) * 2019-04-15 2025-10-17 中兴通讯股份有限公司 码块的预测、解码方法及装置
KR102744182B1 (ko) 2019-04-16 2024-12-19 두인 비전 컴퍼니 리미티드 인트라 코딩 모드에서의 행렬 도출
CN113728647B (zh) 2019-05-01 2023-09-05 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的上下文编码
CN114051735B (zh) 2019-05-31 2024-07-05 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的一步下采样过程
CN117768652A (zh) 2019-06-05 2024-03-26 北京字节跳动网络技术有限公司 视频处理方法、装置、介质、以及存储比特流的方法
SI3989559T1 (sl) 2019-06-24 2025-06-30 Lg Electronics Inc. Postopek in naprava za kodiranje/dekodiranje slik z uporabo nastavitve največje velikosti preobrazbe za kromatski blok in postopek za prenos bitnega toka
JP7461353B2 (ja) * 2019-09-24 2024-04-03 オッポ広東移動通信有限公司 画像符号化／復号化方法、エンコーダ、デコーダ及び記憶媒体
US11375220B2 (en) 2019-11-27 2022-06-28 Tencent America LLC Method and apparatus for video decoding using a nominal directional mode and an angular offset
US12120335B2 (en) * 2021-08-24 2024-10-15 Tencent America LLC Hardware friendly design for intra mode coding
CN117957838A (zh) * 2021-09-05 2024-04-30 北京达佳互联信息技术有限公司 帧内预测模式信令
US20240364863A1 (en) * 2023-04-25 2024-10-31 Tencent America LLC Bi-predictive block vector with cu-level weight in ibc
US20250080773A1 (en) * 2023-09-05 2025-03-06 Tencent America LLC Signalling required nal units
WO2025067882A1 (en) * 2023-09-29 2025-04-03 Interdigital Ce Patent Holdings, Sas Coset coding of intra prediction mode
US20250175635A1 (en) * 2023-11-27 2025-05-29 Tencent America LLC Systems and methods for entropy coding for recursive intra region partitioning
US12445630B2 (en) 2023-11-29 2025-10-14 Tencent America LLC Systems and methods for implicit derivation in a recursive intra region

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3954656B2 (ja) * 1994-09-29 2007-08-08 ソニー株式会社 画像符号化装置及び方法
KR100750110B1 (ko) 2003-04-22 2007-08-17 삼성전자주식회사 ４×４인트라 휘도 예측 모드 결정방법 및 장치
CN1224270C (zh) * 2003-09-30 2005-10-19 清华大学 用于宏块组结构的两阶段预测编码的帧内编码帧编码方法
JP2006005438A (ja) * 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
KR100739714B1 (ko) 2005-07-06 2007-07-13 삼성전자주식회사 인트라 예측 모드 결정 방법 및 장치
CN100574443C (zh) * 2005-07-18 2009-12-23 华为技术有限公司 一种确定增强层帧内预测模式的方法和编解码设备
KR100678911B1 (ko) 2005-07-21 2007-02-05 삼성전자주식회사 방향적 인트라 예측의 적용을 확장하여 비디오 신호를인코딩하고 디코딩하는 방법 및 장치
WO2007063808A1 (ja) * 2005-11-30 2007-06-07 Kabushiki Kaisha Toshiba 画像符号化／画像復号化方法及び画像符号化／画像復号化装置
KR101246294B1 (ko) * 2006-03-03 2013-03-21 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
JP2007243391A (ja) * 2006-03-07 2007-09-20 Victor Co Of Japan Ltd 動画像符号化装置
JP4958825B2 (ja) 2008-03-28 2012-06-20 キヤノン株式会社 動画像符号化装置及びその制御方法、コンピュータプログラム
US8761253B2 (en) 2008-05-28 2014-06-24 Nvidia Corporation Intra prediction mode search scheme
CN101605255B (zh) * 2008-06-12 2011-05-04 华为技术有限公司 一种视频编解码的方法及装置
KR101379187B1 (ko) * 2008-06-23 2014-04-15 에스케이 텔레콤주식회사 블록 변환을 이용한 인트라 예측 방법 및 장치와 그를이용한 영상 부호화/복호화 방법 및 장치
KR101458471B1 (ko) * 2008-10-01 2014-11-10 에스케이텔레콤 주식회사 영상 부호화/복호화 방법 및 장치
CN102301720A (zh) * 2009-01-29 2011-12-28 松下电器产业株式会社 图像编码方法以及图像解码方法
BRPI1008081A2 (pt) 2009-02-06 2017-10-17 Thomson Licensing metodos e aparelho para sinalizacao intra-modal implicita e semi-implicita para codificadores e desodificadores de video
KR101507344B1 (ko) 2009-08-21 2015-03-31 에스케이 텔레콤주식회사 가변 길이 부호를 이용한 인트라 예측모드 부호화 방법과 장치, 및 이를 위한기록 매체
US8588303B2 (en) * 2010-03-31 2013-11-19 Futurewei Technologies, Inc. Multiple predictor sets for intra-frame coding
US8902978B2 (en) * 2010-05-30 2014-12-02 Lg Electronics Inc. Enhanced intra prediction mode signaling
DK2624567T3 (da) * 2010-09-27 2020-04-14 Lg Electronics Inc Blokinddelingsfremgangsmåde og afkodningsindretning
US9204155B2 (en) 2010-09-30 2015-12-01 Futurewei Technologies, Inc. Multiple predictor set for intra coding with intra mode prediction
US8923395B2 (en) 2010-10-01 2014-12-30 Qualcomm Incorporated Video coding using intra-prediction
US9025661B2 (en) * 2010-10-01 2015-05-05 Qualcomm Incorporated Indicating intra-prediction mode selection for video coding
US9049444B2 (en) * 2010-12-22 2015-06-02 Qualcomm Incorporated Mode dependent scanning of coefficients of a block of video data
WO2012122495A1 (en) 2011-03-10 2012-09-13 Huawei Technologies Co., Ltd. Using multiple prediction sets to encode extended unified directional intra mode numbers for robustness
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
GB2494468B (en) * 2011-09-12 2014-01-15 Canon Kk Method and device for encoding or decoding information representing prediction modes
EP3139596B1 (en) 2011-09-13 2019-09-25 HFI Innovation Inc. Method and apparatus for intra mode coding in hevc
WO2013051903A1 (en) * 2011-10-07 2013-04-11 Pantech Co., Ltd. Methods and apparatuses of encoding/decoding intra prediction mode using candidate intra prediction modes
SI2773118T1 (sl) 2011-10-24 2021-02-26 Innotive Ltd Postopek in naprava za dekodiranje slike
KR20130049525A (ko) 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Bross, Benjamin, et al. "WD4: Working draft 4 of high-efficiency video coding", Joint Collaborative Team on Video Coding (JCT-VC), JCTVC-F803 version 6 (2011.10.22.).*
Wei-Jung Chien et al. "Parsing friendly intra mode coding".Joint Collaborative Team on Video Coding (JCT-VC), JCTVC-F459 version 1 (2011.07.2).*

Also Published As

Publication number Publication date
CN105306933B (zh) 2018-11-13
HK1215640A1 (zh) 2016-09-02
WO2013062197A1 (ko) 2013-05-02
HK1215639A1 (zh) 2016-09-02
EP3780622A1 (en) 2021-02-17
CN105338349B (zh) 2018-11-02
KR20190016985A (ko) 2019-02-19
US20150222897A1 (en) 2015-08-06
HUE052290T2 (hu) 2021-04-28
MX2023004266A (es) 2023-05-02
HK1215638A1 (zh) 2016-09-02
US10341656B2 (en) 2019-07-02
PT2773118T (pt) 2020-09-25
HK1215634A1 (zh) 2016-09-02
ES2828734T3 (es) 2021-05-27
US9036704B2 (en) 2015-05-19
CN105338346B (zh) 2018-11-13
EP2773118A4 (en) 2015-12-02
CN105338349B9 (zh) 2019-03-05
EP2773118B1 (en) 2020-09-16
EP3783898A1 (en) 2021-02-24
EP3783899A1 (en) 2021-02-24
KR102292593B1 (ko) 2021-08-24
KR20130045154A (ko) 2013-05-03
CY1123669T1 (el) 2022-03-24
JP6660074B2 (ja) 2020-03-04
CN105338346A (zh) 2016-02-17
US20160353103A1 (en) 2016-12-01
CN105306932A (zh) 2016-02-03
US20140219334A1 (en) 2014-08-07
JP2020074638A (ja) 2020-05-14
MX350187B (es) 2017-08-29
US9769479B2 (en) 2017-09-19
CN105338345A (zh) 2016-02-17
KR20130045150A (ko) 2013-05-03
JP2015005998A (ja) 2015-01-08
CN105338350A (zh) 2016-02-17
KR102292590B1 (ko) 2021-08-24
DK2773118T3 (da) 2020-12-07
CN105306933A (zh) 2016-02-03
KR20190016987A (ko) 2019-02-19
US9426470B2 (en) 2016-08-23
KR20190016989A (ko) 2019-02-19
MX2023004268A (es) 2023-05-02
JP2018143002A (ja) 2018-09-13
LT2773118T (lt) 2020-10-12
US10708584B2 (en) 2020-07-07
EP3780623A1 (en) 2021-02-17
HK1215636A1 (zh) 2016-09-02
US20150222891A1 (en) 2015-08-06
US20150222929A1 (en) 2015-08-06
KR20190016988A (ko) 2019-02-19
HK1215635A1 (zh) 2016-09-02
US20140226720A1 (en) 2014-08-14
CN105338348B (zh) 2018-11-13
KR20190016986A (ko) 2019-02-19
CN105338347A (zh) 2016-02-17
US20190289287A1 (en) 2019-09-19
US9445097B2 (en) 2016-09-13
JP6006763B2 (ja) 2016-10-12
HRP20201980T1 (hr) 2021-04-16
US11206397B2 (en) 2021-12-21
EP2773118A1 (en) 2014-09-03
CN105338347B (zh) 2018-11-13
US20150222892A1 (en) 2015-08-06
CN105338350B (zh) 2018-10-09
US9392284B2 (en) 2016-07-12
CN105338345B (zh) 2019-01-04
CN104170379A (zh) 2014-11-26
US20180152701A1 (en) 2018-05-31
US9912946B2 (en) 2018-03-06
RS61146B1 (sr) 2020-12-31
KR102292591B1 (ko) 2021-08-24
JP2014530556A (ja) 2014-11-17
HK1215637A1 (zh) 2016-09-02
HK1215641A1 (zh) 2016-09-02
JP6974516B2 (ja) 2021-12-01
US20200314420A1 (en) 2020-10-01
JP6685208B2 (ja) 2020-04-22
CN104170379B (zh) 2016-01-20
KR101947658B1 (ko) 2019-02-14
MX2014003542A (es) 2015-01-22
CN105306932B (zh) 2018-11-13
US9426471B2 (en) 2016-08-23
CN105338348A (zh) 2016-02-17
SI2773118T1 (sl) 2021-02-26
CN105338349A (zh) 2016-02-17
JP2017017742A (ja) 2017-01-19
JP5611498B1 (ja) 2014-10-22
MX2023004267A (es) 2023-05-02
WO2013062193A1 (ko) 2013-05-02
PL2773118T3 (pl) 2021-03-22
KR102292589B1 (ko) 2021-08-24

Similar Documents

Publication Publication Date Title
KR102292589B1 (ko) 영상 복호화 방법 및 장치
KR102393177B1 (ko) 인트라 예측 정보 부호화 방법 및 장치
CN103931195B (zh) 用于对帧内预测模式进行解码的方法和设备
KR102393179B1 (ko) 복원 블록을 생성하는 방법 및 장치
CN103931186B (zh) 图像解码装置
HK1215641B (zh) 用於图像解码的方法和装置
HK1215639B (zh) 用於图像解码的方法和装置

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
PA0107 Divisional application

St.27 status event code: A-0-1-A10-A18-div-PA0107

St.27 status event code: A-0-1-A10-A16-div-PA0107

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

AMND Amendment
P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E601 Decision to refuse application
PE0601 Decision on rejection of patent

St.27 status event code: N-2-6-B10-B15-exm-PE0601

X091 Application refused [patent]
T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T13-X000 Administrative time limit extension granted

St.27 status event code: U-3-3-T10-T13-oth-X000

AMND Amendment
P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PX0901 Re-examination

St.27 status event code: A-2-3-E10-E12-rex-PX0901

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T13-X000 Administrative time limit extension granted

St.27 status event code: U-3-3-T10-T13-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T13-X000 Administrative time limit extension granted

St.27 status event code: U-3-3-T10-T13-oth-X000

PX0701 Decision of registration after re-examination

St.27 status event code: A-3-4-F10-F13-rex-PX0701

X701 Decision to grant (after re-examination)
GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 5