[go: up one dir, main page]

KR20190016981A - 인트라 예측 정보 부호화 방법 및 장치 - Google Patents

인트라 예측 정보 부호화 방법 및 장치 Download PDF

Info

Publication number
KR20190016981A
KR20190016981A KR1020190004893A KR20190004893A KR20190016981A KR 20190016981 A KR20190016981 A KR 20190016981A KR 1020190004893 A KR1020190004893 A KR 1020190004893A KR 20190004893 A KR20190004893 A KR 20190004893A KR 20190016981 A KR20190016981 A KR 20190016981A
Authority
KR
South Korea
Prior art keywords
intra prediction
prediction mode
mode
current block
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020190004893A
Other languages
English (en)
Other versions
KR102398642B1 (ko
Inventor
박신지
Original Assignee
(주)대가람
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=48168001&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20190016981(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by (주)대가람 filed Critical (주)대가람
Publication of KR20190016981A publication Critical patent/KR20190016981A/ko
Application granted granted Critical
Publication of KR102398642B1 publication Critical patent/KR102398642B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명에 따른 인트라 예측 모드 부호화 방법은 현재 블록의 인트라 예측 모드를 결정하고, 현재 블록의 MPM 후보자들의 유효성을 검사하여 유효한 MPM 후보자 수를 판단하고, 유효한 MPM 후보자 수가 미리 정해진 수보다 작은 경우, 추가 인트라 예측 모드를 MPM 후보자로 추가한다. 추가시 유효한 MPM 후보자의 방향성에 따라 MPM 후보자가 적응적으로 추가될 수 있다. 또한, 잔여 인트라 예측 모드 부호화시에도 유효한 MPM 후보자의 방향성에 따라 잔여 인트라 예측 모드가 재정렬된다.
따라서, 유효한 MPM 후보자의 방향성에 따라 MPM 후보자를 추가하거나 잔여 인트라 예측 모드를 재정렬하여 현재 블록의 인트라 예측 모드의 부호화 정보가 최소가 되게 하는 효과가 있다.

Description

인트라 예측 정보 부호화 방법 및 장치 {METHOD AND APPARATUS FOR ENCODING INTRA PREDICTION INFORMATION}
본 발명은 인트라 예측 정보 부호화 방법 및 장치에 관한 것으로, 보다 상세하게는 현재 블록의 좌측 블록 및 상측의 인트라 예측 모드에 따라 MPM 그룹을 생성하고, 현재 블록의 인트라 예측 모드 및 상기 MPM 그룹을 이용하여 현재 블록의 인트라 예측 정보를 결정하고, 상기 인트라 예측 정보를 부호화하는 방법 및 장치에 관한 것이다.
영상 데이터를 효율적으로 저장하거나 전송하기 위해서는 영상 데이터를 부호화하여야 한다. 영상 데이터를 부호화하는 기술로는 MPEG-1, MPEG-2, MPEG-4, H.264/MPEG-4 AVC(Advanced Video coding) 등이 있다. 상기 기술들은 하나의 픽처를 매크로 블록으로 나누고, 상기 매크로 블록 단위로 인트라 부호화를 수행할지 인터 부호화를 수행할지를 결정한 후, 상기 결정된 방식으로 각각의 매크로 블록을 부호화한다.
가장 최근의 영상 압축 기술인 H.264에서는 인트라 부호화의 효율을 높이기 위해 인트라 예측을 수행한다. 즉, 현재 블록을 부호화하기 위해서 참조 픽처를 참조하는 것이 아니라, 부호화하려는 현재 블록과 공간적으로 인접한 화소값을 이용하여 예측 블록을 생성한다. 구체적으로, 인접한 화소값을 이용하여 원본 매크로 블록과 비교하여 왜곡이 적은 인트라 예측 모드를 선택하고, 선택된 인트라 예측 모드 및 인접한 화소값을 이용하여 부호화하려는 현재 블록에 대한 예측 블록을 생성한다. 그리고, 현재 블록과 예측 블록의 차이신호들로 구성되는 잔차블록을 생성하고, 상기 잔차 블록을 변환, 양자화, 엔트로피 부호화한다. 또한, 상기 예측 블록을 생성하는데 이용된 인트라 예측 모드도 부호화한다.
그러나, H.264에서는 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드들의 방향성과 무관하게 현재 블록의 인트라 예측 모드를 부호화하여 부호화 효율이 떨어지는 문제점이 있다. 또한, 잔차블록의 부호화 효율을 증가시키기 위해 인트라 예측 모드의 수가 증가하는 경우에는 H.264의 인트라 예측 모드 부호화 방식보다 더욱 부호화 효율이 높은 인트라 예측 모드를 부호화하는 방식이 요구된다.
본 발명이 이루고자 하는 목적은 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드를 이용하여 MPM 그룹을 생성하고, 상기 MPM 그룹을 이용하여 현재 블록의 인트라 예측 모드를 부호화하는데 소요되는 비트수를 줄임으로서, 영상의 압축효율을 향상시키는 방법 및 장치를 제공하는 것이다.
상기 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 인트라 예측 정보 부호화 방법은 현재 블록의 인트라 예측 모드를 결정하고, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹을 구성하고, 현재 블록의 인트라 예측 모드 및 상기 제1 그룹을 이용하여 현재 블록의 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정하고, 상기 인트라 예측 모드 그룹 지시자에 따라 상기 예측모드 인덱스를 다른 방법으로 부호화하는 것을 특징으로 한다.
상기 인트라 예측 정보 부호화 방법은 상기 인트라 예측 모드 그룹 지시자에 따라, 상기 예측모드 인덱스의 이진화 방법이 달라지는 것을 특징으로 한다.
상기 인트라 예측 정보 부호화 방법은, 상기 인트라 예측 모드 그룹 지시자가 제1 그룹을 나타내는 경우, 상기 예측모드 인덱스는 truncated unary 방식으로 이진화되어 엔트로피 부호화되는 것을 특징으로 하는 인트라 예측 정보 부호화 방법.
상기 인트라 예측 정보 부호화 방법은 상기 제1 그룹은 3개의 인트라 예측 모드로 구성되고, 상기 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드가 모두 유효하지 않은 경우, 상기 제1 그룹은 플래너 모드, DC 모드 및 수직 모드로 구성되는 것을 특징으로 한다.
본 발명에 따른 인트라 예측 정보 부호화 방법은 현재 블록의 인트라 예측 모드를 결정하고, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹을 구성하고, 현재 블록의 인트라 예측 모드 및 상기 제1 그룹을 이용하여 현재 블록의 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정하고, 상기 인트라 예측 모드 그룹 지시자에 따라 상기 예측모드 인덱스를 다른 방법으로 부호화한다.
따라서, 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드에 따라 현재 블록의 인트라 예측 모드와 동일할 가능성이 높은 모드들을 제1 그룹에 포함시키고, 상기 제1 그룹을 이용하여 현재 블록의 부호화할 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정함으로써, 부호화할 인트라 예측 모드의 정보량을 줄일 수 있다. 또한, 상기 인트라 예측모드 그룹지시자에 따라 예측모드 인덱스의 부호화 방법을 달리함으로써, 인트라 예측 모드의 부호화 효율을 높일 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치를 나타내는 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 동영상 복호화 장치를 나타내는 블록 구성도이다.
도 3은 본 발명의 일 실시예에 따른 동영상 복호화 장치에서의 인트라 예측 블록을 생성하는 방법에 대해 설명한다.
도 4는 본 발명에 일 실시예에 따른 인트라 예측 모드를 나타내는 도면이다.
이하, 본 발명의 여러가지 실시예들을 예시적인 도면을 통해 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
본 발명에 따른 동영상 부호화 장치 및 동영상 복호화 장치는 개인용 컴퓨터, 노트북, 개인용 휴대 단말기, 휴대형 멀티미디어 플레이, 스마트폰, 무선 통신 단말기, TV 등의 사용자 단말기 또는 서비스를 제공하는 서버 등일 수 있다. 또한, 상기 동영상 부호화 장치 및 동영상 복호화 장치는 각종 기기 또는 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 부호화하거나 복호화하거나 부호화 또는 복호화를 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 장치일 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치를 나타내는 블록 구성도이다.
본 발명에 일 실시예에 따른 동영상 부호화 장치(100)는 인트라 예측부(110), 인터 예측부(120), 변환 및 양자화부(130), 엔트로피 부호화부(140), 역양자화 및 역변환부(150), 후처리부(160), 픽쳐 버퍼(170), 감산부(190) 및 가산부(195)를 포함한다.
인트라 예측부(110)는 현재 블록이 포함되는 픽쳐 또는 슬라이스의 복원된 화소들을 이용하여 인트라 예측 블록을 생성한다. 인트라 예측부(110)는 예측 부호화할 현재 블록의 크기에 따라 미리 설정된 개수의 인트라 예측 모드 중에 하나를 선택하고, 상기 선택된 인트라 예측 모드에 따라 예측 블록을 생성한다.
인터 예측부(120)는 상기 픽쳐 버퍼(170)에 저장된 참조 픽쳐들을 이용하여 움직임 추정을 수행하고, 움직임 예측을 위하여 참조 픽쳐 인덱스 및 움직임 벡터를 결정한다. 그리고, 상기 참조 픽쳐 인덱스 및 움직임 벡터를 이용하여 현재 블록의 인터 예측 블록을 생성한다.
변환 및 양자화부(130)는 현재 블록과 인트라 예측부(110) 또는 인터 예측부(120)에서 생성된 예측 블록의 잔차 블록을 변환하고 양자화한다. 상기 변환은 수평 및 수직 방향의 1차원 변환 매트릭스에 의해 행해진다. 인트라 예측의 잔차 블록은 변환 블록의 크기(즉, 잔차 블록의 크기) 및 인트라 예측 모드에 따라 결정되는 변환 매트릭스에 의해 변환된다. 인터 예측의 잔차 블록은 미리 정해진 변환 매트릭스에 의해 변환된다.
변환 및 양자화부(130)는 상기 변환 블록을 양자화 스텝 사이즈를 이용하여 양자화한다. 상기 양자화 스텝 사이즈는 미리 정해진 크기 이상의 부호화 단위별로 변경될 수 있다.
상기 양자화된 변환 블록은 역양자화 및 역변환부(150)와 엔트로피 부호화부(140)로 제공된다.
역양자화 및 역변환부(150)는 상기 양자화된 변환 블록을 역양자화하고, 상기 역양화된 변환 블록을 역변환하여 잔차 블록을 복원한다. 가산기는 상기 역양자화 및 역변환부(150)에 의해 복원된 잔차 블록과 인트라 예측부(110) 또는 인터 예측부(120)로부터의 예측 블록을 더하여 복원 블록을 생성한다.
후처리부(160)는 복원된 픽쳐의 화질을 개선하기 위한 것으로, 디블로킹 필터링부(161), 오프셋 적용부(162) 및 루프 필터링부(163)을 포함한다.
디블록킹 필터링부(161)는 예측 블록 및 변환 변환 블록의 경계에 디블록킹 필터를 적응적으로 적용한다. 상기 경계는 8x8 그리드에 놓여 있는 경계로 한정할 수 있다. 디블록킹 필터링부(161)는 필터링할 경계(boundary)를 결정하고, 상기 경계 강도(bounary strength)를 결정하고, 상기 경계 강도가 0보다 큰 경우에는 디블록킹 필터를 상기 경계에 적용할지 여부를 판단한다. 상기 경계를 필터링할 것으로 결정하면, 상기 경계에 적용할 필터를 선택하고, 선택된 필터로 경계를 필터링한다.
오프셋 적용부(162)는 디블록킹 필터링부를 거친 영상내의 화소와 원본 화소간의 차이값(distortion)을 감소시키기 위하여, 픽쳐 또는 슬라이스 단위로 오프셋을 적용할지 여부를 결정한다. 또는 슬라이스를 복수개의 오프셋 영역들로 분할하고, 각 오프셋 영역별로 오프셋 타입을 결정할 수 있다. 오프셋 타입은 미리 정해진 개수의 에지 오프셋 타입과 밴드 오프셋 타입을 포함할 수 있다. 오프셋 타입이 에지 오프셋 타입일 경우에는 각 화소가 속하는 에지 타입을 결정하여, 이에 대응하는 오프셋을 적용한다. 상기 에지 타입은 현재 화소와 인접하는 2개의 화소값의 분포를 기준으로 결정한다.
루프 필터링부(163)는 오프셋 적용부(162)를 거친 복원된 영상과 원본 영상을 비교한 값을 기초로 복원 영상을 적응적으로 루프 필터링한다. 코딩 단위로 복원 영상을 루프 필터링할지 여부가 결정된다. 각 코딩 유닛에 따라 적용될 루프 필터의 크기 및 계수는 달라질 수 있다. 코딩 유닛별 상기 적응적 루프 필터의 적용 여부를 나타내는 정보는 각 슬라이스 헤더에 포함될 수 있다. 색차 신호의 경우에는, 픽쳐 단위로 적응적 루프 필터의 적용 여부를 결정할 수 있다. 따라서, 색차 성분 각각이 필터링되는지 여부를 나타내는 정보를 슬라이스 헤더 또는 픽쳐 헤더가 포함할 수 있다.
픽쳐 버퍼(170)는 후처리된 영상 데이터를 후처리부(160)로부터 입력 받아 픽쳐(picture) 단위로 영상을 복원하여 저장한다. 픽쳐는 프레임 단위의 영상이거나 필드 단위의 영상일 수 있다.
엔트로피 부호화부(140)는 변환 및 양자화부(130)에 의해 양자화된 양자화 계수정보, 인트라 예측부(140)로부터 수신된 인트라 예측 정보, 인터 예측부(150)로부터 수신된 움직임 정보 등를 엔트로피 부호화한다. 엔트로피 부호화부(140)는 상기 양자화된 변환 블록의 계수들을 1차원의 양자화 계수정보들로 변환하기 위해, 스캔부(145)를 포함한다.
스캔부(145)는 상기 양자화된 변환 블록의 계수들을 1차원으로 변환하기 위한 스캔 타입을 결정한다. 스캔 타입은 방향성 인트라 예측 모드 및 변환 블록의 크기에 따라 달라질 수 있다. 양자화 계수들의 스캔순서는 역방향으로 스캔한다.
상기 양자화된 변호나 블록이 소정 크기보다 큰 경우에는, 상기 변환 계수들이 복수개의 하위블록으로 분할되어 스캔된다. 각각의 하위블록의 상기 변환 계수들에 적용되는 스캔타입은 동일하다. 상기 하위 블록들 사이에 적용되는 스캔 타입은 지그재그 스캔일 수도 있고, 상기 각 하위블록의 변환계수들에 적용되는 스캔 타입과 동일할 수도 있다.
도2는 본 발명의 일 실시예에 따른 동영상 복호화 장치(200)를 나타내는 블록 구성도이다.
본 발명의 일실시예에 따른 동영상 복호화 장치(200)는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트라 예측부(240), 인터 예측부(250), 후처리부(260), 픽쳐 버퍼(270), 가산부(280)를 포함한다.
엔트로피 복호화부(210)는 수신된 비트스트림을 복호하여, 인트라 예측 정보, 인터 예측 정보, 양자화 계수 정보 등으로 분리한다. 엔트로피 복호화부(210)는 복호화된 인트라 예측정보를 인트라 예측부(240)로 공급하고, 복호화된 인터 예측 정보를 인터 예측부(250)에 공급한다. 엔트로피 복호화(210)는 상기 복호화된 양자화 계수 정보를 역스캔하기 위한 역스캔부(215)를 포함한다.
역스캔부(215)는 상기 양자화 계수 정보를 2차원 배열의 양자화 블록으로 변환한다. 상기 변환을 위해 복수개의 스캔 타입 중에 하나를 선택한다. 스캔 타입은 방향성 인트라 예측 모드 및 변환 블록의 크기에 따라 달라질 수 있다. 양자화 계수들의 스캔순서는 역방향으로 스캔한다. 상기 양자화된 변호나 블록이 소정 크기보다 큰 경우에는, 상기 변환 계수들이 복수개의 하위블록으로 분할되어 스캔된다. 각각의 하위블록의 상기 변환 계수들에 적용되는 스캔타입은 동일하다. 상기 하위 블록들 사이에 적용되는 스캔 타입은 지그재그 스캔일 수도 있고, 상기 각 하위블록의 변환계수들에 적용되는 스캔 타입과 동일할 수도 있다.
역양자화부(220)는 현재 코딩 유닛의 양자화 스텝 사이즈 예측자를 결정하고, 상기 결정된 양자화 스텝 사이즈 예측자와 수신된 잔차 양자화 스텝 사이즈를 더하여 현재 코딩 유닛의 양자화 스텝 사이즈를 복원한다. 역양자화부(220)는 상기 양자화 스텝 사이즈와 역양자화 매트릭스를 이용하여 상기 양자화 블록을 역양자화한다. 상기 양자화 블록의 크기 및 예측모드에 따라 상기 양자화 매트릭스가 결정된다. 즉, 동일 크기의 양자화 블록에 대해서도 상기 현재 블록의 예측 모드 및 인트라 예측 모드 중 적어도 하나에 기초하여 양자화 매트릭스가 선택된다.
역변환부(230)는 역양자화된 변환 블록을 역변환하여 잔차 블록을 복원한다. 상기 역양자화 블록에 적용할 역변환 매트릭스는 예측 모드 및 인트라 예측 모드에 따라 결정될 수 있다.
가산부(280)는 역변환부(230)에 의해 복원된 잔차 블록과 인트라 예측부(240) 또는 인터 예측부(250)에 의해 생성되는 예측 블록을 더하여 복원 블록을 생성한다.
인트라 예측부(240)는 엔트로피 복호화부(210)로부터 수신된 인트라 예측 정보에 기초하여 현재 블록의 인트라 예측 모드를 복원한다. 그리고, 복원된 인트라 예측 모드에 따라 예측 블록을 생성한다.
인터 예측부(250)는 엔트로피 복호화부(210)로부터 수신된 인터 예측 정보에 기초하여 참조 픽쳐 인덱스와 움직임 벡터를 복원한다. 그리고, 상기 참조 픽쳐 인덱스와 움직임 벡터를 이용하여 현재 블록에 대한 예측 블록을 생성한다. 소수 정밀도의 움직임 보상이 적용될 경우에는 선택된 보간 필터를 적용하여 예측 블록을 생성한다.
후처리부(260)의 동작은 도 1의 후처리부(160)의 동작과 동일하므로 생략한다.
픽쳐 버퍼(270)는 후처리부(260)에 의해 후처리된 복호 영상을 픽쳐 단위로 저장한다.
도 3은 본 발명의 일 실시예에 따른 인트라 예측 블록을 생성하는 방법에 대해 설명한다.
먼저, 수신된 비트스트림으로부터 인트라 예측 정보를 엔트로피 복호화한다(S110).
인트라 예측 정보는 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 포함한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타낸다. 예측모드 인덱스는 인트라 예측 모드 그룹 지시자가 나타내는 인트라 예측 모드 그룹 내에서의 특정 인트라 예측 모드를 나타내는 정보이다.
상기 인트라 예측 모드 그룹 지시자는 unsigned integer의 형태로 수신될 수 있다. 이 경우, 상기 인트라 예측 모드 그룹 지시자는 엔트로피 복호화되지 않고 사용될 수도 있다. 또는 상기 인트라 예측 모드 그룹 지시자는 현재 슬라이스의 타입에 따라 적응적으로 엔트로피 부호화될 수도 있다. 예를 들어, 상기 슬라이스 타입에 따라 결정되는 컨텍스트를 이용하여 엔트로피 부호화될 수 있다. 따라서, 복원시에도 현재 슬라이스 타입에 따라 결정되는 컨텍스트를 이용하여 복원될 수 있다. 상기 예측 모드 인덱스는 MPM 그룹에 속하는 경우와, 그렇지 않은 경우에 서로 다른 방식으로 엔트로피 부호화된다. 따라서, 엔트로피 복호화시에도 서로 방식으로 엔트로피 복호화된다. 구체적으로, 상기 인트라 예측 모드 그룹 지시자가 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는 것을 나타내면, 상기 예측 모드 인덱스는 truncated Exp-Golomb code 또는 truncated unary 방식으로 이진화되어 엔트로피 부호화된다. 따라서, 엔트로피 복호화를 수행하여 이진화 정보를 얻은 후에, 상기 방식들을 이용하여 예측모드 인덱스를 복원한다. 상기 인트라 예측 모드 그룹 지시자가 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하지 않는 것을 나타내면, 상기 예측 모드 인덱스는 고정길이로 이진화될 수 있다. 따라서, 엔트로피 복호화를 수행하여 이진화 정보를 얻은 후에, 상기 예측모드 인덱스를 복원할 수 있다.
다음으로, 현재 블록에 인접한 블록들의 인트라 예측 모드를 이용하여 MPM 그룹을 생성하고, 상기 MPM 그룹을 이용하여 현재 블록의 인트라 예측모드를 복원한다(S120). MPM 그룹은 3개의 인트라 예측 모드로 구성된다. 도 4를 참조하여 설명한다. 도 4는 본 발명에 일 실시예에 따른 인트라 예측 모드를 나타내는 도면이다.
1) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 서로 다른 경우, 상기 MPM 그룹은 상기 2개의 인트라 예측 모드와 1개의 추가 인트라 예측 모드로 구성된다.
상기 2개의 인트라 예측 모드들 중 하나가 DC 모드이고, 다른 하나가 플래터 모드가 아닌 경우에는 상기 추가 인트라 예측 모드는 플래너 모드일 수 있다. 마찬가지로, 상기 두 개의 인트라 예측 모드 중 하나가 플래너 모드이고, 다른 하나가 DC 모드인 경우에는 상기 추가 인트라 예측 모드는 DC 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드인 경우에는 상기 추가 인트라 예측 모드는 수직 모드 또는 수평 모드일 수 있다.
상기 2개의 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는, 상기 추가 인트라 예측 모드는 상기 2개의 인트라 예측 모드 사이들 사이의 방향성을 갖는 인트라 예측모드이거나, DC 모드 또는 플래너 모드일 수 있다.
2) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드가 모두 존재하고 동일한 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다.
상기 인트라 예측 모드가 DC 모드 및 플래너 모드가 아닌 경우에는 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 인접하는 2개의 인트라 예측 모드들로 설정된다. 상기 인트라 예측 모드가 DC 모드이면, 상기 2개의 추가 인트라 예측 모드들은 플래너 모드 및 수직 모드일 수 있다.
3) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들 중 하나만이 존재하는 경우, 상기 MPM 그룹은 상기 인트라 예측 모드 및 2개의 추가 인트라 예측 모드들을 포함한다. 상기 2개의 추가 인트라 예측 모드들은 상기 인트라 예측 모드에 의해 결정된다.
4) 현재 블록의 상측 및 좌측 블록의 인트라 예측 모드들이 모두 존재하지 않는 경우, 상기 MPM 그룹은 DC 모드, 플래너 모드 및 수직 모드를 포함할 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내면, 상기 예측모드 인덱스가 나타내는 인트라 예측 모드를 상기 MPM 그룹에서 선택하여 현재 블록의 인트라 예측 모드로 결정한다. 상기 인트라 예측 모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는지 MPM 이외의 그룹에 속하는지를 나타내는 플래그 정보일 수 있다.
상기 인트라 예측 모드 그룹 지시자가 상기 MPM 그룹을 나타내지 않으면, 인트라 예측부(240)는 MPM 그룹에 속한 인트라 예측 모드들을 제외한 인트라 예측 모드들(이하, 잔여 인트라 예측 모드들이라 함) 중에서 상기 예측 모드 인덱스가 나타내는 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 결정한다. 상기 잔여 인트라 예측 모드들에 주어지는 예측 모드 인덱스는 MPM 그룹의 구성에 따라 달라진다. 즉, 상기 복호된 예측 모드 인덱스는 MPM 그룹의 구성에 따라 재배열된 잔여 인트라 예측 모드들의 인덱스를 나타낸다. 따라서, 상기 복호된 예측 모드 인덱스 및 MPM 그룹에 속하는 인트라 예측 모드들에 따라 현재 블록의 인트라 예측 모드를 상기 잔여 인트라 예측 모드들 중에서 선택한다.
구체적으로, 현재 블록의 상기 잔여 인트라 예측 모드들을 모드번호순으로 재배열하고, 상기 수신된 예측 모드 인덱스에 대응하는 순서의 인트라 예측 모드를 현재 블록의 인트라 예측 모드로 선택한다. 이 경우, 상기 잔여 인트라 예측 모드들을 재배열할 수도 있지만, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수도 있다.
상기 방법은 비방향성 모드 중 DC에 모드번호 2, 플래너 모드에 모드번호 34를 부여하고, 나머지 모드들에 방향성 모드들을 부여한 경우에 적용될 수 있다. 그러나, 현재 블록의 인트라 예측 모드로 플래너 모드 및 DC 모드가 선택될 확률이 다른 방향성 모드들보다 높기 때문에, 플래너 모드에 작은 모드번호(예를 들어, 모드 번호 0)을 적용하여 상기 방법을 적용할 수 있다. 이 경우, 다른 후순위 모드번호들의 모드번호가 1씩 증가하게 된다.
또는 비방향성 모드들에 가장 낮은 인덱스들을 부여할 수도 있다. 일예로, 현재 블록의 인트라 예측 모드가 플래너 모드이고, 상기 잔여 인트라 예측모드에 플래너 모드가 포함되는 경우, 상기 인트라 예측모드 인덱스는 0을 포함할 수 있다. 다른 예로, 상기 잔여 인트라 예측 모드에 플래너 모드 및 DC 모드가 포함되는 경우, 플래너 모드, DC 모드, 방향성 모드들 순으로 정렬된 상태에서 상기 예측모드 인덱스에 대응하는 순서의 인트라 예측모드가 현재 블록의 인트라 예측모드로 설정될 수 있다. 또 다른 예로, 플래너 모드에 모드번호 0, DC 모드에 모드번호 1을 할당하거나, DC 모드에 모드번호 0, 플래너 모드에 모드번호 1을 할당할 수도 있다. 이 경우, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수 있다.
다음으로, 현재 블록의 변환 크기를 나타내는 정보를 이용하여 예측 블록의 크기를 결정한다(S130).
상기 예측 블록의 크기가 현재 블록의 크기와 동일한 경우에는, 현재 블록의 인트라 예측 모드 및 현재 블록의 참조 화소들을 이용하여 예측 블록을 생성한다. 상기 참조화소는 현재 블록 이전에 복원된 화소들 또는 생성된 화소들이다.
상기 예측 블록의 크기가 현재 블록의 크기보다 작은 경우, 즉, 현재 블록이 복수개의 서브블록으로 나누어져 인트라 예측이 수행되는 경우에는, 각 서브블록의 예측 블록 생성시에 동일한 인트라 예측 모드(즉, 현재 블록의 인트라 예측 모드)가 이용된다. 또한, 복호화 순서상 두번째 이후의 서브블록들의 예측 블록은 선행하는 서브블록들의 복원화소를 이용하여 생성된다. 따라서, 각 서브블록 단위로 예측블록 생성, 잔차블록 생성 및 복원블록 생성이 끝난 후에 다음 순서의 서브블록의 예측블록이 생성된다.
다음으로, 상기 예측 블록의 크기에 대응하는 블록의 참조화소들이 모두 유효한지를 판단한다(S140). 상기 참조화소들은 이미 복호화되어 복원된 화소들이다. 상기 참조화소들 중 적어도 하나가 유효하지 않은 것으로 판단되는 경우에는 참조화소들을 생성한다(S150).
구체적으로, 모든 참조화소들이 유효하지 않은 것으로 판단되는 경우에는, 2L-1 값으로 대체한다. 여기서 L은 휘도성분의 계조를 나타내기 위한 비트수이다.
유효하지 않은 참조화소 위치를 기준으로 한쪽 방향으로만 유효한 참조화소가 존재하는 경우에는 상기 유효한 참조화소 중 가장 가까운 위치에 있는 참조화소를 복사하여 참조화소들을 생성한다.
유효하지 않은 참조화소 위치를 기준으로 유효한 참조화소가 양쪽방향 모두에 존재할 경우, 미리 정해진 방향의 가장 가까운 위치의 참조화소를 복사하거나, 각각의 방향으로 가장 인접한 참조화소 2개의 평균값으로 참조화소를 생성할 수 있다.
다음으로, 참조화소를 필터링할지 여부를 결정한다(S160). 상기 복원된 인트라 예측 모드 및 예측 블록의 크기에 따라 상기 참조화소들을 적응적으로 필터링한다(S170).
인트라 예측 모드가 DC 모드인 경우에는 참조화소들을 필터링하지 않는다. 인트라 예측 모드가 수직 모드 및 수평 모드인 경우에도 참조화소들을 필터링하지 않는다. 그러나, 인트라 예측 모드가 상기 수직 모드 및 수평 모드 이외의 방향성 모드들인 경우에는, 상기 인트라 예측 모드 및 상기 예측 블록의 크기에 따라 적응적으로 참조 화소를 필터링한다. 상기 예측 블록의 크기가 4x4인 경우에는, 인트라 예측 모드에 관계없이, 복잡도 감소를 위해 참조화소를 필터링하지 않을 수 있다. 상기 필터링은 참조화소들 사이의 화소값의 변화량을 스무딩(smoothing)하기 위한 것으로, low-pass filter를 이용한다. Low-pass filter는 3-tap 필터인 [1, 2, 1] 또는 5-tap 필터인 [1, 2, 4, 2, 1]일 수 있다. 상기 예측 블록의 크기가 8x8~32x32인 경우, 상기 예측블록의 크기가 커짐에 따라 더 많은 수의 인트라 예측 모드들에서 참조화소를 필터링한다.
다음으로, 인트라 예측 모드에 따라 예측 블록을 생성한다(S180). 상기 예측 블록에 사용되는 참조화소들은 상기 예측 블록의 크기 및 인트라 예측모드에 따라 적응적으로 필터링된 화소들일 수 있다.
DC 모드에서는 (x=0,..N-1, y=-1) 위치의 N개의 상측 참조화소들과 (x=-1, y=0,..M-1) 위치의 좌측 참조화소들 및 (x=-1, y=-1) 위치의 코너화소의 평균값이 예측블록의 예측화소로 결정될 수 있다. 그러나, 상기 참조화소들과 인접하는 위치의 예측 화소는 상기 평균값과 상기 예측화소에 인접하는 참조화소의 가중평균을 이용하여 생성할 수 있다. 플래너 모드에서도, 상기 DC 모드에서와 동일한 방식으로 예측화소를 생성할 수 있다.
수직 모드에서는 수직방향에 위치하는 참조화소가 예측화소가 된다. 그러나, 좌측 화소와 인접한 예측 화소들은 상기 수직방향의 참조화소와, 상기 좌측 참조화소들의 변화량을 이용하여 생성될 수 있다. 상기 변화량은 코너 참조화소와 상기 예측 화소에 인접하는 참조화소 사이의 변화량을 나타낸다. 수평 모드에서도 상기 수직모드와 방향만 틀릴 뿐, 동일한 방식으로 예측화소를 생성할 수 있다.
다음으로, 도 1의 동영상 부호화 장치에서의 현재 블록의 인트라 예측 모드를 부호화하는 방법에 대해 설명한다. 상기 방법은 도 1의 인트라 예측부(110) 및 엔트로피 부호화부(140)에서 수행될 수 있다.
먼저, 현재 블록의 인트라 예측 모드를 결정한다.
다음으로, 현재 블록의 MPM 그룹을 생성한다. MPM 그룹을 생성하는 방법은 상술된 도 2의 인트라 예측부(240)에서 MPM 그룹을 생성하는 방법과 동일하므로 생략한다.
다음으로, 현재 블록의 인트라 예측 모드가 MPM 그룹에 속하는 인트라 예측 모드에 포함되는지를 판단한다.
상기 인트라 예측 모드가 MPM 그룹에 포함되면, MPM 그룹을 나타내는 플래그(즉, 인트라 예측 모드 그룹 지시자)와 상기 MPM 그룹 내의 인트라 예측 모드를 특정하는 예측모드 인덱스를 결정한다.
상기 인트라 예측 모드가 MPM 그룹에 포함되지 않으면, MPM 그룹을 나타내지 않는 플래그와 상기 MPM 그룹에 인트라 예측 모드들을 제외한 인트라 예측 모드들(이하, 잔여 인트라 예측 모드들이라 함) 중에서 상기 인트라 예측 모드를 특정하는 예측 모드 인덱스를 결정한다.
상기 잔여 인트라 예측 모드들 중 현재 블록의 인트라 예측 모드를 나타내는 예측 모드 인덱스는 MPM 그룹의 구성에 따라 달라진다. 즉, 상기 예측 모드 인덱스는 MPM 그룹의 구성에 따라 재배열된 잔여 인트라 예측 모드들의 인덱스를 나타낸다. 따라서, 상기 현재 블록의 인트라 예측 모드 및 MPM 그룹에 속하는 인트라 예측 모드들에 따라 상기 예측 모드 인덱스가 결정된다.
구체적으로, 현재 블록의 상기 잔여 인트라 예측 모드들을 모드번호순으로 재배열하고, 상기 현재 블록의 인트라 예측 모드의 순서를 상기 예측 모드 인덱스로 결정할 수 있다. 또는 상기 잔여 인트라 예측 모드들을 재배열할 수도 있지만, 현재 블록의 인트라 예측 모드의 모드번호와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 상기 예측 모드 인덱스를 결정할 수도 있다.
상기 방법은 비방향성 모드 중 DC에 모드번호 2, 플래너 모드에 모드번호 34를 부여하고, 나머지 모드들에 방향성 모드들을 부여한 경우에 적용될 수 있다. 그러나, 현재 블록의 인트라 예측 모드로 플래너 모드 및 DC 모드가 선택될 확률이 다른 방향성 모드들보다 높기 때문에, 플래너 모드에 작은 모드번호(예를 들어, 모드 번호 0)을 적용하여 상기 방법을 적용할 수 있다. 이 경우, 다른 후순위 모드번호들의 모드번호가 1씩 증가하게 된다. 또는 비방향성 모드들에 가장 낮은 인덱스들을 부여할 수도 있다. 일예로, 현재 블록의 인트라 예측 모드가 플래너 모드이고, 상기 잔여 인트라 예측모드에 플래너 모드가 포함되는 경우, 상기 인트라 예측모드 인덱스는 0을 포함할 수 있다. 다른 예로, 상기 잔여 인트라 예측 모드에 플래너 모드 및 DC 모드가 포함되는 경우, 플래너 모드, DC 모드, 방향성 모드들 순으로 정렬된 상태에서 상기 예측모드 인덱스에 대응하는 순서의 인트라 예측모드가 현재 블록의 인트라 예측모드로 설정될 수 있다. 또 다른 예로, 플래너 모드에 모드번호 0, DC 모드에 모드번호 1을 할당하거나, DC 모드에 모드번호 0, 플래너 모드에 모드번호 1을 할당할 수도 있다. 이 경우, 현재 블록의 상기 인트라 예측 모드 인덱스와 상기 MPM 그룹에 속하는 인트라 예측 모드번호를 비교하여 현재 블록의 인트라 예측 모드를 결정할 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
110:인트라 예측부

Claims (1)

  1. 현재 블록의 인트라 예측 모드를 결정하는 단계;
    상기 현재 블록의 좌측 및 상측 블록의 유효한 인트라 예측 모드를 이용하여 제1 그룹을 구성하는 단계;
    상기 현재 블록의 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 결정하는 단계; 및
    상기 인트라 예측 모드 그룹 지시자와 예측모드 인덱스를 부호화하는 단계를 포함하고,
    상기 인트라 예측모드 그룹 지시자는 현재 블록의 인트라 예측 모드가 상기 제1 그룹에 속하는지, 제2 그룹에 속하는지를 나타내고,
    상기 인트라 예측 모드 그룹 지시자에 따라 상기 예측모드 인덱스가 다른 방법으로 이진화되어 엔트로피 부호화되고,
    인트라 예측 모드들 중 플래너 모드(Planar mode)에 0의 예측모드 인덱스가 할당되고, DC 모드에 1의 예측모드 인덱스가 할당되고,
    상기 현재 블록의 좌측 및 상측 블록의 인트라 예측 모드가 모두 유효하고 서로 동일하지 않은 경우, 상기 제1 그룹은 상기 좌측 및 상측 블록의 인트라 예측모드들을 포함하고, 상기 좌측 및 상측 블록의 인트라 예측 모드에 따라 결정되는 1개의 인트라 예측모드가 상기 제1 그룹에 추가되고,
    상기 좌측 및 상측 블록의 인트라 예측 모드들이 플래너 모드가 아닌 경우, 상기 추가되는 인트라 예측 모드는 플래너 모드이고,
    상기 인트라 예측 모드 그룹 지시자가 제1 그룹을 나타내는 경우, 상기 예측모드 인덱스는 truncated unary 방식으로 이진화되어 엔트로피 부호화되는 것을 특징으로 하는 인트라 예측 정보 부호화 방법.
KR1020190004893A 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치 Active KR102398642B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20110108452 2011-10-24
KR1020110108452 2011-10-24
KR1020120041299A KR101947657B1 (ko) 2011-10-24 2012-04-20 인트라 예측 정보 부호화 방법 및 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020120041299A Division KR101947657B1 (ko) 2011-10-24 2012-04-20 인트라 예측 정보 부호화 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20190016981A true KR20190016981A (ko) 2019-02-19
KR102398642B1 KR102398642B1 (ko) 2022-05-17

Family

ID=48168001

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020120041299A Active KR101947657B1 (ko) 2011-10-24 2012-04-20 인트라 예측 정보 부호화 방법 및 장치
KR20120041316A Withdrawn KR20130045153A (ko) 2011-10-24 2012-04-20 영상 복호화 장치
KR1020190004893A Active KR102398642B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치
KR1020190004896A Active KR102398644B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치
KR1020190004895A Active KR102398643B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치
KR1020190004894A Active KR102393177B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020120041299A Active KR101947657B1 (ko) 2011-10-24 2012-04-20 인트라 예측 정보 부호화 방법 및 장치
KR20120041316A Withdrawn KR20130045153A (ko) 2011-10-24 2012-04-20 영상 복호화 장치

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020190004896A Active KR102398644B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치
KR1020190004895A Active KR102398643B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치
KR1020190004894A Active KR102393177B1 (ko) 2011-10-24 2019-01-14 인트라 예측 정보 부호화 방법 및 장치

Country Status (17)

Country Link
US (6) US9025662B2 (ko)
EP (6) EP2945381B1 (ko)
JP (5) JP5728671B2 (ko)
KR (6) KR101947657B1 (ko)
CN (9) CN104883571B (ko)
CY (1) CY1123086T1 (ko)
DK (2) DK3917147T3 (ko)
ES (5) ES3042398T3 (ko)
HR (1) HRP20201328T1 (ko)
HU (4) HUE051688T2 (ko)
LT (1) LT2942954T (ko)
MX (1) MX2014003543A (ko)
PL (4) PL2942954T3 (ko)
PT (2) PT2942954T (ko)
RS (1) RS60704B1 (ko)
SI (2) SI3917147T1 (ko)
WO (2) WO2013062196A1 (ko)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL3125552T3 (pl) 2010-08-17 2018-09-28 M&K Holdings Inc. Sposób przywracania trybu intra-predykcji
US11284072B2 (en) 2010-08-17 2022-03-22 M&K Holdings Inc. Apparatus for decoding an image
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130049525A (ko) * 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
CN103220506B (zh) 2012-01-19 2015-11-25 华为技术有限公司 一种编解码方法和设备
US9210438B2 (en) * 2012-01-20 2015-12-08 Sony Corporation Logical intra mode naming in HEVC video coding
PL3723369T3 (pl) 2012-01-20 2025-02-24 Dolby Laboratories Licensing Corporation Urządzenie do odwzorowywania trybu predykcji wewnątrzramkowej
CN105122809A (zh) * 2013-04-11 2015-12-02 联发科技股份有限公司 帧内编码的预测值派生的方法和装置
CN112188204B (zh) 2014-10-31 2024-04-05 三星电子株式会社 使用高精度跳过编码的视频编码设备和视频解码设备及其方法
CN119364025A (zh) * 2015-06-11 2025-01-24 杜比实验室特许公司 使用自适应去块滤波编码和解码图像的方法及介质
WO2016204478A1 (ko) * 2015-06-15 2016-12-22 엘지전자(주) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CA2997097C (en) * 2015-08-28 2022-06-07 Kt Corporation Method and device for processing video signal
CN118900323A (zh) * 2015-11-19 2024-11-05 Lx半导体科技有限公司 图像编码/解码方法和图像数据的传输方法
EP3361726A1 (en) 2015-11-24 2018-08-15 Samsung Electronics Co., Ltd. Method and device for video decoding and method and device for video encoding
CN113810711B (zh) 2016-04-29 2024-05-10 世宗大学校产学协力团 用于对图像信号进行编码和解码的方法和装置
CN117221579A (zh) 2016-06-22 2023-12-12 Lx 半导体科技有限公司 图像编码/解码设备以及传输图像数据的设备
EP3972256B1 (en) * 2016-06-24 2024-01-03 KT Corporation Adaptive reference sample filtering for intra prediction using distant pixel lines
EP3301915A1 (en) * 2016-09-30 2018-04-04 Thomson Licensing Method and apparatus for omnidirectional video coding with adaptive intra most probable modes
CN116916017A (zh) * 2016-10-28 2023-10-20 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
CN117041568A (zh) * 2016-11-29 2023-11-10 韩国电子通信研究院 图像编码/解码方法和用于存储比特流的记录介质
US11184609B2 (en) * 2017-01-02 2021-11-23 Electronics And Telecommunications Research Institute Image encoding/decoding method, apparatus, and recording medium for storing bitstream
KR102719084B1 (ko) 2017-01-02 2024-10-16 한양대학교 산학협력단 참조 화소에 대하여 적응적 필터링을 수행하기 위한 화면 내 예측 방법 및 장치
US12184846B2 (en) 2017-01-02 2024-12-31 Industry-University Cooperation Foundation Hanyang University Intra prediction method and apparatus for performing adaptive filtering on reference pixel
WO2018124853A1 (ko) * 2017-01-02 2018-07-05 한양대학교 산학협력단 참조 화소에 대하여 적응적 필터링을 수행하기 위한 화면 내 예측 방법 및 장치
US10742975B2 (en) 2017-05-09 2020-08-11 Futurewei Technologies, Inc. Intra-prediction with multiple reference lines
CA3105474A1 (en) * 2017-07-03 2019-01-10 Industry-University Cooperation Foundation Hanyang University Method and device for decoding image by using partition unit including additional region
CN115174910B (zh) * 2017-07-24 2025-05-09 艾锐势有限责任公司 帧内模式jvet编译方法
US10999604B2 (en) * 2018-04-13 2021-05-04 Mediatek Inc. Adaptive implicit transform setting
CN110620926B (zh) * 2018-06-20 2022-01-04 浙江大学 一种帧内预测模式编解码方法及装置
US20210144402A1 (en) * 2018-06-21 2021-05-13 Kt Corporation Video signal processing method and device
KR20200006932A (ko) * 2018-07-11 2020-01-21 인텔렉추얼디스커버리 주식회사 화면내 예측 기반의 비디오 코딩 방법 및 장치
KR20200033210A (ko) 2018-09-19 2020-03-27 한국전자통신연구원 화면 내 예측 모드 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
AU2019358651B2 (en) * 2018-10-12 2025-01-09 Guangdong Oppo Mobile Telecommunications Corp. , Ltd. Method for encoding/decoding image signal and device for same
CN110062227B (zh) * 2019-03-12 2021-04-27 浙江大华技术股份有限公司 帧内预测模式的编解码方法、装置、设备和可读存储介质
EP3922018A4 (en) 2019-03-12 2022-06-08 Zhejiang Dahua Technology Co., Ltd. IMAGE CODING SYSTEMS AND METHODS
CN113892268B (zh) * 2019-03-20 2024-12-03 现代自动车株式会社 基于预测模式估计的帧内预测装置和方法
CN114145017B (zh) * 2019-06-13 2025-05-09 Lg电子株式会社 基于帧内预测模式转换的图像编码/解码方法和设备，以及发送比特流的方法
EP3991408A1 (en) * 2019-06-25 2022-05-04 InterDigital VC Holdings France, SAS Method and apparatus for coding/decoding picture data
WO2021034160A1 (ko) 2019-08-22 2021-02-25 엘지전자 주식회사 매트릭스 인트라 예측 기반 영상 코딩 장치 및 방법
WO2025150789A1 (ko) * 2024-01-08 2025-07-17 주식회사 엘엑스 세미콘 인트라 예측 기반 영상 코딩 방법 및 그 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100798446B1 (ko) * 2001-09-26 2008-01-28 에스케이 텔레콤주식회사 적응적 더블 스캔 방법

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1167271C (zh) * 2001-01-10 2004-09-15 华为技术有限公司 压缩编码图像传输中的误码处理方法
KR100754972B1 (ko) * 2002-05-28 2007-10-01 샤프 가부시키가이샤 화상 인트라-예측 모드 추정, 전달과 편성을 위한 방법 및시스템
US7236524B2 (en) * 2002-05-28 2007-06-26 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode communication
KR100750110B1 (ko) * 2003-04-22 2007-08-17 삼성전자주식회사 ４×４인트라 휘도 예측 모드 결정방법 및 장치
EP1558039A1 (en) * 2004-01-21 2005-07-27 Deutsche Thomson-Brandt Gmbh Method and apparatus for generating/evaluating prediction information in picture signal encoding/decoding
WO2006004331A1 (en) * 2004-07-07 2006-01-12 Samsung Electronics Co., Ltd. Video encoding and decoding methods and video encoder and decoder
CN100348051C (zh) * 2005-03-31 2007-11-07 华中科技大学 一种增强型帧内预测模式编码方法
US8885707B2 (en) * 2005-04-01 2014-11-11 Panasonic Corporation Image decoding apparatus and image decoding method
KR100739714B1 (ko) 2005-07-06 2007-07-13 삼성전자주식회사 인트라 예측 모드 결정 방법 및 장치
CN101087427B (zh) * 2006-06-06 2011-04-06 北京大学深圳研究生院 一种h.264标准的帧内预测模式选择方法
CN101622877A (zh) * 2006-12-22 2010-01-06 高通股份有限公司 用于有效空间帧内可预测性确定（或评估）的系统和方法
WO2009037726A1 (ja) * 2007-09-18 2009-03-26 Fujitsu Limited 動画像符号化装置および動画像復号装置
US20090161757A1 (en) * 2007-12-21 2009-06-25 General Instrument Corporation Method and Apparatus for Selecting a Coding Mode for a Block
JP5111127B2 (ja) * 2008-01-22 2012-12-26 キヤノン株式会社 動画像符号化装置及びその制御方法、並びに、コンピュータプログラム
JP4958825B2 (ja) * 2008-03-28 2012-06-20 キヤノン株式会社 動画像符号化装置及びその制御方法、コンピュータプログラム
CN100596202C (zh) * 2008-05-30 2010-03-24 四川虹微技术有限公司 一种快速帧内模式选择方法
JP5597968B2 (ja) * 2009-07-01 2014-10-01 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
CN101621692B (zh) * 2009-07-27 2011-04-20 宁波大学 一种基于预测模式的h.264/avc视频信息隐藏方法
KR101510108B1 (ko) * 2009-08-17 2015-04-10 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR101379186B1 (ko) 2009-08-21 2014-04-10 에스케이 텔레콤주식회사 인트라 예측 부호화/복호화 방법 및 장치
JP5818800B2 (ja) * 2009-10-05 2015-11-18 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 符号化方法及び復号化方法
KR20110113561A (ko) * 2010-04-09 2011-10-17 한국전자통신연구원 적응적인 필터를 이용한 인트라 예측 부호화/복호화 방법 및 그 장치
US9083974B2 (en) * 2010-05-17 2015-07-14 Lg Electronics Inc. Intra prediction modes
PL3125552T3 (pl) * 2010-08-17 2018-09-28 M&K Holdings Inc. Sposób przywracania trybu intra-predykcji
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
HUE035495T2 (en) 2011-06-28 2018-05-02 Samsung Electronics Co Ltd Method and apparatus for coding video and method apparatus for decoding video, accompanied with intra prediction
GB2494468B (en) * 2011-09-12 2014-01-15 Canon Kk Method and device for encoding or decoding information representing prediction modes
EP3139596B1 (en) * 2011-09-13 2019-09-25 HFI Innovation Inc. Method and apparatus for intra mode coding in hevc
KR101575777B1 (ko) 2011-10-07 2015-12-14 주식회사 팬택자산관리 복수개의 후보 화면 내 예측 모드를 이용한 화면 내 예측 모드의 부호화/복호화 방법 및 이러한 방법을 사용하는 장치
WO2013062195A1 (ko) * 2011-10-24 2013-05-02 (주)인터앱 인트라 예측 모드 복호화 방법 및 장치
RS61146B1 (sr) 2011-10-24 2020-12-31 Innotive Ltd Postupak i aparat za dekodiranje slike
KR20130049525A (ko) * 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
KR102271872B1 (ko) * 2011-12-05 2021-07-01 엘지전자 주식회사 인트라 예측 방법 및 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100798446B1 (ko) * 2001-09-26 2008-01-28 에스케이 텔레콤주식회사 적응적 더블 스캔 방법

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Chuang et al. "Luma Intra Prediction Mode Coding".Joint Collaborative Team on Video Coding (JCT-VC), JCTVC-F062 (2011.07.22)* *
Toru Kumakura, "Fixing the number of mpm candidates", JCTVC-F340 (2011.7.14.)* *

Also Published As

Publication number Publication date
CN103931180A (zh) 2014-07-16
EP3917147A1 (en) 2021-12-01
EP2945381A3 (en) 2016-04-13
KR101947657B1 (ko) 2019-02-14
HUE051695T2 (hu) 2021-03-29
EP2942954A2 (en) 2015-11-11
KR102398643B1 (ko) 2022-05-17
EP2945376A2 (en) 2015-11-18
KR20130045153A (ko) 2013-05-03
JP2015159574A (ja) 2015-09-03
US9148671B2 (en) 2015-09-29
CN107277503A (zh) 2017-10-20
CN104935932B (zh) 2018-05-04
EP2942954A3 (en) 2016-03-30
US9060179B2 (en) 2015-06-16
US20150110186A1 (en) 2015-04-23
CN104935930A (zh) 2015-09-23
WO2013062196A1 (ko) 2013-05-02
LT2942954T (lt) 2020-08-10
CN104935932A (zh) 2015-09-23
JP2015130684A (ja) 2015-07-16
CN104935931A (zh) 2015-09-23
CN104883570B (zh) 2016-11-16
US9025663B1 (en) 2015-05-05
PL2945381T3 (pl) 2021-03-08
HK1214053A1 (zh) 2016-07-15
HK1214900A1 (zh) 2016-08-05
HUE051689T2 (hu) 2021-03-29
SI3917147T1 (sl) 2025-11-28
JP6047616B2 (ja) 2016-12-21
CN104935930B (zh) 2018-05-01
EP2942956B1 (en) 2020-06-03
JP6047614B2 (ja) 2016-12-21
ES2805038T3 (es) 2021-02-10
US20150110185A1 (en) 2015-04-23
CN107181942B (zh) 2020-03-10
HK1214899A1 (zh) 2016-08-05
CN104883571A (zh) 2015-09-02
KR20190016983A (ko) 2019-02-19
PL2942954T3 (pl) 2021-03-08
CN107277503B (zh) 2021-06-18
EP2797324A4 (en) 2015-11-11
HK1214704A1 (zh) 2016-07-29
EP3917147B1 (en) 2025-07-16
HK1214705A1 (zh) 2016-07-29
JP6047615B2 (ja) 2016-12-21
DK2942954T3 (da) 2020-08-24
CY1123086T1 (el) 2021-10-29
ES2805039T3 (es) 2021-02-10
PT3917147T (pt) 2025-10-16
EP2942956A2 (en) 2015-11-11
EP2945381A2 (en) 2015-11-18
RS60704B1 (sr) 2020-09-30
US20150110187A1 (en) 2015-04-23
EP2945376B1 (en) 2020-06-03
HRP20201328T1 (hr) 2021-02-05
PL2945376T3 (pl) 2021-03-08
KR102398644B1 (ko) 2022-05-17
KR102398642B1 (ko) 2022-05-17
WO2013062192A1 (ko) 2013-05-02
ES3042398T3 (en) 2025-11-20
HUE051687T2 (hu) 2021-03-29
US20140219344A1 (en) 2014-08-07
JP2014526853A (ja) 2014-10-06
ES2805055T3 (es) 2021-02-10
US9025662B2 (en) 2015-05-05
CN104883570A (zh) 2015-09-02
CN107181942A (zh) 2017-09-19
PT2942954T (pt) 2020-08-05
DK3917147T3 (da) 2025-09-15
PL2942956T3 (pl) 2021-03-08
CN103931180B (zh) 2017-06-09
EP2945376A3 (en) 2016-04-06
EP2942956A3 (en) 2016-03-30
JP5905613B2 (ja) 2016-04-20
CN104935929B (zh) 2018-05-25
HK1214901A1 (zh) 2016-08-05
SI2942954T1 (sl) 2020-10-30
CN104935929A (zh) 2015-09-23
US8953683B2 (en) 2015-02-10
JP2015159575A (ja) 2015-09-03
KR102393177B1 (ko) 2022-05-02
US9615105B2 (en) 2017-04-04
KR20130045149A (ko) 2013-05-03
ES2805041T3 (es) 2021-02-10
CN104883571B (zh) 2018-04-03
US20150215641A1 (en) 2015-07-30
US20140119443A1 (en) 2014-05-01
MX2014003543A (es) 2015-01-22
KR20190016984A (ko) 2019-02-19
KR20190016982A (ko) 2019-02-19
JP2015159576A (ja) 2015-09-03
HUE051688T2 (hu) 2021-03-29
CN104935931B (zh) 2016-05-04
EP2797324A1 (en) 2014-10-29
EP2942954B1 (en) 2020-06-03
JP5728671B2 (ja) 2015-06-03
EP2945381B1 (en) 2020-06-03

Similar Documents

Publication Publication Date Title
KR102398642B1 (ko) 인트라 예측 정보 부호화 방법 및 장치
JP6974516B2 (ja) 復元ブロック生成方法、予測情報符号化方法、ビットストリーム、コンピュータ可読媒体
KR102393180B1 (ko) 복원 블록을 생성하는 방법 및 장치
KR20130045148A (ko) 인트라 예측 모드에서의 영상 부호화 방법 및 장치
CN108093261B (zh) 图像解码装置

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
PA0107 Divisional application

Comment text: Divisional Application of Patent

Patent event date: 20190114

Patent event code: PA01071R01D

Filing date: 20120420

Application number text: 1020120041299

PA0201 Request for examination
PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20190321

Patent event code: PE09021S01D

AMND Amendment
E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20200117

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20190321

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

AMND Amendment
PX0901 Re-examination

Patent event code: PX09011S01I

Patent event date: 20200117

Comment text: Decision to Refuse Application

Patent event code: PX09012R01I

Patent event date: 20190923

Comment text: Amendment to Specification, etc.

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20200416

Patent event code: PE09021S01D

PN2301 Change of applicant

Patent event date: 20200814

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

PX0601 Decision of rejection after re-examination

Comment text: Decision to Refuse Application

Patent event code: PX06014S01D

Patent event date: 20210514

Comment text: Notification of reason for refusal

Patent event code: PX06013S01I

Patent event date: 20200416

Comment text: Amendment to Specification, etc.

Patent event code: PX06012R01I

Patent event date: 20200320

Comment text: Decision to Refuse Application

Patent event code: PX06011S01I

Patent event date: 20200117

Comment text: Amendment to Specification, etc.

Patent event code: PX06012R01I

Patent event date: 20190923

Comment text: Notification of reason for refusal

Patent event code: PX06013S01I

Patent event date: 20190321

X601 Decision of rejection after re-examination
J201 Request for trial against refusal decision
PJ0201 Trial against decision of rejection

Patent event date: 20210616

Comment text: Request for Trial against Decision on Refusal

Patent event code: PJ02012R01D

Patent event date: 20210514

Comment text: Decision to Refuse Application

Patent event code: PJ02011S01I

Patent event date: 20200117

Comment text: Decision to Refuse Application

Patent event code: PJ02011S01I

Appeal kind category: Appeal against decision to decline refusal

Decision date: 20220218

Appeal identifier: 2021101001518

Request date: 20210616

J301 Trial decision

Free format text: TRIAL NUMBER: 2021101001518; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20210616

Effective date: 20220218

PJ1301 Trial decision

Patent event code: PJ13011S01D

Patent event date: 20220218

Comment text: Trial Decision on Objection to Decision on Refusal

Appeal kind category: Appeal against decision to decline refusal

Request date: 20210616

Decision date: 20220218

Appeal identifier: 2021101001518

PS0901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
PS0701 Decision of registration after remand of revocation

Patent event date: 20220228

Patent event code: PS07012S01D

Comment text: Decision to Grant Registration

Patent event date: 20220218

Patent event code: PS07011S01I

Comment text: Notice of Trial Decision (Remand of Revocation)

PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20220511

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20220512

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20250429

Start annual number: 4

End annual number: 4