+

KR20210100217A - 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치 - Google Patents

휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치 Download PDF

Info

Publication number
KR20210100217A
KR20210100217A KR1020217024782A KR20217024782A KR20210100217A KR 20210100217 A KR20210100217 A KR 20210100217A KR 1020217024782 A KR1020217024782 A KR 1020217024782A KR 20217024782 A KR20217024782 A KR 20217024782A KR 20210100217 A KR20210100217 A KR 20210100217A
Authority
KR
South Korea
Prior art keywords
prediction mode
intra prediction
block
mode
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020217024782A
Other languages
English (en)
Other versions
KR102403793B1 (ko
Inventor
전용준
박승욱
임재현
김정선
박준영
최영희
성재원
전병문
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020227017690A priority Critical patent/KR102540995B1/ko
Publication of KR20210100217A publication Critical patent/KR20210100217A/ko
Application granted granted Critical
Publication of KR102403793B1 publication Critical patent/KR102403793B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/004—Predictors, e.g. intraframe, interframe coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

본 문서에 따른 디코딩 장치에 의한 영상 디코딩 방법은 현재 색차 블록에 관련된 현재 휘도 블록에 대한 화면 내 예측 모드를 결정하는 단계, 상기 현재 휘도 블록에 대한 화면 내 예측 모드와 화면 내 예측 모드에 관한 정보를 기반으로 상기 현재 색차 블록에 대한 화면 내 예측 모드를 도출하는 단계, 및 상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 단계를 포함하되, 상기 화면 내 예측 모드에 관한 정보는 코드워드를 기반으로 획득되고, 상기 현재 색차 블록에 대해 LM 모드가 가용함을 기반으로 상기 코드워드의 처음 두 비트들은 컨텍스트 기반 코딩을 기반으로 디코딩되고, 상기 코드워드의 나머지 비트들은 바이패스 기반 코딩을 기반으로 디코딩되고, 상기 LM 모드는 상기 현재 휘도 블록의 복원 샘플을 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 화면 내 예측 모드일 수 있다.

Description

휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치{INTRA PREDICTION METHOD OF CHROMINANCE BLOCK USING LUMINANCE SAMPLE, AND APPARATUS USING SAME}
본 발명은 영상 복호화 방법 및 장치에 관한 것으로 더욱 상세하게는 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치에 관한 것이다.
최근 HD(High Definition) 영상 및 UHD(Ultra High Definition) 영상과 같은 고해상도, 고품록을 받으질의 영상에 대한 수요가 다양한 응용 분야에서 증가하고 있다. 영상 데이터가 고해상도, 고품질이 될수록 기존의 영상 데이터에 비해 상대적으로 데이터량이 증가하기 때문에 기존의 유무선 광대역 회선과 같은 매체를 이용하여 영상 데이터를 전송하거나 기존의 저장 매체를 이용해 저장하는 경우, 전송 비용과 저장 비용이 증가하게 된다. 영상 데이터가 고해상도, 고품질화 됨에 따라 발생하는 이러한 문제들을 해결하기 위해서는 고효율의 영상 압축 기술들이 활용될 수 있다.
영상 압축 기술로 현재 픽쳐의 이전 또는 이후 픽쳐로부터 현재 픽쳐에 포함된 화소값을 예측하는 화면 간 예측 기술, 현재 픽쳐 내의 화소 정보를 이용하여 현재 픽쳐에 포함된 화소값을 예측하는 화면 내 예측 기술, 출현 빈도가 높은 값에 짧은 부호를 할당하고 출현 빈도가 낮은 값에 긴 부호를 할당하는 엔트로피 부호화 기술 등 다양한 기술이 존재하고 이러한 영상 압축 기술을 이용해 영상 데이터를 효과적으로 압축하여 전송 또는 저장할 수 있다.
본 발명의 목적은 영상 부복호화 효율을 증가시키기 위한 색차 블록의 화면 내 예측 방법을 제공하는 것이다.
또한, 본 발명의 다른 목적은 영상 부복호화 효율을 증가시키기 위한 색차 블록의 화면 내 예측 방법을 수행하는 장치를 제공하는 것이다.
상술한 본 발명의 목적을 달성하기 위한 본 발명의 일 측면에 따른 영상 복호화 방법은 색차 블록이 LM(Luma Estimated Mode)을 사용한 경우 LM 매핑 테이블을 기초로 상기 색차 블록의 화면 내 예측 모드를 산출하는 단계와 산출된 상기 색차 블록의 화면 내 예측 모드를 기초로 상기 색차 블록의 예측 블록을 생성하는 단계를 포함할 수 있다. 상기 영상 복호화 방법은 상기 색차 블록이 LM을 사용하지 않은 경우 비 LM 매핑 테이블을 기초로 상기 색차 블록의 화면 내 예측 모드를 산출하는 단계를 포함할 수 있다. 상기 비 LM 매핑 테이블은 0번 화면 내 예측 모드에 플레이너 모드, 1번 화면 내 예측 모드에 DC 모드, 2번 내지 34번 화면 내 예측 모드에 방향성 화면 내 예측 모드가 매핑된 경우,
Figure pat00001
일 수 있다. 상기 영상 복호화 방법은 상기 색차 블록이 LM을 사용하였는지 여부에 대한 정보를 전송하는 단계를 더 포함할 수 있다. 상기 영상 복호화 방법은 상기 색차 블록의 화면 내 예측 모드를 부호화한 코드워드 정보를 수신하는 단계를 더 포함할 수 있다. 상기 코드워드 정보는 상기 색차 블록의 LM 사용 여부에 따라 서로 다른 코드워드 정보가 매핑된 코드워드 매핑 테이블을 기초로 산출된 코드워드 정보일 수 있다. 상기 코드워드 매핑 테이블은
Figure pat00002
일 수 있다. 코드워드 매핑 테이블은 LM 또는 DM에 해당하는 intra_chroma_pred_mode의 코드워드에 대해서는 컨텍스트 복호화를 수행하고, LM 또는 DM을 제외한 나머지 화면 내 예측 모드에 해당하는 intra_chroma_pred_mode의 코드워드는 LM 또는 DM에서 사용되는 코드워드의 비트수를 제외한 코드워드의 나머지 비트에 대해서는 바이패스 부호화를 수행할 수 있다. 상기 코드워드 매핑 테이블은 LM을 사용하여 화면 내 예측을 수행할 경우 코드워드를 구성하는 두개의 비트에 대해서는 컨텍스트 복호화를 수행하고 상기 컨텍스트 복호화를 수행하는 코드워드를 제외한 나머지 비트에 대해서는 바이패스 복호화를 수행하고, LM을 사용하지 않고 화면 내 예측을 수행할 경우 코드워드를 구성하는 하나의 비트에 대해서는 컨텍스트 복호화를 수행하고 상기 컨텍스트 복호화를 수행하는 코드워드를 제외한 나머지 비트에 대해서는 바이패스 복호화를 수행할 수 있다.
상기 LM 매핑 테이블은 0번 화면 내 예측 모드에 플레이너 모드, 1번 화면 내 예측 모드에 DC 모드, 2번 내지 34번 화면 내 예측 모드에 방향성 화면 내 예측 모드, 35번 화면 내 예측 모드에 LM이 매핑된 경우,
Figure pat00003
일 수 있다. 상기 LM은 휘도 블록의 픽셀을 선형 보간하여 산출된 보간된 휘도 샘플값을 기초로 색차 블록의 픽셀을 산출하는 화면 내 예측 방법일 수 있다.
상술한 본 발명의 목적을 달성하기 위한 본 발명의 일 측면에 따른 영상 복호 장치는 색차 블록이 LM(Luma Estimated Mode)을 사용하였는지 여부에 대한 정보를 판단하는 LM 사용 여부 판단부와 상기 LM 사용 여부 판단부에 의해 산출된 LM 모드 사용 여부 정보를 기초로 색차 블록 화면 내 예측 모드를 산출하는 색차 블록 화면 내 예측 모드 산출부를 포함할 수 있다. 상기 색차 블록 화면 내 예측 모드 산출부는 상기 색차 블록의 LM 사용 여부에 따라 서로 다른 코드워드 정보가 매핑된 코드워드 매핑 테이블을 기초로 코드워드를 산출하는 색차 블록 화면 내 예측 모드 산출부일 수 있다. 상기 코드워드 매핑 테이블은,
Figure pat00004
일 수 있다. 상기 코드워드 매핑 테이블은 LM 또는 DM에 해당하는 intra_chroma_pred_mode의 코드워드에 대해서는 컨텍스트 복호화를 수행하고, LM 또는 DM을 제외한 나머지 화면 내 예측 모드에 해당하는 intra_chroma_pred_mode의 코드워드는 LM 또는 DM에서 사용되는 코드워드의 비트수를 제외한 코드워드의 나머지 비트에 대해서는 바이패스 부호화를 수행할 수 있다. 상기 코드워드 매핑 테이블은 LM을 사용하여 화면 내 예측을 수행할 경우 코드워드를 구성하는 두개의 비트에 대해서는 컨텍스트 복호화를 수행하고 상기 컨텍스트 복호화를 수행하는 코드워드를 제외한 나머지 비트에 대해서는 바이패스 복호화를 수행하고, LM을 사용하지 않고 화면 내 예측을 수행할 경우 코드워드를 구성하는 하나의 비트에 대해서는 컨텍스트 복호화를 수행하고 상기 컨텍스트 복호화를 수행하는 코드워드를 제외한 나머지 비트에 대해서는 바이패스 복호화를 수행할 수 있다.
상기 색차 블록 화면 내 예측 모드 산출부는 색차 블록이 LM을 사용한 경우 LM 매핑 테이블을 기초로 상기 색차 블록의 화면 내 예측 모드를 산출하고 상기 색차 블록이 LM을 사용하지 않은 경우 비 LM 매핑 테이블을 기초로 상기 색차 블록의 화면 내 예측 모드를 산출하는 색차 블록 화면 내 예측 모드 산출부일 수 있다. 상기 LM 매핑 테이블은,
0번 화면 내 예측 모드에 플레이너 모드, 1번 화면 내 예측 모드에 DC 모드, 2번 내지 34번 화면 내 예측 모드에 방향성 화면 내 예측 모드, 35번 화면 내 예측 모드에 LM이 매핑된 경우,
*
Figure pat00005
일 수 있다. 상기 비 LM 매핑 테이블은,
0번 화면 내 예측 모드에 플레이너 모드, 1번 화면 내 예측 모드에 DC 모드, 2번 내지 34번 화면 내 예측 모드에 방향성 화면 내 예측 모드가 매핑된 경우,
Figure pat00006
일 수 있다. 상기 LM은 휘도 블록의 픽셀을 선형 보간하여 산출된 보간된 휘도 샘플값을 기초로 색차 블록의 픽셀을 산출하는 화면 내 예측 방법일 수 있다.
상술한 바와 같이 본 발명의 실시예에 따른 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치에 따르면, 색차 블록의 화면 내 예측 모드 정보는 LM을 사용하여 화면 내 예측을 수행하였는지 여부에 대해 판단하여 서로 다른 매핑 테이블을 사용하여 색차 블록의 화면 내 예측을 수행할 수 있다.
도 1은 본 발명의 실시예에 따른 영상 부호화 장치를 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 영상 복호화기를 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 휘도 샘플과 색차 샘플의 위치를 나타낸 개념도이다.
도 4는 본 발명의 실시예에 따른 현재 블록의 주변 및 내부에 존재하는 휘도 샘플값을 나타낸 것이다.
도 5는 본 발명의 실시예에 따른 방향성 화면 내 예측 모드를 나타낸 것이다.
도 6은 본 발명의 실시예에 따른 색차 블록의 화면 내 예측 모드를 산출하는 방법을 나타낸 순서도이다.
도 7은 본 발명의 실시예에 색차 블록의 화면 내 예측 모드를 복호화하는 예측부의 일부를 나타낸 개념도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다거나 "직접 접속되어"있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 실시예에 따른 영상 부호화 장치를 나타낸 블록도이다.
도 1을 참조하면, 영상 부호화 장치(100)는 픽쳐 분할부(105), 예측부(110), 변환부(115), 양자화부(120), 재정렬부(125), 엔트로피 부호화부(130), 역양자화부(135), 역변환부(140), 필터부(145) 및 메모리(150)를 포함할 수 있다.
도 1에 나타난 각 구성부들은 영상 부호화 장치에서 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시한 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성 단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수개의 구성부로 나뉘어져 기능을 수행할 수 있고 이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벋어나지 않는 한 본 발명의 권리범위에 포함된다.
또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.
픽쳐 분할부(105)는 입력된 픽쳐를 적어도 하나의 처리 단위로 분할할 수 있다. 이때, 처리 단위는 예측 단위(Prediction Unit: PU)일 수도 있고, 변환 단위(Transform Unit: TU)일 수도 있으며, 부호화 단위(Coding Unit: CU)일 수도 있다. 픽쳐 분할부(105)에서는 하나의 픽쳐에 대해 복수의 부호화 단위, 예측 단위 및 변환 단위의 조합으로 분할하고 소정의 기준(예를 들어, 비용 함수)으로 하나의 부호화 단위, 예측 단위 및 변환 단위 조합을 선택하여 픽쳐를 부호화 할 수 있다.
예를 들어, 하나의 픽쳐는 복수개의 부호화 단위로 분할될 수 있다. 픽쳐에서 부호화 단위를 분할하기 위해서는 쿼드 트리 구조(Quad Tree Structure)와 같은 재귀적인 트리 구조를 사용할 수 있는데 하나의 영상 또는 최대 크기 부호화 단위를 루트로 하여 다른 부호화 단위로 분할되는 부호화 유닛은 분할된 부호화 단위의 개수만큼의 자식 노드를 가지고 분할될 수 있다. 일정한 제한에 따라 더이상 분할되지 않는 부호화 단위는 리프 노드가 된다. 즉, 하나의 코딩 유닛에 대하여 정방형 분할만이 가능하다고 가정하는 경우, 하나의 부호화 단위는 최대 4개의 다른 부호화 단위로 분할될 수 있다.
이하, 본 발명의 실시예에서는 부호화 단위의 의미를 부호화를 하는 단위라는 의미뿐만 아니라 복호화를 하는 단위의 의미로 사용할 수 있다.
예측 단위는 하나의 부호화 단위 내에서 동일한 크기의 적어도 하나의 정사각형 또는 직사각형 등의 형태를 가지고 분할되거나 하나의 부호화 단위 내에서 분할된 예측 단위 중 하나의 예측 단위의 형태가 다른 예측 단위의 형태와 다른 형태를 가지고 분할될 수 있다.
부호화 단위를 기초로 화면 내 예측을 수행하는 예측 단위를 생성시 최소 부호화 단위가 아닌 경우, 복수의 예측 단위(NxN)으로 분할하지 않고 화면 내 예측을 수행할 수 있다.
예측부(110)는 화면 간 예측을 수행하는 화면 간 예측부와 화면 내 예측을 수행하는 화면 내 예측부를 포함할 수 있다. 예측 단위에 대해 화면 간 예측을 사용할 것인지 또는 화면 내 예측을 수행할 것인지를 결정하고, 각 예측 방법에 따른 구체적인 정보(예컨대, 화면 내 예측 모드, 움직임 벡터, 참조 픽쳐 등)를 결정할 수 있다. 이때, 예측이 수행되는 처리 단위와 예측 방법 및 구체적인 내용이 정해지는 처리 단위는 다를 수 있다. 예컨대, 예측의 방법과 예측 모드 등은 예측 단위로 결정되고, 예측의 수행은 변환 단위로 수행될 수도 있다. 생성된 예측 블록과 원본 블록 사이의 잔차값(잔차 블록)은 변환부(115)로 입력될 수 있다. 또한, 예측을 위해 사용한 예측 모드 정보, 움직임 벡터 정보 등은 잔차값과 함께 엔트로피 부호화부(130)에서 부호화되어 복호화기에 전달될 수 있다. 특정한 부호화 모드를 사용할 경우, 예측부(110)를 통해 예측 블록을 생성하지 않고, 원본 블록을 그대로 부호화하여 복호화부에 전송하는 것도 가능하다
화면 간 예측부는 현재 픽쳐의 이전 픽쳐 또는 이후 픽쳐 중 적어도 하나의 픽쳐의 정보를 기초로 예측 단위를 예측할 수 있다. 화면 간 예측부는 참조 픽쳐 보간부, 움직임 예측부, 움직임 보상부가 포함할 수 있다.
참조 픽쳐 보간부에서는 메모리(150)로부터 참조 픽쳐 정보를 제공받고 참조 픽쳐에서 정수 화소 이하의 화소 정보를 생성할 수 있다. 휘도 화소의 경우, 1/4 화소 단위로 정수 화소 이하의 화소 정보를 생성하기 위해 필터 계수를 달리하는 DCT 기반의 8탭 보간 필터(DCT-based Interpolation Filter)가 사용될 수 있다. 색차 신호의 경우 1/8 화소 단위로 정수 화소 이하의 화소 정보를 생성하기 위해 필터 계수를 달리하는 DCT 기반의 4탭 보간 필터(DCT-based Interpolation Filter)가 사용될 수 있다.
움직임 예측부는 참조 픽쳐 보간부에 의해 보간된 참조 픽쳐를 기초로 움직임 예측을 수행할 수 있다. 움직임 벡터를 산출하기 위한 방법으로 FBMA(Full search-based Block Matching Algorithm), TSS(Three Step Search), NTS(New Three-Step Search Algorithm) 등 다양한 방법이 사용될 수 있다. 움직임 벡터는 보간된 화소를 기초로 1/2 또는 1/4 화소 단위의 움직임 벡터값을 가질 수 있다. 움직임 예측부에서는 움직임 예측 방법을 다르게 하여 현재 예측 단위를 예측할 수 있다. 움직임 예측 방법으로 스킵(Skip) 방법, 머지(Merge) 방법, AMVP(Advanced Motion Vector Prediction)방법 등 다양한 방법이 사용될 수 있다.
이하, 본 발명의 실시예에서는 AMVP 방법을 사용하여 화면 간 예측을 수행시 후보 예측 움직임 벡터 리스트를 구성하는 방법에 대해 개시한다.
화면 내 예측부는 현재 픽쳐 내의 화소 정보인 현재 블록 주변의 참조 픽셀정보를 기초로 예측 단위를 생성할 수 있다. 현재 예측 단위의 주변 블록이 화면 간 예측을 수행한 블록이어서, 참조 픽셀이 화면 간 예측을 수행한 픽셀일 경우, 화면 간 예측을 수행한 블록에 포함되는 참조 픽셀을 주변의 화면 내 예측을 수행한 블록의 참조 픽셀 정보로 대체하여 사용할 수 있다. 즉, 참조 픽셀이 가용하지 않는 경우, 가용하지 않은 참조 픽셀 정보를 가용한 참조 픽셀 중 적어도 하나의 참조 픽셀로 대체하여 사용할 수 있다.
화면 내 예측에서 예측 모드는 참조 픽셀 정보를 예측 방향에 따라 사용하는 방향성 예측 모드와 예측을 수행시 방향성 정보을 사용하지 않는 비방향성 모드를 가질 수 있다. 휘도 정보를 예측하기 위한 모드와 색차 정보를 예측하기 위한 모드가 상이할 수 있고, 색차 정보를 예측하기 위해 휘도 정보를 예측한 화면 내 예측 모드 정보 또는 예측된 휘도 신호 정보를 활용할 수 있다.
화면 내 예측을 수행시 예측 단위의 크기와 변환 단위의 크기가 동일할 경우, 예측 단위의 좌측에 존재하는 픽셀, 좌측 상단에 존재하는 픽셀, 상단에 존재하는 픽셀을 기초로 예측 단위에 대한 화면 내 예측을 수행하지만, 화면 내 예측을 수행시 예측 단위의 크기와 변환 단위의 크기가 상이할 경우, 변환 단위를 기초로 한 참조 픽셀을 이용하여 화면 내 예측을 수행할 수 있다. 또한, 최소 부호화 단위에 대해서만 NxN 분할을 사용하는 화면 내 예측을 사용할 수 있다.
화면 내 예측 방법은 예측 모드에 따라 참조 화소에 MDIS(Mode Dependent Intra Smoothing) 필터를 적용한 후 예측 블록을 생성할 수 있다. 참조 화소에 적용되는 MDIS 필터의 종류는 상이할 수 있다. 화면 내 예측 방법을 수행하기 위해 현재 예측 단위의 화면 내 예측 모드는 현재 예측 단위의 주변에 존재하는 예측 단위의 화면 내 예측 모드로부터 예측할 수 있다. 주변 예측 단위로부터 예측된 모드 정보를 이용하여 현재 예측 단위의 예측 모드를 예측하는 경우, 현재 예측 단위와 주변 예측 단위의 화면 내 예측 모드가 동일할 경우, 소정의 플래그 정보를 이용하여 현재 예측 단위와 주변 예측 단위의 예측 모드가 동일하다는 정보를 전송할 수 있고, 만약, 현재 예측 단위와 주변 예측 단위의 예측 모드가 상이할 경우, 엔트로피 부호화를 수행하여 현재 블록의 예측 모드 정보를 부호화할 수 있다.
또한, 예측부(110)에서 생성된 예측 단위을 기초로 예측을 수행한 예측 단위와 예측 단위의 원본 블록과 차이값인 잔차값(Residual) 정보를 포함하는 잔차 블록이 생성될 수 있다. 생성된 잔차 블록은 변환부(115)로 입력될 수 있다. 변환부(115)에서는 원본 블록과 예측부(110)를 통해 생성된 예측 단위의 잔차값(residual) 정보를 포함한 잔차 블록을 DCT(Discrete Cosine Transform) 또는 DST(Discrete Sine Transform)와 같은 변환 방법을 사용하여 변환시킬 수 있다. 잔차 블록을 변환하기 위해 DCT를 적용할지 DST를 적용할지는 잔차 블록을 생성하기 위해 사용된 예측 단위의 화면 내 예측 모드 정보를 기초로 결정할 수 있다.
양자화부(120)는 변환부(115)에서 주파수 영역으로 변환된 값들을 양자화할 수 있다. 블록에 따라 또는 영상의 중요도에 따라 양자화 계수는 변할 수 있다. 양자화부(120)에서 산출된 값은 역양자화부(135)와 재정렬부(125)에 제공될 수 있다.
재정렬부(125)는 양자화된 잔차값에 대해 계수값의 재정렬을 수행할 수 있다.
재정렬부(125)는 계수 스캐닝(Coefficient Scanning) 방법을 통해 2차원의 블록 형태 계수를 1차원의 벡터 형태로 변경할 수 있다. 예를 들어, 재정렬부(125)에서는 지그재그 스캔(Zig-Zag Scan)방법을 이용하여 DC 계수부터 고주파수 영역의 계수까지 스캔하여 1차원 벡터 형태로 변경시킬 수 있다. 변환 단위의 크기 및 화면 내 예측 모드에 따라 지그 재그 스캔 방법이 아닌 2차원의 블록 형태 계수를 열 방향으로 스캔하는 수직 스캔 방법, 2차원의 블록 형태 계수를 행 방향으로 스캔하는 수평 스캔 방법이 사용될 수 있다. 즉, 변환 단위의 크기 및 화면 내 예측 모드에 따라 지그재그 스캔, 수직 방향 스캔 및 수평 방향 스캔 중 어떠한 스캔 방법이 사용될지 여부를 결정할 수 있다.
엔트로피 부호화부(130)는 재정렬부(125)에 의해 산출된 값들을 기초로 엔트로피 부호화를 수행할 수 있다. 엔트로피 부호화는 예를 들어, 지수 골롬(Exponential Golomb), VLC(Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 다양한 부호화 방법을 사용할 수 있다.
엔트로피 부호화부(130)는 재정렬부(125) 및 예측부(110)로부터 부호화 단위의 잔차값 계수 정보 및 블록 타입 정보, 예측 모드 정보, 분할 단위 정보, 예측 단위 정보 및 전송 단위 정보, 움직임 벡터 정보, 참조 프레임 정보, 블록의 보간 정보, 필터링 정보 등 다양한 정보를 부호화할 수 있다.
엔트로피 부호화부(130)에서는 재정렬부(125)에서 입력된 부호화 단위의 계수값을 엔트로피 부호화할 수 있다.
역양자화부(135) 및 역변환부(140)에서는 양자화부(120)에서 양자화된 값들을 역양자화하고 변환부(115)에서 변환된 값들을 역변환한다. 역양자화부(135) 및 역변환부(140)에서 생성된 잔차값(Residual)은 예측부(110)에 포함된 움직임 추정부, 움직임 보상부 및 인트라 예측부를 통해서 예측된 예측 단위와 합쳐져 복원 블록(Reconstructed Block)을 생성할 수 있다.
필터부(145)는 디블록킹 필터, 오프셋 보정부, ALF(Adaptive Loop Filter)중 적어도 하나를 포함할 수 있다.
디블록킹 필터(145)는 복원된 픽쳐에서 블록간의 경계로 인해 생긴 블록 왜곡을 제거할 수 있다. 디블록킹을 수행할지 여부를 판단하기 위해 블록에 포함된 몇 개의 열 또는 행에 포함된 픽셀을 기초로 현재 블록에 디블록킹 필터 적용할지 여부를 판단할 수 있다. 블록에 디블록킹 필터를 적용하는 경우 필요한 디블록킹 필터링 강도에 따라 강한 필터(Strong Filter) 또는 약한 필터(Weak Filter)를 적용할 수 있다. 또한 디블록킹 필터를 적용함에 있어 수직 필터링 및 수평 필터링을 수행시 수평 방향 필터링 및 수직 방향 필터링이 병행 처리되도록 할 수 있다.
오프셋 보정부는 디블록킹을 수행한 영상에 대해 픽셀 단위로 원본 영상과의 오프셋을 보정할 수 있다. 특정 픽쳐에 대한 오프셋 보정을 수행하기 위해 영상에 포함된 픽셀을 일정한 수의 영역으로 구분한 후 오프셋을 수행할 영역을 결정하고 해당 영역에 오프셋을 적용하는 방법 또는 각 픽셀의 에지 정보를 고려하여 오프셋을 적용하는 방법을 사용할 수 있다.
ALF (Adaptive Loop Filter)는 필터링한 복원 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. 영상에 포함된 픽셀을 소정의 그룹으로 나눈 후 해당 그룹에 적용될 하나의 필터를 결정하여 그룹마다 차별적으로 필터링을 수행할 수 있다. ALF를 적용할지 여부에 관련된 정보는 휘도 신호는 부호화 단위(Coding Unit, CU) 별로 전송될 수 있고, 각각의 블록에 따라 적용될 ALF의 크기 및 계수는 달라질 수 있다. ALF는 다양한 형태를 가질 수 있으며, 필터에 그에 따라 포함되는 계수의 갯수도 달라질 수 있다. 이러한 ALF의 필터링 관련 정보(필터 계수 정보, ALF On/Off 정보, 필터 형태 정보)는 비트스트림에서 소정의 파라메터 셋에 포함되어 전송될 수 있다.
메모리(150)는 필터부(145)를 통해 산출된 복원 블록 또는 픽쳐를 저장할 수 있고, 저장된 복원 블록 또는 픽쳐는 화면 간 예측을 수행 시 예측부(110)에 제공될 수 있다.
도 2는 본 발명의 실시예에 따른 영상 복호화기를 나타낸 블록도이다.
도 2를 참조하면, 영상 복호화기(200)는 엔트로피 복호화부(2110), 재정렬부(215), 역양자화부(220), 역변환부(225), 예측부(230), 필터부(235), 메모리(240)가 포함될 수 있다.
영상 부호화기에서 영상 비트스트림이 입력된 경우, 입력된 비트스트림은 영상 부호화기와 반대의 절차로 복호화될 수 있다.
엔트로피 복호화부(210)는 영상 부호화기의 엔트로피 부호화부에서 엔트로피 부호화를 수행한 것과 반대의 절차로 엔트로피 복호화를 수행할 수 있고 엔트로피 복호화부에서 엔트로피 복호화를 수행한 잔차값은 재정렬부(215)로 입력될 수 있다.
엔트로피 복호화부(210)에서는 부호화기에서 수행된 화면 내 예측 및 화면 간 예측에 관련된 정보를 복호화할 수 있다. 전술한 바와 같이 영상 부호화기에서 화면 내 예측 및 화면 간 예측을 수행시 소정의 제약이 있는 경우, 이러한 제약을 기초로 한 엔트로피 복호화를 수행해 현재 블록에 대한 화면 내 예측 및 화면 간 예측에 관련된 정보를 제공받을 수 있다.
재정렬부(215)는 엔트로피 복호화부(210)에서 엔트로피 복호화된 비트스트림을 부호화부에서 재정렬한 방법을 기초로 재정렬을 수행할 수 있다. 1차원 벡터 형태로 표현된 계수들을 다시 2차원의 블록 형태의 계수로 복원하여 재정렬할 수 있다. 재정렬부에서는 부호화부에서 수행된 계수 스캐닝에 관련된 정보를 제공받고 해당 부호화부에서 수행된 스캐닝 순서에 기초하여 역으로 스캐닝하는 방법을 통해 재정렬을 수행할 수 있다.
역양자화부(220)는 부호화기에서 제공된 양자화 파라미터와 재정렬된 블록의 계수값을 기초로 역양자화를 수행할 수 있다.
역변환부(225)는 영상 부호화기에서 수행한 양자화 결과에 대해 변환부에서 수행한 DCT 및 DST에 대해 역DCT 및 역 DST를 수행할 수 있다. 역변환은 영상 부호화기에서 결정된 전송 단위를 기초로 수행될 수 있다. 영상 부호화기의 변환부에서는 DCT와 DST는 예측 방법, 현재 블록의 크기 및 예측 방향 등 복수의 정보에 따라 선택적으로 수행될 수 있고, 영상 복호화기의 역변환부(225)에서는 영상 부호화기의 변환부에서 수행된 변환 정보를 기초로 역변환을 수행할 수 있다.
변환을 수행시 변환 단위가 아닌 부호화 단위를 기준으로 변환을 수행할 수 있다.
예측부(230)는 엔트로피 복호화부(210)에서 제공된 예측 블록 생성 관련 정보와 메모리(240)에서 제공된 이전에 복호화된 블록 또는 픽쳐 정보를 기초로 예측 블록을 생성할 수 있다.
전술한 바와 같이 영상 부호화기에서의 동작과 동일하게 화면 내 예측을 수행시 예측 단위의 크기와 변환 단위의 크기가 동일할 경우, 예측 단위의 좌측에 존재하는 픽셀, 좌측 상단에 존재하는 픽셀, 상단에 존재하는 픽셀을 기초로 예측 단위에 대한 화면 내 예측을 수행하지만, 화면 내 예측을 수행시 예측 단위의 크기와 변환 단위의 크기가 상이할 경우, 변환 단위를 기초로 한 참조 픽셀을 이용하여 화면 내 예측을 수행할 수 있다. 또한, 최소 부호화 단위에 대해서만 NxN 분할을 사용하는 화면 내 예측을 사용할 수 있다.
예측부(230)는 예측 단위 판별부, 화면 간 예측부 및 화면 내 예측부를 포함할 수 있다. 예측 단위 판별부는 엔트로피 복호화부에서 입력되는 예측 단위 정보, 화면 내 예측 방법의 예측 모드 정보, 화면 간 예측 방법의 움직임 예측 관련 정보 등 다양한 정보를 입력 받고 현재 부호화 단위에서 예측 단위를 구분하고, 예측 단위가 화면 간 예측을 수행하는지 아니면 화면 내 예측을 수행하는지 여부를 판별할 수 있다. 화면 간 예측부는 영상 부호화기에서 제공된 현재 예측 단위의 화면 간 예측에 필요한 정보를 이용해 현재 예측 단위가 포함된 현재 픽쳐의 이전 픽쳐 또는 이후 픽쳐 중 적어도 하나의 픽쳐에 포함된 정보를 기초로 현재 예측 단위에 대한 화면 간 예측을 수행할 수 있다.
화면 간 예측을 수행하기 위해 부호화 단위를 기준으로 해당 부호화 단위에 포함된 예측 단위의 움직임 예측 방법이 스킵 모드(Skip Mode), 머지 모드(Merge 모드), AMVP 모드(AMVP Mode) 중 어떠한 방법인지 여부를 판단할 수 있다.
이하, 본 발명의 실시예에서는 AMVP 방법을 사용하여 화면 간 예측을 수행시 후보 예측 움직임 벡터 리스트를 구성하는 방법에 대해 개시한다.
화면 내 예측부는 현재 픽쳐 내의 화소 정보를 기초로 예측 블록을 생성할 수 있다. 예측 단위가 화면 내 예측을 수행한 예측 단위인 경우, 영상 부호화기에서 제공된 예측 단위의 화면 내 예측 모드 정보를 기초로 화면 내 예측을 수행할 수 있다. 화면 내 예측부에는 MDIS 필터, 참조 화소 보간부, DC 필터를 포함할 수 있다. MDIS 필터는 현재 블록의 참조 화소에 필터링을 수행하는 부분으로써 현재 예측 단위의 예측 모드에 따라 필터의 적용 여부를 결정하여 적용할 수 있다. 영상 부호화기에서 제공된 예측 단위의 예측 모드 및 MDIS 필터 정보를 이용하여 현재 블록의 참조 화소에 MDIS 필터링을 수행할 수 있다. 현재 블록의 예측 모드가 MDIS 필터링을 수행하지 않는 모드일 경우, MDIS 필터는 적용되지 않을 수 있다.
참조 화소 보간부는 예측 단위의 예측 모드가 참조 화소를 보간한 화소값을 기초로 화면 내 예측을 수행하는 예측 단위일 경우, 참조 화소를 보간하여 정수값 이하의 화소 단위의 참조 화소을 생성할 수 있다. 현재 예측 단위의 예측 모드가 참조 화소를 보간하지 않고 예측 블록을 생성하는 예측 모드일 경우 참조 화소는 보간되지 않을 수 있다. DC 필터는 현재 블록의 예측 모드가 DC 모드일 경우 필터링을 통해서 예측 블록을 생성할 수 있다.
복원된 블록 또는 픽쳐는 필터부(235)로 제공될 수 있다. 필터부(235)는 디블록킹 필터, 오프셋 보정부, ALF를 포함할 수 있다.
영상 부호화기로부터 해당 블록 또는 픽쳐에 디블록킹 필터를 적용하였는지 여부에 대한 정보 및 디블록킹 필터를 적용하였을 경우, 강한 필터를 적용하였는지 또는 약한 필터를 적용하였는지에 대한 정보를 제공받을 수 있다. 영상 복호화기의 디블록킹 필터에서는 영상 부호화기에서 제공된 디블록킹 필터 관련 정보를 제공받고 영상 복호화기에서 해당 블록에 대한 디블록킹 필터링을 수행할 수 있다. 영상 부호화기에서와 마찬가지로 우선 수직 디블록킹 필터링 및 수평 디블록킹 필터링을 수행하되, 겹치는 부분에 있어서는 수직 디블록킹 및 수평 디블록킹 중 적어도 하나를 수행할 수 있다. 수직 디블록킹 필터링 및 수평 디블록킹 필터링이 겹치는 부분에서 이전에 수행되지 못한 수직 디블록킹 필터링 또는 수평 디블록킹 필터링이 수행될 수 있다. 이러한 디블록킹 필터링 과정을 통해서 디블록킹 필터링의 병행 처리(Parallel Processing)이 가능하다.
오프셋 보정부는 부호화시 영상에 적용된 오프셋 보정의 종류 및 오프셋 값정보 등을 기초로 복원된 영상에 오프셋 보정을 수행할 수 있다.
ALF는 필터링을 수행 후 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. 부호화기로부터 제공된 ALF 적용 여부 정보, ALF 계수 정보 등을 기초로 부호화 단위에 ALF를 적용할 수 있다. 이러한 ALF 정보는 특정한 파라메터 셋에 포함되어 제공될 수 있다.
메모리(240)는 복원된 픽쳐 또는 블록을 저장하여 참조 픽쳐 또는 참조 블록으로 사용할 수 있도록 할 수 있고 또한 복원된 픽쳐를 출력부로 제공할 수 있다.
전술한 바와 같이 이하, 본 발명의 실시예에서는 설명의 편의상 코딩 유닛(Coding Unit)을 부호화 단위라는 용어로 사용하지만, 부호화 뿐만 아니라 복호화를 수행하는 단위가 될 수도 있다.
또한, 이하, 본 발명의 실시예에서 후술할 영상 부호화 방법 및 영상 복호화 방법은 도 1 및 도 2에서 전술한 영상 부호화기 및 영상 복호화기에 포함된 각 구성부에서 수행될 수 있다. 구성부의 의미는 하드웨어적인 의미 뿐만 아니라 알고리즘을 통해 수행될 수 있는 소프트웨어적인 처리 단위도 포함할 수 있다.
도 3은 본 발명의 실시예에 따른 휘도 샘플과 색차 샘플의 위치를 나타낸 개념도이다.
도 3을 참조하면 휘도 샘플(300)과 색차 샘플(320)의 샘플링 비율과 샘플링 위치는 다를 수 있다.
휘도 샘플(300)과 색차 샘플(320)은 다양한 포멧으로 하나의 영상을 구성할 수 있다. 예를 들어, 영상의 휘도 샘플(300)과 색차 샘플(320)이 YUV 4:2:0 샘플링을 사용하는 경우, 휘도 샘플(300) 사이에 색차 샘플(320) Cb, Cr이 위치할 수 있다. 따라서, 휘도 샘플(300)과 색차 샘플(320)의 위치는 일치하지 않고 색차 샘플(320)의 수평 및 수직 방향 데이터의 양은 휘도 샘플의 1/2가 된다.
본 발명의 실시예에 따르면 색차 샘플의 예측값을 산출시 휘도 샘플을 이용할 수 있다.
아래의 수학식 1은 색차 샘플의 예측값을 나타낸 것이다.
<수학식 1>
Figure pat00007
Figure pat00008
는 블록에서 색차 샘플의 예측값을 나타내고
Figure pat00009
는 복원된 블록의 휘도 샘플을 나타낸다. 파라메터
Figure pat00010
와
Figure pat00011
는 현재 블록의 주변의 미리 복원된 샘플로부터 유도될 수 있다.
색차 신호의 샘플링 비율은 휘도 샘플의 절반에 해당하는 값이 될 수 있고 0.5 픽셀만큼 수직 방향의 위상 차이를 가질 수 있다. 복원된 휘도 샘플은 색차 샘플의 위상과 사이즈를 매치시키기 위해 수직 방향으로 다운샘플링하고 수평 방향으로 서브샘플링될 수 있다.
따라서, 본 발명의 실시예에 따른 색차 샘플 예측 방법에서는 이러한 위상차를 고려하여
Figure pat00012
의 값을 복원된 휘도 블록의 샘플값으로 사용함으로서 색차 샘플과 휘도 샘플의 위상 차이를 고려한 색차 샘플의 예측값을 산출할 수 있다.
아래의 수학식 2는 파라메터
Figure pat00013
와
Figure pat00014
를 산출하는 방법을 나타낸 수식이다.
<수학식 2>
Figure pat00015
수학식 2에서
Figure pat00016
은 입력되는 변수의 관계값을 산출하는 임의의 함수로 정의될 수 있다. 예를 들어,
Figure pat00017
와
Figure pat00018
를 변수로서 두 변수 사이의 관계값을 산출하는 함수인 correlation 또는 auto covariance 함수 등을 나타낸다.
Figure pat00019
은 평균값을 산출하는 함수를 나타낸다. 즉,
Figure pat00020
와
Figure pat00021
는 선형 보간한 샘플값을 변수로 하여 산출된 값이 될 수 있고 선형 보간한 샘플값을 변수로 하여
Figure pat00022
와
Figure pat00023
를 산출하는 방법은 본 발명의 권리 범위에 포함된다.
Figure pat00024
는 아래의 수학식 3과 같이 전술한 위상 차이를 고려하여 산출된 복원된 휘도 샘플의 선형 보간값이다.
<수학식 3>
Figure pat00025
도 4는 본 발명의 실시예에 따른 현재 블록의 주변 및 내부에 존재하는 휘도 샘플값을 나타낸 것이다.
도 4를 참조하면, 제1 샘플(400)은 파라미터
Figure pat00026
와
Figure pat00027
를 산출하기 위해 사용되는 서브샘플링된 휘도 샘플을 나타낸다. 제2 샘플(410)은 파라미터
Figure pat00028
와
Figure pat00029
를 산출하기 위해 사용되는 서브샘플링된 휘도 샘플을 선형 보간한 샘플을 나타낸다.
제3 샘플(420)은 색차 샘플을 계산하기 위해 사용되는 서브샘플링된 휘도 샘플을 나타낸다. 제4 샘플(430)은 색차 샘플을 계산하기 위해 사용되는 선형 보간을 수행한 서브샘플링된 휘도 샘플을 나타낸다.
즉, 본 발명의 실시예에 따른 휘도 샘플을 이용한 색차 샘플 예측 방법에서는 색차 샘플을 예측할 때 휘도 샘플을 바로 사용하는 것이 아니라, 휘도 샘플과 색차 샘플의 거리의 차이를 고려한 선형 보간을 수행하여 선형 보간된 휘도 샘플값을 산출하여 사용할 수 있다. 이러한 선형 보간 방법을 사용함으로서 색차 신호와 휘도 신호의 위치가 다른 영상 포멧에서 색차 신호를 예측시 더욱 정확한 예측을 수행할 수 있다. 휘도 샘플과 색차 샘플의 위상 및 샘플링 레이트 차이를 기초로 선형 보간을 수행하여 휘도 샘플값을 산출할 수 있고 이러한 실시예 또한 본 발명의 권리 범위에 포함된다.
또 LM을 수행하는 실시예로서 아래와 같은 방법을 사용할 수도 있다.
아래의 수학식들은 전술한 LM을 이용한 색차 블록의 화면 내 예측값을 산출하는 것을 나타낸 것이다.
<수학식 1>
Figure pat00030
위의 수학식 1에서는 전술한 바와 같이 선형 보간을 이용하여 새로운 제1 변수를 산출할 수 있다.
위의 수학식 1에서 산출된 제1 변수를 이용하여 아래의 수학식 2와 같은
Figure pat00031
및
Figure pat00032
를 산출하기 위한 제2 변수를 산출할 수 있다.
<수학식 2>
Figure pat00033
수학식 2를 통해 산출된 제2 변수를 기초로 수학식 3의 방법을 이용하여
Figure pat00034
및
Figure pat00035
값을 산출할 수 있다.
<수학식 3>
Figure pat00036
위의 수학식 3을 기초로 산출된
Figure pat00037
및
Figure pat00038
를 이용해 아래의 수학식 4를 기초로 LM을 이용한 색차 블록 샘플을 산출할 수 있다.
<수학식 4>
Figure pat00039
위의 수학식 1 내지 수학식 4에서도 전술한 방법과 동일하게 색차 샘플과 휘도 샘플의 관계를 기초로 선형 보간을 수행하고 산출된 변수사이의 관계를 이용하여
Figure pat00040
와
Figure pat00041
를 산출한 후 산출된 값을 기초로 색차 블록에서 LM을 사용하여 화면 내 예측을 수행할 수 있다.
위의 방법은 영상 포멧이 YUV 4:2:0 포멧을 사용할 경우를 가정한 것으로 YUV 4:2:0 포멧이 아닌 다른 영상 포멧을 가질 경우(예를 들어, 4:4:4, 4:0:0), 위의 선형 보간식이 색차 샘플과 휘도 샘플과의 위치 관계에 따라 달라질 수 있고 이러한 실시예 또한 본 발명의 권리 범위에 포함된다.
표 1은 본 발명의 실시예에 따른 화면 내 예측 모드와 화면 내 예측 모드에 매핑되는 화면 내 예측 모드 번호를 나타낸 것이다.
<표 1>
Figure pat00042
표 1을 참조하면, 화면 내 예측을 수행함에 있어 휘도 블록은 0 번부터 34번까지의 화면 내 예측 모드를 사용하여 화면 내 예측을 수행할 수 있다. 0번 화면 내 예측 모드는 Planar 모드, 1번 화면 내 예측 모드는 DC 모드로서 비방향성 화면 내 예측 모드이고 나머지 2번 화면 내 예측 모드부터 34번 화면 내 예측 모드는 방향성 화면 내 예측 모드로서 번호 별로 서로 다른 예측 방향 각도를 기초로 화면 내 예측을 수행할 수 있다.
도 5는 본 발명의 실시예에 따른 방향성 화면 내 예측 방법을 나타낸 개념도이다.
도 5를 참조하면, 방향성 화면 내 예측 모드는 2번 화면 내 예측 모드를 기준으로 시계 방향으로 화면 내 예측 방향을 다르게 하여 34번 화면 내 예측 모드까지 서로 다른 방향을 기초로 방향성 화면 내 예측을 수행할 수 있다.
휘도 블록에 대한 화면 내 예측을 수행 시는 도 5의 방향성 화면 내 예측 모드를 다 사용할 수 있지만 색차 블록에 대한 화면 내 예측 모드를 수행시는 방향성 화면 내 예측 모드를 모두 사용하지 않고 일부의 방향성 화면 내 예측 모드만으로 화면 내 예측을 수행할 수 있다.
색차 블록에 대한 화면 내 예측은 사선 방향 화면 내 예측 모드(34번 화면 내 예측 모드), 수직 방향 화면 내 예측 모드(26번 화면 내 예측 모드), 수평 방향 화면 내 예측 모드(10번 화면 내 예측 모드), DC 화면 내 예측 모드를 사용할 수 있고 추가적으로 휘도 블록과 다른 화면 내 예측 모드인 복원된 휘도 블록을 기초로 색차 블록을 예측하는 LM(Luma Estimated Mode), 휘도 블록과 동일한 화면 내 예측 모드인 DM(Luma Directed Mode)을 색차 블록의 화면 내 예측에 사용할 수 있다.
아래의 표 2는 LM, 수직 화면 내 예측 모드(VER), 수평 화면 내 예측 모드(HOR), DC 화면 내 예측 모드, DM을 색차 블록의 화면 내 예측 방법으로 사용한 경우 화면 내 예측 모드와 화면 내 예측 모드 번호 사이의 매핑 관계를 나타낸 표이다.
<표 2>
Figure pat00043
표 2를 참조하면, intra_chroma_pred_type 0은 LM(Luma Estimated Mode), intra_chroma_pred_type 1은 수직 화면 내 예측 모드(VER), intra_chroma_pred_type 2는 수평 화면 내 예측 모드(HOR), intra_chroma_pred_type이 3은 DC 화면 내 예측 모드, intra_chroma_pred_type이 4는 DM(Luma Directed Mode)로 색차 블록에 대한 화면 내 예측을 수행할 수 있다.
휘도 블록과 색차 블록이 동일한 화면 내 예측 모드를 가질 경우, DM으로 색차 블록의 화면 내 예측 모드를 나타낼 수 있기 때문에 전술한 5 개의 색차 블록의 화면 내 예측 모드 중 하나의 화면 내 예측 모드에 대해 화면 내 예측 번호를 매핑할 필요가 없다. 예를 들어, 휘도 블록의 화면 내 예측 모드가 수직 화면 내 예측 모드(Ver)이고 색차 블록이 수직 화면 내 예측 모드(Ver)인 경우, intra_chroma_pred_type 4인 DM으로 색차 블록의 화면 내 예측 모드를 나타낼 수 있기 때문에 intra_chroma_pred_type 1에 따로 화면 내 예측 모드를 매핑할 필요성이 없다. 동일한 방법으로 휘도 블록의 화면 내 예측 모드가 수직 화면 내 예측 모드(VER), 수평 화면 내 예측 모드(HOR), DC 화면 내 예측 모드(DC)인 경우 4개의 intra_chroma_pred_type로 색차 블록의 화면 내 예측 모드를 나타낼 수 있다.
휘도 블록의 화면 내 예측 모드가 수직 화면 내 예측 모드, 수평 화면 내 예측 모드, DC 모드가 아닌 나머지 방향성 화면 내 예측 모드인 경우에는 DM 모드와 휘도 블록의 화면 내 예측 모드가 중복되지 않으므로 DM 모드와 휘도 블록의 화면 내 예측 모드가 중복될 경우와 다르게 5개의 intra_chroma_pred_type을 사용하여 색차 블록에 대한 화면 내 예측을 수행할 수 있다.
색차 블록의 화면 내 예측을 수행하기 위해 사용되는 화면 내 예측 모드 및 화면 내 예측 모드와 화면 내 예측 모드 번호 사이의 매핑 관계는 임의적인 것으로 변할 수 있다. 또한, 색차 블록은 LM을 사용할지 여부를 부호화 및 복호화 단계에서 결정할 수 있고 LM의 사용 여부에 따라 표 2는 달라질 수 있다.
예를 들어, 아래의 표 3 및 표 4와 같이 추가적으로 사선 화면 내 예측 모드(34번 화면 내 예측 모드)와 플레이너 모드가 색차 블록의 화면 내 예측 모드에 사용되는 것도 가능하다.
아래의 표 3은 LM을 사용하지 않고 색차 블록에 대한 화면 내 예측을 수행할 경우 색차 블록의 화면 내 예측 모드와 화면 내 예측 모드 번호 사이의 매핑 관계를 나타낸 것이다.
<표 3>
Figure pat00044
표 3을 참조하면, intra_chroma_pred_mode가 0이면 플레이너 모드, intra_chroma_pred_mode가 1이면 수직 화면 내 예측 모드(26번 화면 내 예측 모드), intra_chroma_pred_mode가 2이면 수평 화면 내 예측 모드(10번 화면 내 예측 모드), intra_chroma_pred_mode가 3이면 DC 모드(1번 화면 내 예측 모드), intra_chroma_pred_mode가 4이면 DM으로 매핑될 수 있다.
만약, 휘도 블록의 화면 내 예측 모드가 플레이너 모드, 수직 모드, 수평 모드, DC 모드인 경우 DM으로 색차 블록의 화면 내 예측 모드로 표현할 수 있기 때문에 intra_chroma_pred_mode 중 DM으로 표현된 화면 내 예측 모드에 대신 사선 방향 화면 내 예측 모드(34번 화면 예측 모드)를 포함시켜 색차 블록의 화면 내 예측을 수행시 추가적인 화면 내 예측 모드로 사용할 수 있다.
아래의 표 4는 LM 모드를 사용하여 색차 블록에 대한 화면 내 예측을 수행할 경우 휘도 블록의 화면 내 예측 모드와 색차 블록의 화면 내 예측 모드 사이의 관계를 나타낸 것이다.
<표 4>
Figure pat00045
표 4를 참조하면, intra_chroma_pred_mode가 0이면 플레이너 모드, intra_chroma_pred_mode가 1이면 수직 화면 내 예측 모드, intra_chroma_pred_mode가 2이면 수평 화면 내 예측 모드, intra_chroma_pred_mode가 3이면 DC 모드, intra_chroma_pred_mode가 4이면 LM, intra_chroma_pred_mode가 5이면 DM으로 색차 블록의 화면 내 예측 모드가 매핑될 수 있다.
표 4와 마찬가지로 만약, 휘도 블록의 화면 내 예측 모드가 플레이너 모드, 수직 모드, 수평 모드, DC 모드인 경우 DM으로 색차 블록의 화면 내 예측 모드로 표현할 수 있기 때문에 intra_chroma_pred_mode 중 DM으로 표현이 가능한 화면 내 예측 모드에 대신 사선 화면 내 모드(34번 화면 내 예측 모드)를 포함시켜 사용할 수 있다.
위와 같이 매핑된 색차 블록의 화면 내 예측 모드는 아래의 표 5와 같은 코드워드 매핑 방법을 통하여 색차 블록의 화면 내 예측 모드 정보를 전송할 수 있다.
표 3과 같이 LM이 포함되지 않고 색차 블록의 화면 내 예측 모드와 휘도 블록의 화면 내 예측 모드 사이의 관계가 매핑된 테이블을 비LM 매핑 테이블이라는 용어로 정의하고 표 4와 같이 LM이 포함되고 색차 블록의 화면 내 예측 모드와 휘도 블록의 화면 내 예측 모드 사이의 관계가 매핑된 테이블을 LM 매핑 테이블이라는 용어로 정의하여 사용할 수 있다.
표 3 및 표 4를 참조하면, DM으로 인해 불필요한 화면 내 예측 모드의 경우 사선 화면 내 예측 모드(34번 화면 내 예측 모드)로 설정이 되었다. 하지만, 34번 화면 내 예측 모드 대신 다른 화면 내 예측 모드, 예를 들어, 18번 화면 내 예측 모드 또는 2번 화면 내 예측 모드도 34번 화면 내 예측 모드로 사용될 수 있고 이러한 실시예 또한 본 발명의 권리 범위에 포함된다.
어떠한 화면 내 예측 모드를 대체 화면 내 예측 모드로 사용할 지 여부에 대한 정보는 아래의 표와 같이 schedo code로 표현할 수 있다.
<표 5>
Figure pat00046
표 5를 참조하면, 색차 블록의 화면 내 예측 모드와 휘도 블록의 화며낸 예측 모드가 동일할 경우, 휘도 블록의 화면 내 예측 모드와 동일한 색차 블록의 화면 내 예측 모드를 대체할 화면 내 예측 모드를 substitute_mode라는 구문 요소 정보로 표현하여 색차 블록에 대한 화면 내 예측을 수행할 수 있다.
전술한 여러가지 실시예와 같은 색차 블록의 화면 내 예측 모드를 시그널링하기 위해서 아래와 같이 화면 예측 모드에 코드워드를 매핑하여 시그널링할 수 있다.
아래의 표 6은 본 발명의 실시예에 따른 색차 블록의 화면 내 예측 모드를 코드워드와 매핑한 표를 나타낸 것이다.
<표 6>
Figure pat00047
표 6을 참조하면, 모드 넘버와 각 모드 넘버에 매핑되는 화면 내 예측 모드 이름과 그에 해당하는 코드워드가 존재할 수 있다. DM은 코드워드 '0'에 매핑되고 LM은 코드워드 '10'에 매핑되고, 수직 모드는 코드워드 '110'에 매핑되고 수평 모드는 코드워드 '1110'에 매핑되고 DC 모드는 코드워드 '1111'에 매핑될 수 있다. 표 6과 같이 휘도 블록의 화면 내 예측 모드에 상관없이 색차 블록의 화면 내 예측 모드에 고정적인 코드워드를 매핑할 수도 있고, 아래의 표 6-1과 같이 휘도 블록의 화면 내 예측 모드에 따라 사용하지 않는 화면 내 예측 모드에는 코드워드를 매핑하지 않고 나머지 사용되는 화면 내 예측 모드에 코드워드를 매핑하는 방법을 사용할 수도 있다.
<표 6-1>
Figure pat00048
표 6-1을 참조하면, 휘도 블록의 화면 내 예측 모드에 따라 사용되지 않는 색차 블록의 화면 내 예측 모드에는 코드워드를 사용하지 않고 나머지 색차 블록의 화면 내 예측 모드에 코드워드를 매핑함으로서 휘도 블록의 화면 내 예측 모드에 따라 색차 블록의 화면 내 예측 모드를 표현하기 위한 코드워드를 유동적으로 매핑할 수 있다.
또 다른 화면 내 예측 모드와 코드 워드 사이의 매핑 방법으로 표 3 및 표 4와 같이 색차 블록의 화면 내 예측 모드와 코드워드가 매핑된 경우 아래의 표 7과같이 고정된 코드 워드 매핑 방법을 사용할 수 있다.
<표 7>
Figure pat00049
표 7을 참조하면, 색차 블록의 화면 내 예측 모드를 예측하기 위해서는 전술한 바와 같이 LM을 포함하여 화면 내 예측을 수행하는 경우와 LM을 제외하고 화면 내 예측을 수행하는 경우로 나누어 화면 내 예측 모드와 화면 내 예측 모드에 해당하는 코드워드 매핑을 수행할 수 있다.
LM을 포함하여 색차 블록에 대한 화면 내 예측을 수행하면 DM, LM 및 추가의 4가지 화면 내 예측 모드(mode 0, mode 1, mode 2, mode 3)을 사용하여 색차 블록에 대한 화면 내 예측을 수행할 수 있고, LM을 제외하고 색차 블록에 대한 화면 내 예측을 수행하면 DM 및 4가지 화면 예측 모드(mode 0, mode 1, mode 2, mode 3)를 이용하여 화면 내 예측을 수행할 수 있다.
표 7의 코드워드는 컨텍스트(context)를 사용하지 않고 그 값 자체를 보내는 바이패싱(bypassing) 방식으로 부복호화될 수 있다. Bypassing 방식에서 코드워드를 구성하는 모든 비트를 bypassing할 수도 있지만, DM을 나타내는 비트와 LM을 나타내는 비트는 컨텍스트(context)를 이용하여 부호화할 수 있다. 즉, LM 모드를 사용하는 경우, 앞쪽 두 비트는 컨텍스트를 이용한 부호화가 수행되며, LM 모드를 사용하지 않을 경우 첫번째 비트만 컨텍스트 부호화가 수행될 수 있다. 코드워드 부호화 방식은 임의적인 것으로서 다양한 방식이 사용될 수 있다. 예를 들어, 코덱의 구현상 계산을 빠르게 하지 않아도 될 경우, 코드워드를 구성하는 모든 비트에 대해서 컨텍스트를 부여하여 부호화를 수행할 수도 있으며 화면 내 예측 모드 이진화 방식은 다양하게 구현될 수 있다.
아래의 표 8은 표 7에서의 색차 블록의 화면 내 예측 모드와 코드워드 사이의 매핑 관계를 기초로 mode 0이 플레이너 모드, mode 1이 수직 화면 내 예측 모드, mode 2가 수평 화면 내 예측 모드, mode 3이 DC 화면 내 예측 모드일 경우를 화면 내 예측 모드와 코드워드 사이의 매핑 관계를 나타낸 표이다.
<표 8>
Figure pat00050
표 8을 참조하면, chroma_pred_from_luma_enabled_flag가 1이면, LM 모드를 사용하여 색차 블록의 화면 내 예측을 수행하는 경우를 나타내는 것으로 intra_chroma_pred_mode가 5이면 DM, intra_chroma_pred_mode가 4이면 LM, intra_chroma_pred_mode가 0이면 플레너, intra_chroma_pred_mode가 1이면 Ver, intra_chroma_pred_mode가 2이면 Hor, intra_chroma_pred_mode가 3이면 DC이고 해당 모드에 고정적으로 코드워드가 매핑될 수 있다.
chroma_pred_from_luma_enabled_flag가 0이면 LM 모드를 사용하지 않고 색차 블록의 화면 내 예측을 수행하는 경우를 나타내는 것으로 intra_chroma_pred_mode가 4이면 DM, intra_chroma_pred_mode가 0이면 플레너, intra_chroma_pred_mode가 1이면 Ver, intra_chroma_pred_mode가 2이면 Hor, intra_chroma_pred_mode가 3이면 DC이고 해당 모드에 고정적으로 코드워드가 매핑될 수 있다.
도 6는 본 발명의 실시예에 따른 색차 블록의 화면 내 예측 모드를 산출하는 방법을 나타낸 순서도이다.
도 6를 참조하면, LM을 사용하는지 여부에 대한 플래그 정보를 복호한다(단계 S600).
색차 블록에 대한 화면 내 예측을 수행시 LM은 선택적으로 사용될 수 있으며 LM의 사용 여부를 표현한 플래그 정보를 기초로 색차 블록의 화면 내 예측 시 LM의 사용 여부를 판단할 수 있다. 전술한 바와 같이 LM의 사용 여부에 따라 동일한 화면 내 예측 모드 정보를 표현하는 코드워드가 달라질 수 있다.
색차 블록의 화면 내 예측 모드가 포함된 코드워드를 수신한다(단계 S610).
전술한 표 6 및 표 7과 같은 화면 내 예측 모드와 코드워드 사이의 매핑 관계를 나타낸 표를 기초로 부호화된 코드워드 정보를 수신할 수 있다.
수신된 코드워드 정보를 기초로 색차 블록의 화면 내 예측 모드 정보를 복호한다(단계 S620).
전술한 바와 같이 코드워드와 화면 내 예측 모드 사이에는 다양한 매핑표가 존재할 수 있다. 코드워드와 화면 내 예측 모드 사이의 매핑 관계를 나타낸 룩업 테이블을 기초로 색차 블록의 화면 내 예측 모드 정보를 복호할 수 있다.
LM을 사용하여 색차 블록의 화면 내 예측을 수행한 경우를 예로 들면, 부호화기에서는 색차 블록이 LM을 포함한 화면 내 예측 모드 정보로 부호화되었다는 정보를 플래그 정보로 부호화할 수 있고 복호화기에서는 이러한 플래그 정보를 기초로 색차 블록의 화면 내 예측 모드 정보를 복호할 수 있다.
수신된 코드워드 정보는 룩업-테이블을 기초로 화면 내 예측 모드 정보로 복호화될 수 있다.
표 7를 예로 들면, 임의의 색차 블록의 화면 내 예측 모드 정보가 LM인 경우 코드워드 정보로 '10'을 사용하여 부호화를 수행할 수 있고 부호화된 코드워드 정보인 '10'은 색차 블록의 코드워드 정보로 복호화기로 수신될 수 있다.
복호화기에서는 표 7을 기초로 현재 복호화되는 색차 블록의 화면 내 예측 모드가 LM이라는 것을 알 수 있고 이를 기초로 색차 블록을 복호화할 수 있다.
도 7은 본 발명의 실시예에 색차 블록의 화면 내 예측 모드를 복호화하는 예측부의 일부를 나타낸 개념도이다.
도 7을 참조하면, LM 모드 사용 판단부(700), 색차 블록 화면 내 예측 모드 산출부(720)를 포함할 수 있다.
LM 모드 사용 판단부(700)는 부호화기에서 LM 사용여부 플래그 정보를 기초로 현재 블록에서 LM을 색차 블록의 화면 내 예측 모드로 사용하는지 여부를 판단할 수 있다.
색차 블록 화면 내 예측 모드 산출부(720)는 전술한 코드워드와 색차 블록의 화면 내 예측 모드 사이의 매핑 관계를 기초로 현재 색차 블록이 어떠한 화면 내 예측 모드를 기초로 부복호화를 수행하는지에 대한 화면 내 예측 모드 정보를 산출할 수 있다.
예를 들어, 전술한 표 7과 같이 플래그 정보인 chroma_pred_flag_luma_enabled_pred_mode를 사용하여 현재 색차 블록의 화면 내 예측 모드에서 LM을 사용하였는지 여부를 판단할 수 있다. 만약 LM을 사용한 경우 코드워드 정보로 '110'이 수신되는 경우 현재 색차 블록의 화면 내 예측 모드(intra_chroma_pred_mode)로 2번을 사용했다는 것을 나타낸다. intra_chroma_pred_mode 정보를 기초로 표 7을 사용하여 휘도 블록의 화면 내 예측 모드 정보를 고려하여 현재 색차 블록의 화면 내 예측 모드 정보를 산출할 수 있다.
전술한 LM을 포함한 화면 내 예측 모드를 사용함으로서 영상의 성질에 따라 LM의 사용 여부를 플래그 정보로 표현하여 화면 내 예측을 수행할 수 있다. 또한 LM의 사용여부에 따라 코드워드 매핑 테이블을 다르게 사용하여 intra_chroma_pred_mode의 값을 산출하고 산출된 intra_chroma_pred_mode의 값을 LM 모드의 사용 여부에 따라 LM 매핑 테이블 또는 비 LM 매핑 테이블을 사용하여 색차 블록의 화면 내 예측 모드를 산출할 수 있다. 이러한 방법을 사용함으로서 불필요한 비트 낭비를 줄일 수 있고 필요한 화면 내 예측 모드 정보만을 전송할 수 있다.
이상에서 설명한 영상 부호화 및 영상 복호화 방법은 도 1 및 도 2에서 전술한 각 영상 부호화기 및 영상 복호화기 장치의 각 구성부에서 구현될 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (9)

  1. 디코딩 장치에 의한 영상 디코딩 방법에 있어서,
    화면 내 예측 모드에 관한 정보 및 레지듀얼 정보를 포함하는 영상 정보를 수신하는 단계;
    현재 색차 블록에 관련된 현재 휘도 블록에 대한 화면 내 예측 모드를 결정하는 단계;
    상기 현재 휘도 블록에 대한 화면 내 예측 모드와 상기 화면 내 예측 모드에 관한 정보를 기반으로 상기 현재 색차 블록에 대한 화면 내 예측 모드를 도출하는 단계;
    상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 단계;
    상기 레지듀얼 정보를 기반으로 레지듀얼 샘플을 도출하는 단계; 및
    상기 현재 색차 블록에 대한 예측 샘플 및 상기 레지듀얼 샘플을 기반으로 복원 픽처를 생성하는 단계를 포함하고,
    상기 화면 내 예측 모드에 관한 정보는 코드워드를 기반으로 획득되고,
    상기 현재 색차 블록에 대해 LM 모드가 가용함을 기반으로 상기 코드워드의 처음 두 비트들은 컨텍스트 기반 코딩을 기반으로 디코딩되고, 상기 코드워드의 나머지 비트들은 바이패스 기반 코딩을 기반으로 디코딩되고,
    상기 LM 모드는 상기 현재 휘도 블록의 복원 샘플을 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 화면 내 예측 모드인 것을 특징으로 하는, 영상 디코딩 방법.
  2. 제1항에 있어서,
    상기 현재 색차 블록에 대해 상기 LM 모드가 적용됨을 기반으로, 상기 현재 색차 블록에 대한 예측 샘플은 선형 모델 파라미터들 및 상기 현재 휘도 블록의 복원 샘플을 기반으로 도출되는 것을 특징으로 하는, 영상 디코딩 방법.
  3. 제1항에 있어서,
    상기 화면 내 예측 모드에 관한 정보는, 비트스트림으로부터 획득되는 것을 특징으로 하는, 영상 디코딩 방법.
  4. 제1항에 있어서,
    상기 LM 모드를 나타내는 코드워드는 '10'을 포함하는 것을 특징으로 하는, 영상 디코딩 방법.
  5. 인코딩 장치에 의한 영상 인코딩 방법에 있어서,
    현재 휘도 블록에 대한 화면 내 예측 모드를 결정하는 단계;
    상기 현재 휘도 블록에 관련된 현재 색차 블록에 대한 화면 내 예측 모드를 결정하는 단계;
    상기 현재 휘도 블록에 대한 화면 내 예측 모드 및 상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 화면 내 예측 모드에 관한 정보를 생성하는 단계;
    상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 단계;
    상기 현재 색차 블록에 대한 예측 샘플을 기반으로 상기 현재 블록의 레지듀얼 정보를 생성하는 단계; 및
    상기 화면 내 예측 모드에 관한 정보 및 상기 레지듀얼 정보를 포함하는 영상 정보를 인코딩하는 단계를 포함하되,
    상기 화면 내 예측 모드에 관한 정보는 코드워드를 기반으로 인코딩되고,
    상기 현재 색차 블록에 대해 LM 모드가 가용함을 기반으로 상기 코드워드의 처음 두 비트들은 컨텍스트 기반 코딩을 기반으로 인코딩되고, 상기 코드워드의 나머지 비트들은 바이패스 기반 코딩을 기반으로 디코딩되고,
    상기 LM 모드는 상기 현재 휘도 블록의 복원 샘플을 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 화면 내 예측 모드인 것을 특징으로 하는, 영상 인코딩 방법.
  6. 제5항에 있어서,
    상기 현재 색차 블록에 대해 상기 LM 모드가 적용됨을 기반으로, 상기 현재 색차 블록에 대한 예측 샘플은 선형 모델 파라미터들 및 상기 현재 휘도 블록의 복원 샘플을 기반으로 도출되는 것을 특징으로 하는, 영상 인코딩 방법.
  7. 제5항에 있어서,
    상기 LM 모드를 나타내는 코드워드는 '10'을 포함하는 것을 특징으로 하는, 영상 인코딩 방법.
  8. 특정 방법에 의해 생성된 비트스트림을 저장하는 컴퓨터 판독 가능한 저장매체로서, 상기 특정 방법은,
    현재 휘도 블록에 대한 화면 내 예측 모드를 결정하는 단계;
    상기 현재 휘도 블록에 관련된 현재 색차 블록에 대한 화면 내 예측 모드를 결정하는 단계;
    상기 현재 휘도 블록에 대한 화면 내 예측 모드 및 상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 화면 내 예측 모드에 관한 정보를 생성하는 단계;
    상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 단계;
    상기 현재 색차 블록에 대한 예측 샘플을 기반으로 상기 현재 블록의 레지듀얼 정보를 생성하는 단계; 및
    상기 화면 내 예측 모드에 관한 정보 및 상기 레지듀얼 정보를 포함하는 영상 정보를 인코딩하여 상기 비트스트림을 생성하는 단계를 포함하되,
    상기 화면 내 예측 모드에 관한 정보는 코드워드를 기반으로 인코딩되고,
    상기 현재 색차 블록에 대해 LM 모드가 가용함을 기반으로 상기 코드워드의 처음 두 비트들은 컨텍스트 기반 코딩을 기반으로 인코딩되고, 상기 코드워드의 나머지 비트들은 바이패스 기반 코딩을 기반으로 디코딩되고,
    상기 LM 모드는 상기 현재 휘도 블록의 복원 샘플을 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 화면 내 예측 모드인 것을 특징으로 하는 컴퓨터 판독 가능한 저장매체.
  9. 영상 데이터를 전송하는 방법으로서, 상기 방법은,
    화면 내 예측 모드에 관한 정보 및 레지듀얼 정보를 포함하는 영상 정보에 대한 비트스트림을 획득하는 단계; 및
    상기 화면 내 예측 모드에 관한 정보 및 상기 레지듀얼 정보를 포함하는 상기 영상 정보에 대한 상기 비트스트림을 포함하는 상기 데이터를 전송하는 단계를 포함하고,
    상기 화면 내 예측 모드에 관한 정보는 현재 휘도 블록에 대한 화면 내 예측 모드를 결정하는 단계, 상기 현재 휘도 블록에 관련된 현재 색차 블록에 대한 화면 내 예측 모드를 결정하는 단계 및 상기 현재 휘도 블록에 대한 화면 내 예측 모드 및 상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 화면 내 예측 모드에 관한 정보를 생성하는 단계를 수행하여 생성되고,
    상기 레지듀얼 정보는 상기 현재 색차 블록에 대한 화면 내 예측 모드를 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 단계 및 상기 현재 색차 블록에 대한 예측 샘플을 기반으로 상기 현재 블록의 레지듀얼 정보를 생성하는 단계를 수행하여 생성되고,
    상기 화면 내 예측 모드에 관한 정보는 코드워드를 기반으로 인코딩되고,
    상기 현재 색차 블록에 대해 LM 모드가 가용함을 기반으로 상기 코드워드의 처음 두 비트들은 컨텍스트 기반 코딩을 기반으로 인코딩되고, 상기 코드워드의 나머지 비트들은 바이패스 기반 코딩을 기반으로 디코딩되고,
    상기 LM 모드는 상기 현재 휘도 블록의 복원 샘플을 기반으로 상기 현재 색차 블록에 대한 예측 샘플을 도출하는 화면 내 예측 모드인 것을 특징으로 하는 영상 데이터를 전송하는 방법.
KR1020217024782A 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치 Active KR102403793B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020227017690A KR102540995B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201161449698P 2011-03-06 2011-03-06
US61/449,698 2011-03-06
US201161454586P 2011-03-21 2011-03-21
US61/454,586 2011-03-21
US201261589308P 2012-01-21 2012-01-21
US61/589,308 2012-01-21
PCT/KR2012/001637 WO2012121535A2 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020217003272A KR102288526B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020217003272A Division KR102288526B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020227017690A Division KR102540995B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Publications (2)

Publication Number Publication Date
KR20210100217A true KR20210100217A (ko) 2021-08-13
KR102403793B1 KR102403793B1 (ko) 2022-05-30

Family

ID=46798645

Family Applications (13)

Application Number Title Priority Date Filing Date
KR1020177003656A Active KR101789478B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020207000107A Active KR102113267B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020227017690A Active KR102540995B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020197005450A Active KR102064154B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020137022773A Active KR101707088B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020187007857A Active KR101953383B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020197005451A Active KR102064157B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020217024782A Active KR102403793B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020187007858A Active KR101953384B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020237018681A Active KR102653005B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020207013862A Active KR102213112B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020217003272A Active KR102288526B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020177029632A Active KR101842037B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Family Applications Before (7)

Application Number Title Priority Date Filing Date
KR1020177003656A Active KR101789478B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020207000107A Active KR102113267B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020227017690A Active KR102540995B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020197005450A Active KR102064154B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020137022773A Active KR101707088B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020187007857A Active KR101953383B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020197005451A Active KR102064157B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Family Applications After (5)

Application Number Title Priority Date Filing Date
KR1020187007858A Active KR101953384B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020237018681A Active KR102653005B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020207013862A Active KR102213112B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020217003272A Active KR102288526B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR1020177029632A Active KR101842037B1 (ko) 2011-03-06 2012-03-06 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Country Status (12)

Country Link
US (12) US9530224B2 (ko)
EP (3) EP2685724B1 (ko)
KR (13) KR101789478B1 (ko)
CN (6) CN108259920B (ko)
DK (1) DK2685724T3 (ko)
ES (2) ES2793489T3 (ko)
HR (1) HRP20221483T1 (ko)
HU (2) HUE060582T2 (ko)
PL (2) PL3703368T3 (ko)
PT (1) PT2685724T (ko)
SI (1) SI3703368T1 (ko)
WO (1) WO2012121535A2 (ko)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120086232A (ko) * 2011-01-25 2012-08-02 (주)휴맥스 율-왜곡 최적화를 위한 영상 부호화/복호화 방법 및 이를 수행하는 장치
PH12015501603B1 (en) 2010-12-23 2023-12-06 Samsung Electronics Co Ltd Method and device for encoding intra prediction mode for image prediction unit, and method and device for decoding intra prediction mode for image prediction unit
HUE060582T2 (hu) 2011-03-06 2023-03-28 Lg Electronics Inc Intra predikációs eljárás krominancia blokkok számára
CN106412585A (zh) 2011-06-17 2017-02-15 联发科技股份有限公司 内部预测模式编码的方法
KR20120140181A (ko) * 2011-06-20 2012-12-28 한국전자통신연구원 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
US9948938B2 (en) * 2011-07-21 2018-04-17 Texas Instruments Incorporated Methods and systems for chroma residual data prediction
US10015485B2 (en) * 2011-11-07 2018-07-03 Intel Corporation Cross-channel residual prediction
CN103220508B (zh) 2012-01-20 2014-06-11 华为技术有限公司 编解码方法和装置
US9350899B2 (en) * 2012-09-14 2016-05-24 Qualcomm Incorporated Methods and device for efficient resampling and resizing of digital images
WO2014163462A1 (ko) * 2013-04-05 2014-10-09 삼성전자 주식회사 필터링과 관련하여 비디오의 부호화 및 복호화를 수행하는 방법과 그 장치
KR101530774B1 (ko) * 2013-09-30 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
KR101530782B1 (ko) * 2013-12-03 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
WO2017008255A1 (en) * 2015-07-14 2017-01-19 Mediatek Singapore Pte. Ltd. Advanced intra prediction mode signaling in video coding
WO2017192616A1 (en) * 2016-05-06 2017-11-09 Vid Scale, Inc. Systems and methods for motion compensated residual prediction
KR102383104B1 (ko) 2016-06-24 2022-04-06 주식회사 케이티 비디오 신호 처리 방법 및 장치
US11277604B2 (en) 2016-07-14 2022-03-15 Samsung Electronics Co., Ltd. Chroma intra prediction method and device therefor
CN109565593B (zh) * 2016-08-01 2023-07-04 韩国电子通信研究院 图像编码/解码方法和设备以及存储比特流的记录介质
JP6891895B2 (ja) 2016-09-16 2021-06-18 ソニーグループ株式会社 画像処理装置および画像処理方法
CN118660159A (zh) * 2016-10-04 2024-09-17 Lx 半导体科技有限公司 图像编码/解码方法和图像数据的发送方法
WO2018070713A1 (ko) * 2016-10-11 2018-04-19 엘지전자(주) 크로마 성분에 대한 인트라 예측 모드를 유도하는 방법 및 장치
WO2018131838A1 (ko) * 2017-01-11 2018-07-19 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측에 따른 영상 디코딩 방법 및 장치
US11190762B2 (en) 2017-06-21 2021-11-30 Lg Electronics, Inc. Intra-prediction mode-based image processing method and apparatus therefor
KR102418700B1 (ko) * 2017-12-04 2022-07-08 엘지전자 주식회사 영상 코딩 시스템에서 크로마 성분의 효율적 변환에 기반한 영상 디코딩 방법 및 장치
WO2019112394A1 (ko) 2017-12-07 2019-06-13 한국전자통신연구원 채널들 간의 선택적인 정보 공유를 사용하는 부호화 및 복호화를 위한 방법 및 장치
SG11202012036QA (en) 2018-01-15 2021-01-28 Ki Baek Kim Intra prediction encoding/decoding method and device for chrominance components
WO2019198997A1 (ko) * 2018-04-11 2019-10-17 엘지전자 주식회사 인트라 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019203487A1 (ko) * 2018-04-19 2019-10-24 엘지전자 주식회사 인트라 예측에 기반한 영상 코딩 방법 및 그 장치
CN117528086A (zh) 2018-05-14 2024-02-06 英迪股份有限公司 对图像进行解码和编码的方法、非暂态计算机可读介质
KR101956756B1 (ko) 2018-06-12 2019-03-11 광운대학교 산학협력단 성분 간 참조 기반의 비디오 신호 처리 방법 및 장치
SG11202101229VA (en) 2018-08-24 2021-03-30 Samsung Electronics Co Ltd Video decoding method and apparatus, and video encoding method and apparatus
WO2020050607A1 (ko) * 2018-09-05 2020-03-12 엘지전자 주식회사 크로마 인트라 예측 모드를 도출하기 위한 영상 예측 방법 및 장치
WO2020116848A1 (ko) * 2018-12-05 2020-06-11 엘지전자 주식회사 크로마 인트라 예측 모드를 도출하기 위한 영상 예측 방법 및 장치
CN118741099A (zh) 2018-12-12 2024-10-01 数码士有限公司 使用当前图片参考的视频信号处理方法和设备
CN113330742B (zh) * 2018-12-28 2024-11-05 韩国电子通信研究院 视频编码/解码方法、设备以及存储有比特流的记录介质
JP7305769B2 (ja) * 2019-01-02 2023-07-10 オッポ広東移動通信有限公司 予測方向の決定方法、デコーダ及びコンピュータ記憶媒体
EP4398572A3 (en) 2019-01-02 2024-08-14 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Intra-frame chromaticity prediction method and decoder
CN111225212B (zh) * 2019-01-18 2022-03-25 北京达佳互联信息技术有限公司 一种确定视频块的色度信息的方法及装置
CN118870034A (zh) * 2019-02-19 2024-10-29 数码士有限公司 基于帧内预测的视频信号处理方法和设备
KR20210116676A (ko) * 2019-03-14 2021-09-27 엘지전자 주식회사 인트라 예측을 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
PH12021552543A1 (en) 2019-04-23 2022-07-04 Beijing Bytedance Network Tech Co Ltd Methods for cross component dependency reduction
CN119788864A (zh) * 2019-06-19 2025-04-08 Lg 电子株式会社 用于限制色度块的分割条件的图像编码和解码方法和设备以及用于传送比特流的方法
KR102861004B1 (ko) * 2019-06-20 2025-09-16 엘지전자 주식회사 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
WO2020259427A1 (en) * 2019-06-22 2020-12-30 Beijing Bytedance Network Technology Co., Ltd. Syntax element for chroma residual scaling
CN120583227A (zh) * 2019-06-24 2025-09-02 Lg电子株式会社 图像编码/解码方法和数据发送方法
WO2021027925A1 (en) * 2019-08-14 2021-02-18 Beijing Bytedance Network Technology Co., Ltd. Position-dependent intra prediction sample filtering
KR20220153124A (ko) * 2019-08-14 2022-11-17 엘지전자 주식회사 루마 샘플 위치를 참조하여 크로마 블록의 예측 모드를 결정하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
US20220337814A1 (en) * 2019-09-19 2022-10-20 Lg Electronics Inc. Image encoding/decoding method and device using reference sample filtering, and method for transmitting bitstream
KR20210063258A (ko) * 2019-11-22 2021-06-01 한국전자통신연구원 적응적 루프내 필터링 방법 및 장치
KR20250138297A (ko) 2020-01-10 2025-09-19 엘지전자 주식회사 영상 디코딩 방법 및 그 장치
WO2025159579A1 (ko) * 2024-01-26 2025-07-31 경희대학교 산학협력단 영상 부호화/복호화 방법 및 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070077609A (ko) * 2006-01-24 2007-07-27 삼성전자주식회사 인트라 예측 모드 결정 방법 및 장치

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3201448B2 (ja) * 1994-03-31 2001-08-20 三菱電機株式会社 符号化復号化装置，符号化装置，および復号化装置
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP4015934B2 (ja) 2002-04-18 2007-11-28 株式会社東芝 動画像符号化方法及び装置
CN100508609C (zh) 2002-04-18 2009-07-01 株式会社东芝 运动图像编码/解码方法和装置
US7688895B2 (en) * 2003-07-22 2010-03-30 Lsi Corporation Method and/or circuit for binary arithmetic decoding decisions before termination
US7599435B2 (en) * 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
CN100461867C (zh) * 2004-12-02 2009-02-11 中国科学院计算技术研究所 一种帧内图像预测编码方法
KR101246915B1 (ko) * 2005-04-18 2013-03-25 삼성전자주식회사 동영상 부호화 또는 복호화 방법 및 장치
KR101424969B1 (ko) * 2005-07-15 2014-08-04 삼성전자주식회사 영상 복호화 방법
KR100727991B1 (ko) * 2005-10-01 2007-06-13 삼성전자주식회사 영상의 인트라 예측 부호화 방법 및 그 방법을 사용하는부호화 장치
JP5529040B2 (ja) * 2008-01-10 2014-06-25 トムソン ライセンシング イントラ予測されたビデオの照明補償の方法及び装置
KR101291196B1 (ko) * 2008-01-25 2013-07-31 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
KR20090097688A (ko) * 2008-03-12 2009-09-16 삼성전자주식회사 영상의 인트라 예측 부호화/복호화 방법 및 장치
EP2318919B1 (en) * 2008-08-19 2018-10-24 ContentArmor A propagation map for watermarking
KR101601840B1 (ko) 2009-02-23 2016-03-22 에스케이 텔레콤주식회사 채널 상관 관계를 이용한 영상 부호화/복호화 장치 및 방법과 그를 위한 컴퓨터로 읽을 수 있는 기록매체
EP2529553B1 (en) * 2010-01-25 2021-08-11 InterDigital Madison Patent Holdings Video encoder, video decoder, method for video encoding and method for video decoding, separately for each colour plane
CN102754442A (zh) * 2010-02-10 2012-10-24 Lg电子株式会社 处理视频信号的方法和装置
KR101503269B1 (ko) * 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
CN105635737B (zh) * 2010-04-09 2019-03-15 Lg电子株式会社 处理视频数据的方法和装置
WO2011130051A1 (en) * 2010-04-12 2011-10-20 Sony Corporation Context adaptive directional intra prediction
CN103238334A (zh) * 2010-10-01 2013-08-07 三星电子株式会社 图像帧内预测方法和设备
WO2012092761A1 (en) * 2011-01-07 2012-07-12 Mediatek Singapore Pte. Ltd. Method and apparatus for improved intra prediction mode coding
US20120183064A1 (en) * 2011-01-14 2012-07-19 Sony Corporation Codeword assignment for intra chroma mode signaling for hevc
HUE060582T2 (hu) 2011-03-06 2023-03-28 Lg Electronics Inc Intra predikációs eljárás krominancia blokkok számára
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
CN106412585A (zh) * 2011-06-17 2017-02-15 联发科技股份有限公司 内部预测模式编码的方法
MX2013013941A (es) * 2011-07-11 2014-01-31 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
EP3512197B8 (en) * 2012-01-20 2020-10-21 Dolby Laboratories Licensing Corporation Intra prediction mode mapping method
CN103220508B (zh) * 2012-01-20 2014-06-11 华为技术有限公司 编解码方法和装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070077609A (ko) * 2006-01-24 2007-07-27 삼성전자주식회사 인트라 예측 모드 결정 방법 및 장치

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Chen J et al: "CE6.a: Chroma intra prediction by reconstructed luma samples", JCTVC-D350. *
Jianle Chen 'Chroma intra prediction by reconstructed luma sample', JCTVC-C206, 2010.10.7.* *

Also Published As

Publication number Publication date
EP3703368A1 (en) 2020-09-02
EP2685724B1 (en) 2020-04-29
US10798415B2 (en) 2020-10-06
CN108449604A (zh) 2018-08-24
US11765385B2 (en) 2023-09-19
KR20230086804A (ko) 2023-06-15
CN108540810B (zh) 2021-01-08
WO2012121535A2 (ko) 2012-09-13
US11184640B2 (en) 2021-11-23
PL2685724T3 (pl) 2020-07-27
US20130336591A1 (en) 2013-12-19
CN108540811A (zh) 2018-09-14
KR20180033302A (ko) 2018-04-02
KR102540995B1 (ko) 2023-06-08
KR101953383B1 (ko) 2019-03-04
CN108449598A (zh) 2018-08-24
CN108259920A (zh) 2018-07-06
US20230276071A1 (en) 2023-08-31
KR101842037B1 (ko) 2018-03-27
US9530224B2 (en) 2016-12-27
US20210218992A1 (en) 2021-07-15
CN103416066A (zh) 2013-11-27
KR20190020856A (ko) 2019-03-04
KR20220073868A (ko) 2022-06-03
US20180048911A1 (en) 2018-02-15
ES2933424T3 (es) 2023-02-08
US20200396484A1 (en) 2020-12-17
PL3703368T3 (pl) 2023-02-27
DK2685724T3 (da) 2020-05-18
KR20200056484A (ko) 2020-05-22
KR102113267B1 (ko) 2020-05-20
EP2685724A2 (en) 2014-01-15
KR102064154B1 (ko) 2020-01-09
KR101953384B1 (ko) 2019-03-04
US20190327489A1 (en) 2019-10-24
US11350126B2 (en) 2022-05-31
KR20190020855A (ko) 2019-03-04
US20250097459A1 (en) 2025-03-20
US20180310024A1 (en) 2018-10-25
EP2685724A4 (en) 2014-10-22
ES2793489T3 (es) 2020-11-16
KR102213112B1 (ko) 2021-02-05
US20200236399A1 (en) 2020-07-23
KR20170020539A (ko) 2017-02-22
CN108540811B (zh) 2020-12-04
US9800894B2 (en) 2017-10-24
EP3703368B1 (en) 2022-11-02
KR102403793B1 (ko) 2022-05-30
US10972750B2 (en) 2021-04-06
US11677977B2 (en) 2023-06-13
KR102653005B1 (ko) 2024-03-29
KR20200004467A (ko) 2020-01-13
US20170105025A1 (en) 2017-04-13
HUE048963T2 (hu) 2020-09-28
US10009631B2 (en) 2018-06-26
US20220272379A1 (en) 2022-08-25
WO2012121535A3 (ko) 2012-12-20
KR20140007073A (ko) 2014-01-16
KR101707088B1 (ko) 2017-02-15
US12200252B2 (en) 2025-01-14
HUE060582T2 (hu) 2023-03-28
EP4145831A1 (en) 2023-03-08
KR102064157B1 (ko) 2020-01-09
CN108259920B (zh) 2021-01-08
US10623768B2 (en) 2020-04-14
SI3703368T1 (sl) 2023-01-31
CN108449604B (zh) 2021-01-08
CN103416066B (zh) 2018-04-24
CN108449598B (zh) 2021-01-08
PT2685724T (pt) 2020-06-01
KR101789478B1 (ko) 2017-10-24
HRP20221483T1 (hr) 2023-02-03
KR20180033303A (ko) 2018-04-02
CN108540810A (zh) 2018-09-14
KR102288526B1 (ko) 2021-08-10
KR20210014772A (ko) 2021-02-09
KR20170120188A (ko) 2017-10-30
US20220038742A1 (en) 2022-02-03

Similar Documents

Publication Publication Date Title
KR102288526B1 (ko) 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
JP7284137B2 (ja) クワッドツリーを用いるブロック情報の符号化／復号化方法及びその方法を使用する装置
KR102307005B1 (ko) 움직임 벡터 리스트 설정 방법 및 이러한 방법을 사용하는 장치
WO2013066026A1 (ko) 양자화 계수 부/복호화 방법 및 이러한 방법을 사용하는 장치
KR102415377B1 (ko) 두 개의 후보 인트라 예측 모드를 이용한 화면 내 예측 모드의 부/복호화 방법 및 이러한 방법을 사용하는 장치
KR20140080884A (ko) 계층적 비디오 코딩에서 색차 블록의 화면 내 예측 모드를 복호화하는 방법 및 이러한 방법을 사용하는 장치
KR20140004825A (ko) 엔트로피 부호화 및 엔트로피 복호화를 위한 구문 요소 이진화 방법 및 장치
KR102297268B1 (ko) 두 개의 후보 인트라 예측 모드를 이용한 화면 내 예측 모드의 부/복호화 방법 및 이러한 방법을 사용하는 장치
KR102069784B1 (ko) 두 개의 후보 인트라 예측 모드를 이용한 화면 내 예측 모드의 부/복호화 방법 및 이러한 방법을 사용하는 장치
KR20210111901A (ko) 화면 내 예측 방법 및 이러한 방법을 사용하는 장치

Legal Events

Date Code Title Description
A107 Divisional application of patent
PA0104 Divisional application for international application

Comment text: Divisional Application for International Patent

Patent event code: PA01041R01D

Patent event date: 20210804

Application number text: 1020217003272

Filing date: 20210201

PA0201 Request for examination
PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20210929

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20220228

A107 Divisional application of patent
GRNT Written decision to grant
PA0104 Divisional application for international application

Comment text: Divisional Application for International Patent

Patent event code: PA01041R01D

Patent event date: 20220525

Application number text: 1020217003272

Filing date: 20210201

PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20220525

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20220526

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
点击 这是indexloc提供的php浏览器服务，不要输入任何密码和下载