SYDLAB_inha/Dynamic Mesh 18

VDMC - Other extensions

1. 패치와 패치 그룹 (Patches & Patch Groups) 구조: 메쉬는 여러 패치로 세분화되며, 이는 더 큰 타일이나 패치 그룹으로 그룹화될 수 있습니다. 패치 그룹: 새로 도입된 개념으로, 연관된 패치들에 공통의 파라미터들(세분화 스킴, 양자화 파라미터, 변환 정보 등)을 적용할 수 있게 합니다. 2. 확장성 (Scalability) 시간적 확장성: 시간적 서브샘플링과 프레임 재배열을 통해 지원됩니다. 품질 및 공간적 확장성: 기하학/정점 속성 데이터와 속성 맵 데이터에 다른 메커니즘을 사용하여 지원됩니다. 메쉬의 해상도는 세부 레벨 간 전환을 통해 조정될 수 있습니다. 3. 관심 영역 (Region of Interest, ROI) 설정 가능성: 특정 영역에 대해 더 높은 해상도나 품질로 인..

VDMC - Wavelet transform ( Lifting transform )

Lifting transform Lifting Scheme 또는 Lifting Transform은 원래의 wavelet 변환을 개선한 것으로, wavelet 변환의 계산 효율성과 융통성을 향상시킨 방법입니다. Wavelet 변환은 시간-주파수 분석을 위해 신호를 다양한 주파수 구성 요소로 분해하고, 이를 통해 신호의 특성을 분석할 수 있게 해줍니다. Lifting Scheme은 이 과정을 더 효율적이고 실용적으로 만듭니다. Lifting Scheme의 주요 특징과 과정: 분할 단계(Split Step): 데이터 샘플을 홀수 인덱스와 짝수 인덱스의 두 그룹으로 분할합니다. 이렇게 분할하는 것은 계산을 단순화하고, 후속 단계에서의 처리를 용이하게 합니다. 예측 단계(Predict Step): 한 그룹의 데이..

VDMC - Apple's(6) / inter Decoding

inter Decoding Inter Decoding De-mux : 먼저, de-multiplexed되어 encoder로부터 받은 bitstrea을 sub_bitstream으로 나눈다. motion field에 대한 sub_stream, displacement에 대한 sub_stream, attribute map, patch information 으로 나뉜다. Base mesh m''(i) Inter Encdoing 과정에서, base mesh는 quantization되어 motion encoder로 들어가고, reference base mesh도 reconstructed,quantized되어 motion encoder로 들어가서 motion encoder에서는 현재의 base mesh와 referen..

VDMC - Apple's(5) / Inter Encoding

Inter Encoding intra encoding diagram과의 차이점 - encoder의 input으로 reference base mesh m'(j)가 들어온다. // MPEG의 I-frame 역할을 하는 - static mesh codec 대신 motion codec이 들어감 - Reconstruction of base mesh module // i-frame에 대한 base mesh가 buffer에 저장되어있다가 현재 frame에 맞춰서 조정된..? // reference frame에 대한 base mesh 가져오는 건 pre-processing에 있는 mesh buffer Reference base mesh - reference base mesh m'(j) 는 현재 frame의 base m..

VDMC - Apple's(4) / Intra Decoding

Intra Decoding encoidng을 통해 compress된 bitstream이 demuxing 되어 각각의 sub-stream으로 분리된다. reconstructed base mesh m'(i)를 생성해내기 위해 mesh의 sub-stream들이 decoder의 input으로 들어온다. //patch information은 meta data인가?? mesh sub_stream (base mesh) encoder에서 base mesh에 대해 quantization만 하고 static mesh encoder 거쳐서 보냈으므로 deocder에서 static mesh decoder만 거치고 inverse quantization만 해주면 deocding된 base mesh m''(i)를 얻어낼 수 있다...