앞 글의 주파수 도메인 결론, 즉 "업스케일은 image 제거, 다운스케일은 비율에 맞춘 anti-alias 필터"를 HW로 구현하는 표준 구조가 Polyphase FIR scaler입니다. 이 시리즈의 선택은 Separable 6탭 Lanczos3 polyphase(64 phase) + 다운스케일 커널 늘이기 + 큰 비율 다단 구성입니다.
1. 목적
- 임의 비율(예: 4K → 1080p, 720p → 4K)의 해상도 변환
- 다운스케일 aliasing과 업스케일 imaging·blur 최소화
- Chroma 포맷(4:2:0)과 siting을 유지한 변환
2. 동작

출력 픽셀 위치를 입력 좌표계로 환산하면, 정수부는 필터 윈도우의 위치, 소수부는 커널을 얼마나 이동해 샘플링할지(phase)를 나타냅니다. 위상마다 커널을 미리 샘플링한 계수 세트를 LUT로 저장해 두면, 출력 픽셀 하나는 N탭 FIR 한 번으로 계산됩니다. 좌표는 DDA(누산기)로 매 출력마다 step을 더해 생성합니다.

3. 중요한 알고리즘 / HW
3.1 Separable 구조

2D 커널 대신 수직·수평 1D 필터를 직렬로 적용하면 곱셈 수가 N² → 2N으로 줄어듭니다. Lanczos 2D 커널은 엄밀히는 분리형이 아니지만(방사형 버전과 차이), 분리형 적용이 영상 스케일러의 표준이며 품질 차이는 작습니다.
3.2 다운스케일 필터


- 비율 M만큼 커널을 늘려 차단 주파수를 0.5/M로 낮추고, 계수 LUT를 비율별로 FW가 재계산
- 탭 수는 HW에 고정(예: 최대 12탭)이므로 그 이상은 2:1 half-band 데시메이션 단계를 앞에 둠
3.3 정밀도와 세부 사항
- Phase 수: 64 phase면 위치 양자화 오차 1/128 픽셀 이하로 시각적으로 충분. 32 이하에서는 느린 줌에서 미세한 떨림이 보일 수 있음
- 계수 정규화: 위상마다 양자화된 계수 합이 정확히 1.0(예: 256)이 되도록 가장 큰 탭에서 보정
- Ringing 제어: 강한 에지에서 Lanczos 음수 lobe가 overshoot를 만듦 → 주변 2탭의 min/max로 출력 clamp (샤프닝과 같은 기법)
- 경계 처리: 화면 가장자리는 픽셀 복제(edge replicate)로 윈도우를 채움
- Chroma: 4:2:0 chroma는 별도 DDA를 쓰고 siting(4편) 오프셋을 시작 위상에 반영해야 색 경계가 어긋나지 않음
- 업스케일 고급화: 에지 방향을 검출해 방향성 보간을 섞는 edge-directed 업스케일러는 대각선 계단을 더 줄일 수 있음. 면적이 허용되면 polyphase 결과와 블렌딩하는 구조로 추가
이것으로 ISP Pipeline과 Video Processing 시리즈를 마칩니다. Bayer 처리부터 Tone Mapping, YUV 노이즈 제거·샤프닝·색 처리, DIS, Warp, Scaler까지 파이프라인 순서로 정리했습니다.
'Video Processing' 카테고리의 다른 글
| [Video Processing] 14. Scaling 이론 (주파수 도메인: Sampling · Aliasing · Imaging) (0) | 2026.11.22 |
|---|---|
| [Video Processing] 13. Affine / Perspective Warp (LDC 포함) (0) | 2026.11.22 |
| [Video Processing] 12. DIS (Digital Image Stabilization) (0) | 2026.11.22 |
| [Video Processing] 11. RANSAC (강건한 모델 추정) (0) | 2026.11.22 |
| [Video Processing] 10. Feature Detection · Matching (FAST · Harris · BRIEF) (0) | 2026.11.22 |






























