AMD가 이번 GDC 2023에서 차세대 인게임 업스케일링 기술인 'FidelityFX Super Resolution 3.0(이하 FSR 3.0)' 기술을 전격 공개하였습니다.
현재는 FSR 3.0이 개발 초기 단계에 있는 상황이지만, 시간적 업스케일링(Temporal Upscaling) 작업을 통하여 이전 세대에 비해서 많은
개선이 이루어질 것으로 보고 있다고 합니다.
▶ 시간적 업스케일링(과거, 현재, 미래) - TEMPORAL UPSCALING PAST, PRESENT, AND FUTURE
※ 강연자 : AMD 개발자 기술 엔지니어 - 스테판 호드
▶ AMD FidelityFX Super Resolution 3.0의 주요 핵심 4가지 요소
- 성능 : FSR 2.0에 비해 최대 2배의 성능
- 대기 시간 : 게이머에게 높은 프레임 속도 및 가능한 낮은 대기 시간을 제공하기 위한 지속 개발 초점
- 통합 : 개발자가 쉽게 구현이 가능하며, FSR 2의 기존 통합은 FSR 3로 쉽게 전환하는 것이 가능함.
- 라이센스 : MIT 오픈 소스 라이선스로 개발자가 사용함에 있어서 최적의 통합 유연성을 제공함.
▶ AMD FidelityFX Super Resolution 3.0 기술 소개 부분 슬라이드 번역(01)
① FidelityFX Super Resolution 3.0 소개
- FSR 2.0에서는 현재 프레임 샘플 보다 더 많은 픽셀을 계산하고 있음
- 프레임 보간을 도입하여 더 많은 내용을 생성할 수 있음
- 처리 과정에서 최대 2배의 프레임 속도 향상을 달성
② 장점
- 보간된 모든 픽셀에 대해서는 최소 하나의 샘플이 있을 가능성이 있음.
- 피드백 루프 X : 보간된 프레임이 한 번만 표시됨
- 보간 효과 : 모든 보간 효과는 한 프레임 동안만 남음
③ 앞으로의 도전 과제
- 오래된 샘플의 색상을 수정하기 위한 색상 클램핑
- 2D 화면 공간 모션 벡터에서는 비선형 모션 보간이 어려움.
- 최종 프레임 보간은 모든 후처리 및 UI를 보간해야 함을 의미함.
※ 참고 : 프레임 보간은 몇 가지 문제가 더 있어서 복잡함
- 오래된 샘플의 색상을 수정하기 위해서 색상 클램핑에 의존할 수 없음
- 비선형 모션 보간은 2D 화면 공간 모션 벡터에서 어렵기 때문에 최소 60 FPS 입력을 권장함
- 최종 프레임이 보간되면 UI 및 모든 사후 처리도 보간되어야 함.
▶ AMD FidelityFX Super Resolution 3.0 기술 소개 부분 슬라이드 번역(02)
- 상(업스케일링 없는 네이티브 렌더링)
- 중(FidelityFX Super Resolution 2.0 적용 - 2배 업스케일링)
- 하(FidelityFX Super Resolution 3.0 적용 - 2배 업스케일링 및 프레임 보간)
▶ AMD FidelityFX Super Resolution 3.0 기술 소개 부분 슬라이드 번역(03)
☞ AMD FidelityFX Super Resolution 3.0의 주요 핵심 4가지 요소
- 성능 : FSR 2.0에 비해 최대 2배의 성능
- 대기 시간 : 게이머에게 높은 프레임 속도 및 가능한 낮은 대기 시간을 제공하기 위한 지속 개발 초점
- 통합 : 개발자가 쉽게 구현이 가능하며, FSR 2의 기존 통합은 FSR 3로 쉽게 전환하는 것이 가능함.
- 라이센스 : MIT 오픈 소스 라이선스로 개발자가 사용함에 있어서 최적의 통합 유연성을 제공함.
※ AMD FSR 3.0은 해상도 업스케일링과 프레임 보간을 결합함
▶ AMD FidelityFX Super Resolution 3.0 기술 소개 부분 슬라이드 번역(04)
☞ AMD FidelityFX Super Resolution 3.0의 기술 미리 살펴보기
① FSR 3은 업스케일링과 보간 사이의 시너지 효과를 얻음
- 모션 벡터 및 AMD Fluid Motion을 활용하여 보간된 프레임 생성
- 좋은 모션 추정은 보간법의 핵심임
- FSR 2의 추가 내부 정보를 활용할 수 있음
② 대기 시간 감소는 초점 영역임.
- 게이머는 높은 프레임 속도와 가능한 한 가장 낮은 대기 시간을 모두 필요로 함.
③ 기존 FSR 2 통합은 FSR 3으로 보다 쉽게 전환됨
④ 필요한 경우 최적의 통합 유연성을 허용하는 MIT 오픈 소스 라이센스
▶ AMD FidelityFX Super Resolution 3.0 기술 소개 부분 슬라이드 번역(05)
① 우리는 지난 몇 년 동안 먼 길을 왔다!
- 공간적 업스케일링에서 시간적, 프레임 보간을 통한 시간적 업스케일링으로 진화함.
- 수 십년간의 R&D 혁신을 나타냄.
- 이전 기술은 종종 다음 기술에서 활용될 수 있음.
- 몇 가지 과제가 남아 있음.
② FSR 3은 FidelityFX Super Resolution의 다음 진화 단계임
- 더 부드러운 게임 경험을 가능하게 할 것임
- 동시에 개발자는 시각적 품질에 더 많은 GPU 시간을 집중할 수 있음.