예전글인 ffmpeg와 waifu2x-caffe를 사용하여 영상을 확대하기 - 인터넷 / 소프트웨어 - 기글하드웨어 (gigglehd.com)를 보고서 영상 확대를 시도했습니다.
일단, 퀄리티가 만족스러우면 전체를 시도할 생각으로 샘플로써 초전자포T 3화만을 도전
Nvidia GPU는 없지만, 이제는 AMD GPU로도 돌리도록 그동안 발전이 있었기에, 진행하였습니다.
일단, 영상의 출처는 애니플러스 VOD 다운로드를 통해 구매하였음을 미리 밝힙니다.
사용 툴은 waifu2x-snowshell_v2.3_with_caffe_and_vulkan과 ffmpeg 입니다.
1. ffmpeg를 통해 이미지 추출
업데이트가 있기는 했습니다만, 크게 달라진 부분이 없습니다.
시간도 오래 걸리지 않고, 금새 되더군요.
다만, 원본 글에서 있던 링크는 사망하였고, 공식 홈페이지인 http://www.ffmpeg.org/를 통해서 받을 수 있었습니다.
2. 이미지 업스케일링
일단, 가장 오래 걸리는 작업입니다.
제 GPU는 AMD인 관계로 AMD GPU도 지원하는 waifu2x-snowshell을 사용하였으며, 개인적으로 vulkan도 지원하는 만큼 vulkan을 이용하는 것을 추천합니다.
x2로 고정되기는 하지만, 가장 속도가 빠르더군요.
여기서 24시간 걸렸으며, 총 프레임 이미지는 34200장이었네요.
3. ffmpeg를 통한 연속 이미지 동영상 변환
지금 현재 진행중인 부분으로, 배속이 0.0602배에서 왔다갔다 합니다.
(참고로, 분해에서는 9배속 이상이었습니다.)
(추가 : GPU 가속으로 인코딩하면, 1배속에 근접하게 되었습니다. AMD GPU도 RX500 부터는 하드웨어 가속이 됩니다!)
아직 진행중이지만, 이미지 업스케일링 결과만 살짝 올린다면,
(원본)
(업스케일링)
생각보다 그렇게 만족스럽진 않더군요.