Black Forest Labs가 480p 이상의 영상을 최대 네이티브 4K까지 다시 생성해주는 독립 도구 'FLUX Upscale'을 공개했다. 모델의 새 버전이라기보다는 자사 파이프라인의 한 단계를 떼어내 별도로 판매하는 형태에 가깝다. 같은 방식은 이미 FLUX 3 Video 안에 들어 있었고, 그때는 1080p 출력 단계를 맡고 있었다.
이 독일 팀은 이미지 분야에서 FLUX 시리즈 오픈소스 모델로 이름을 알렸다. 이번에 내놓은 것은 이미지 생성보다는 후반 작업 쪽에 가깝다. API 권한이 없는데 재생성과 일반 업스케일링의 차이를 먼저 보고 싶다면 PixPix의 Video Enhance에 영상을 무료로 넣어보고 두 버전을 나란히 비교해보는 편이 스펙표를 읽는 것보다 훨씬 직관적이다.
재생성은 업스케일링과 다르다
흔히 쓰이는 영상 업스케일링은 보간 방식을 쓴다. 픽셀이 부족하면 추측으로 채우는데, 그 결과물은 매끄럽지만 정보량이 비어 있다. Black Forest Labs는 FLUX Upscale을 다르게 정의한다. 모델이 저해상도 입력을 보면서 프레임을 하나하나 다시 그리는 '재생성'이라는 것이다. 겨냥하는 결함은 구체적이다. 흐릿한 얼굴, 수면, 그리고 잔디 같은 고주파 텍스처에서 나타나는 격자 모양 아티팩트다. 이 세 가지는 공교롭게도 현재 영상 생성 모델들의 고질적인 약점과 겹친다. 생성 단계에서 연산량을 줄이려고 디테일을 먼저 포기하고, 후처리 단계에서 다시 메우려 하는 지점이다.
도구는 1.5배, 2배, 3배 세 단계 배율을 지원한다. HD 소스를 기준으로 하면 각각 대략 1080p, 2K, 4K에 해당한다.
두 가지 모드, 두 가지 비용
Precise 모드는 4단계를 거치며 메가픽셀당 초당 0.07달러다. Creative 모드는 8단계를 거치며 같은 기준으로 0.10달러다. 단계 수가 두 배로 늘면서 가격은 43% 오르는데, 공식 설명에 따르면 늘어난 연산량은 디테일 재구성에 쓰이고, 그 대가로 원본 화면에 대한 변경 폭도 커진다.
출력 해상도 기준으로 대략 계산해보면, 4K 한 프레임은 약 829만 픽셀, 즉 8.29메가픽셀이다. Precise 모드에서는 초당 약 0.58달러, Creative 모드에서는 약 0.83달러가 든다. 10초짜리 완성본이라면 고화질화 공정 하나에만 6~8달러가 들어간다.
이 수치는 지금의 영상 생성 시장 기준으로 보면 결코 저렴하지 않다. 지난 1년 동안 생성 쪽의 초당 비용은 여러 업체가 경쟁적으로 낮춰왔고, 1센트 미만 단가가 이미 공개 가격표에 올라 있다. 오히려 업스케일링이 비용 곡선에서 더 비싼 쪽에 서게 된 셈이다. 놀랍지 않은 결과다. 생성 쪽은 저해상도 상태에서 연산량이 큰 작업 대부분을 먼저 끝낼 수 있지만, 업스케일링은 목표 해상도에서 모든 프레임을 그대로 처리해야 하고, 픽셀 수 자체가 그대로 제약이 되기 때문이다.
픽셀-초 단위 과금에는 또 다른 결과가 따른다. 비용이 길이에 비례해 선형으로 늘어나며, 규모의 경제가 작동하지 않는다. 1분짜리 영상은 10초짜리 영상의 여섯 배 비용이 든다.
누가 이 비용을 낼까
눈에 보이는 활용처는 몇 곳에 몰려 있다. 광고와 이커머스용 소재는 원래 몇 초에서 십몇 초로 짧아 편당 비용을 관리하기 쉽으면서도 화질에는 민감하다. 영화나 숏폼 드라마의 예고편 클립도 마찬가지다. 여기에 더해 기존 소재 리마스터링도 있다. 오래된 영상을 많이 보유한 팀 입장에서는 다시 촬영하는 것보다 다시 만드는 쪽이 저렴하다.
이커머스 쪽 도구는 이 과정을 이미 버튼 하나로 만들어 놓았다. PixPix는 Video Enhance와 이미지 Upscale을 상품 이미지 세트, 영상 복제 기능과 같은 화면에 두고 있어서 대표 이미지가 흐릿하거나 영상이 흔들려도 그 자리에서 바로 고칠 수 있다. 무료 제공량만으로도 상품 영상 한 편을 끝까지 처리할 수 있다. 중소 판매자 입장에서는 픽셀-초 단위로 과금되는 API는 이미 일정 물량을 소화하는 팀을 위한 것이고, 이런 도구에서 먼저 효과를 확인한 뒤 정밀도에 돈을 쓸 가치가 있는지 판단하는 편이 더 현실적이다.
이번에 공식이 공개하지 않은 부분도 눈여겨볼 만하다. 처리 지연 시간, 작업 한 건당 길이 상한, FLUX가 아닌 다른 모델로 생성된 소재에 대한 효과 차이 모두 언급이 없다. 도구는 이미 공식 플레이그라운드와 API 문서에 올라와 있어서, 실제 성능은 여러 사람이 실제 소재로 돌려본 뒤에야 판가름 날 것이다.
중국 영상 제작 팀 입장에서 이번 소식이 갖는 더 큰 의미는 하나의 방향을 확인시켰다는 데 있다. 영상 모델 간의 경쟁은 생성이 가능한가에서, 생성한 뒤에도 몇 단계를 더 거쳐야 하는가로 무게중심을 옮기고 있다. 해상도, 길이, 일관성처럼 예전에는 하나의 모델 성능 지표로 묶여 있던 요소들이, 이제는 따로 값을 매길 수 있는 서비스로 쪼개지기 시작했다.
참고 출처: Black Forest Labs 공식 블로그, CocoLoop, FLUX 도구 문서 및 공식 가격 페이지. 두 모드의 메가픽셀당 초당 단가, 단계 수, 세 단계 배율은 공식 가격 기준으로 확인했다.