소식

카메론의 '에이리언' 복원은 비판을 받았고, '언더 더 에일리언'의 스타일은 이상하다. AI를 이용한 영화 제작을 중단하라.

2024-08-15

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina


네 번째 '에일리언'이 공개됐고, 카메론 감독이 연출한 '에일리언 2'도 고화질 블루레이 복원 버전을 출시했다. 최근 그는 '할리우드 리포터'와 인터뷰에서 '에이리언: 데스쉽'을 초보 편집 단계부터 봤다고 언급하며 소소한 소감을 전했다.


하지만 이번 인터뷰에서 카메론이 말한 가장 놀라운 점은 비판적인 영화 팬들에 대한 그의 반응이었다. '에일리언 2'의 복원 버전이 나온 후 팬들은 AI 복원의 효과에 불만을 품었고, 이후의 효과는 다음과 같다고 생각했다. 복원 너무 정교해서 옳지 않습니다.

매우 상세한 매개변수를 제공하고 직접 비교를 경험할 수 있는 Blu-ray 영화 전문 포럼입니다.



비교해 보면... 변화가 매우 미묘하고, 함께 놓지 않으면 볼 수조차 없습니다.

새로운 Blu-ray 버전은 선명도와 대비가 증가한 것과 비슷합니다. 장점은 선명도가 향상되었지만 톤의 변화로 이어져 일부 사진 세부 정보가 손실된다는 것입니다.

팬들은 이러한 세부 사항 손실에 대해 엇갈린 의견을 가지고 있지만 AI 복구를 사용할 수 없다는 것이 아니라 '에일리언 2'가 이미 2010 버전을 스캔 기반으로 가지고 있다는 점과 동의할 수 있는 점은 다음과 같습니다. '아바타'의 기술적 내용도 낮지 않은데 강도를 높일 필요가 있을까?

오래된 픽셀의 재사용

인공지능의 복원 기능은 이미 널리 퍼져 있으며, 'AI가 오래된 사진을 부활시킨다'는 한동안 인기를 끌었던 알리바바 클라우드도 지난 올림픽 기간 동안 아카이브 이미지를 부활시키는 기능을 지원했다.


Cameron과 함께 작업한 기술 팀인 Park Road Post Production은 유사한 기술을 사용해 오랫동안 오래된 영화를 복원해 왔습니다. 가장 고전적인 결과는 제1차 세계 대전 다큐멘터리를 복원하고 다시 채색하는 것입니다.


다큐멘터리 They Shall Never Grow Old 사진 출처: Park Road Post Production

이러한 오래된 이미지는 거의 모두 필름 긁힘, 균열, 퇴색 등의 문제가 있습니다. AI는 텍스처, 영역 또는 보간 기반 알고리즘을 통해 주변 픽셀의 패턴과 특성을 학습하여 사진의 누락된 부분을 자동으로 복원할 수 있습니다.

하지만 영화팬들의 눈에는 긁힘이나 흐릿함도 영화의 일부로 보입니다. 집중적으로 복원한 후에는 왜곡이 생길 정도로 효과가 매우 탁월합니다.


Cameron 영화 "True Lies" 사진 출처: X 사용자 @RazorwireRyan

영화 팬들의 비난에 직면한 카메론은 다음과 같이 직접적으로 대답했습니다. 그냥 당신의 삶을 살아보세요.

그는 영화의 모든 장면과 프레임을 모두 봤고, 함께 작업한 팀도 모두 오랜 지인이었다고 말했다. <에일리언2>의 복원 작업을 담당한 컬러리스트는 <아바타>와 동일했다.

아마도 이 "완전한 제거"는 잘못된 방향으로 가고 있는 것 같습니다.

노이즈 감소는 실제로 모든 영화 복원 작업의 핵심 링크입니다. 2010년 버전의 "Alien 2" 블루레이 복원에서 그는 이를 복원하기 위해 디지털 도구를 사용하기 시작했습니다. 필름과 사진의 디테일이 잘 조화되어 클래식 버전이 탄생합니다.


카메론의 "Alien 2" 2010 블루레이 복원판

"노이즈와 그레인을 완전히 제거하고, 해상도를 높이고, 처음부터 끝까지 모든 프레임의 색상을 보정했습니다. 결과는 놀라웠습니다."

카메론은 항상 새로운 기술을 연구하는 것을 좋아했습니다. 향수를 불러일으키는 일부 감독들과 달리, 그는 오래된 영화의 '거친 느낌'에 특별한 집착이 없습니다. 그래서 그는 옛 영화를 다시 복원하는 과정에서 원본 35mm 필름의 질감을 더욱 매끄럽게 하고 화질을 높였다.

그 대가는 피부 질감, 인간 얼굴의 윤곽, 특히 머리카락의 렌더링이 모두 부자연스러운 효과를 갖는다는 것인데, 이는 "True Lies"에서 가장 분명하게 드러납니다.


Cameron의 영화 "True Lies" 아래 그림은 AI 수리 후 효과를 보여줍니다. Picture from: The New York Times.

영화팬들의 생각은 무리가 아니다. 오래된 영화의 네거티브를 보존하는 것도 어렵고, 화질을 손상시키기 쉬운 것도 사실이기 때문에 기술이 필요하다. 하지만 카메론의 영화 중 일부는 그다지 오래되지 않았고, 심지어 "아바타"와 같은 영화도 AI를 사용하여 수리하는 경우가 많습니다.

이것은 다소 합리적으로 들립니다. 이러한 비판은 AI를 사용해서는 안 된다는 것이 아니라, 사용해야 할 곳에 사용되는지 아니면 용도를 위해 사용되는지를 말하는 것입니다.

사용을 위해 사용

필름 복원에 사용되는 기술은 '생성'보다는 '업그레이드'에 더 가깝습니다. 미드저니(Mid-journey), 런웨이(Runway) 같은 기술이 '무에서 유를 창조하는 것'이라면, 영화 복원의 목표는 '있는 것을 바꾸는 것'이며, 원본의 품질을 보장하는 것을 출발점으로 한다.

그러면 기술에 들어가기 위해 기술에 들어가는 것은 매우 이상해질 것입니다. 최근 개봉한 국내 영화 '언더 더 스트레인저'는 'AI 스타일 트랜스퍼 기법'을 활용했다.


제작진이 공개한 특별 비하인드를 보면, 실제 인물이 촬영한 부분을 만화로 변환하는 데 Stable Diffusion WebUI가 사용된 것으로 보입니다. Wu Ershan은 원작이 만화이기 때문에 원작에 경의를 표하기 위해 이 방법을 선택했다고 말했습니다.

그리고 현 단계에서는 AI 렌더링이 불안정하기 때문에 팀에서는 최종 효과가 배우의 연기를 복원할 수 있는지 확인하기 위해 LoRA의 미세 조정 방법도 사용했습니다. 이는 대형 모델을 효과적으로 미세 조정하기 위해 소량의 재료만 필요한 방법입니다.


청중은 “꼭 그럴 필요는 없다”고 말했다.

헌정인데 AI 냄새가 정말 압도적이네요. '언더 더 스트레인저'의 스타일 전환은 사실 기존 실사영화에 AI 생성 과정을 더한 것이다. 후자는 원래 만화의 스타일을 재현하려는 의도였는데 어느 부분이 잘못됐는지 모르겠고, 대신 AI가 이미 애니메이션화된 소재를 가져와서 다시 현실감 넘치는 방향으로 옮겼습니다.

그래서 등장했다 "종이인간은 진짜 사람이 되었다가 다시 종이인간이 된다"효과는 대규모 인터넷 텍스처가 됩니다. 그것이 스크린에 등장하고 거의 30분 동안 이어지자 관객들은 더 이상 참을 수 없다고 말했다.


사진출처: 스테이션 B 유저 @hal의 고추밥

가장 과장된 반전은 '레전드'에서 성룡이 AI를 이용해 젊은 남자 주인공의 모습을 재현하고 나자와 사랑에 빠진다는 점이다. 너무 터무니없어서 수리한 것인지, 단순히 교체한 것인지 의문이 들 정도였습니다.


'전설' 스틸 사진 출처: Douban

잊어버리세요, Douban 평점은 5.1이고, 평점이 20,000명밖에 되지 않습니다. 너무 나빠서 아무도 신경 쓰지 않습니다...

긍정적인 교재는 '교통지구2'다. 촬영 중 이설견 선생님은 비인두암을 앓아 대사 발음에 영향을 주었지만 그의 연기와 캐릭터 해석은 사람을 감동시키지 않을 수 없었다. 그래서 사운드 제작팀은 머신러닝을 활용하고 오래된 영화를 소재로 삼아 Li Xuejian 선생님의 목소리를 재현했습니다.


아래 비교영상을 보시면 아시겠지만 정말 효과적인 수리입니다. 비하인드 영상이 아니었다면 영화를 보는 동안 복원된 사운드라는 사실을 거의 눈치채지 못했을 것입니다. 그리고 AI는 두 세계의 장점을 모두 갖고 있는 데에는 그럴 만한 이유가 있습니다.

가장 나쁜 것은 용도를 위해 사용하는 것입니다. 특히 재생 방식이 점점 더 다양해지고, OLED 화면과 4K 표준이 점점 더 대중화되고, 저화질 TV 화면에서는 볼 수 없었던 문제들이 발생하고 있습니다. 과거에는 점차적으로 노출되어 돋보기 아래에 놓이게 됩니다.

비판에 직면하여 Cameron의 협력 팀인 Park Road Production의 총책임자 역시 오늘날이 과거와 다르며 관객이 영화 효과에 대해 다른 요구를 하고 있음을 깨달았습니다.

그는 뉴욕타임스와의 인터뷰에서 "너무 멀리 갈 수는 없다. 그렇지 않으면 쓰레기처럼 보일 것이다. 하지만 (영화를) 조금 더 좋게 만들 수 있다면 노력하겠다"고 말했다.

텍스트 |