트랜지션 랩: 동영상 250개로 알게 된 AI 동영상 트랜지션

트랜지션 82가지를 테스트한 결과, 트랜지션에서 어려운 부분은 효과가 아니라는 사실을 알게 되었습니다. 어려운 것은 교체, 즉 한 화면이 다음 화면으로 바뀌는 순간입니다.

Nodaro의 전환 피커는 동영상 프롬프트에 트랜지션을 추가합니다. 휩 팬, 매치 컷, 액체 변형, 낮→밤 타임랩스 같은 트랜지션입니다. 동영상 노드는 시작 프레임과 종료 프레임을 받고, 그 사이의 모든 것은 모델이 그립니다.

이 연구는 간단한 확인에서 시작했습니다. 고른 트랜지션이 정말 의도한 대로 모델에 전달되는지 확인하는 것이었습니다. 항상 그렇지는 않았습니다. 트랜지션 약 20개를 담은 첫 릴에서 컷에 길이 문구가 붙는다는 사실이 드러나, 그 문구를 없앴습니다. 프로덕션 환경에서 한 다음 확인에서도 매치 컷은 여전히 섞였습니다. 모델에 전달된 프롬프트는 다음과 같았습니다.

속도감을 나타내는 문구가 컷에까지 따라붙은 것입니다. 모델은 두 화면을 서로 녹아들게 섞었습니다. 섞이는 컷은 컷이 아닙니다.

그 버그 하나를 고치는 일이 트랜지션 82가지 전체에 대한 연구가 되었습니다. 연구가 끝날 무렵에는 모든 트랜지션을 렌더링하고 평가했으며, 필요한 경우 다시 썼습니다.

연구의 방향을 정한 세 가지 발견

실제로 테스트한 내용

연구는 2026년 9월 23일부터 10월 5일까지 13일 동안 진행했습니다. 테스트 클립을 250개 넘게 생성했고, 48,000크레딧 넘게 사용했습니다. 두 수치 모두 하한값입니다. 숫자로 기록한 라운드만 셌기 때문입니다.

모든 클립은 같은 구성을 사용했습니다.

• Seedance 2.5, 이미지로 동영상, 480p, 4초, 16:9.
• 시작 프레임과 종료 프레임, 그리고 모든 테이크에 같은 필름 룩.
• 두 개의 비트: 0~2초의 첫 번째 샷, 그다음 두 번째 샷을 여는 트랜지션.

트랜지션 82가지를 작동 방식에 따라 아홉 계열로 나눴습니다. 계열마다 실패하는 방식이 다르기 때문입니다.

82번째 옵션인 자동은 프롬프트에 아무것도 추가하지 않으므로 클립이 없습니다.

한 번에 한 가지만 바꿨습니다. A/B 테스트에서 두 프롬프트는 트랜지션 자체의 텍스트만 달랐고, 보낸 모든 프롬프트를 예상한 텍스트와 한 글자씩 대조했습니다. 팀원 한 명이 모든 테이크를 1~5점으로 평가했습니다. 눈으로 놓치기 쉬운 부분은 자동 측정으로 확인했습니다. 컷이 들어가는 프레임, 블렌드가 이어지는 시간, 와이프가 움직이는 방향입니다. 교차 확인용으로 자동화된 두 번째 검토자도 클립에 점수를 매겼습니다. 둘의 평가가 다르면 사람의 평가로 정했습니다.

이름 다음에 설명

예전 피커는 match cut(매치 컷)처럼 트랜지션의 이름만 보내고, 그 의미는 모델이 알 것이라고 믿었습니다. 이 방식을, 이름 뒤에 트랜지션이 어떻게 진행되는지 설명하는 한 줄을 붙여 보내는 방식과 비교했습니다.

이 방식으로 테스트한 트랜지션 4개, 즉 롤, 유리 파열 재형성, 정지 프레임 점프, 매치 컷에서는 설명을 붙인 이름이 4번 모두 이겼습니다. 이름만 보냈을 때는 유리 파열 재형성의 파편이 한 번도 다시 합쳐지지 않았습니다.

그래서 지금은 모든 트랜지션이 이름 뒤에 괄호로 설명을 붙인 형태로 쓰입니다. 예를 들어 휩 팬은 다음과 같습니다.

이름은 어떤 트랜지션인지 모델에 알려 줍니다. 설명은 프레임이 무엇을 해야 하는지 알려 줍니다.

계속 디졸브된 컷

디졸브된 매치 컷 이야기로 돌아가겠습니다. 이 매치 컷은 세 단계로 고쳤습니다.

첫째, 컷에는 이제 타이밍이나 속도감을 나타내는 문구가 붙지 않습니다. 길이나 “자연스러운 타이밍” 같은 말은 시간에 걸친 변화를 묘사하므로, 컷에 붙으면 블렌드를 부릅니다.

둘째, 이제 모든 컷은 명시적인 문장 하나로 끝납니다.

셋째, 그 문장 속 단어 하나가 중요하다는 것을 알게 되었습니다. 눈에 띄지 않게 넘어가도록 만든 컷인 심리스 매치에서 “abrupt”(갑작스러운)를 뺀 문장을 테스트했습니다. 이 단어가 없으면 컷이 디졸브되었습니다. “abrupt”가 있는 테이크는 5점, 없는 테이크는 2점이었습니다.

컷 테스트 전반에서 이 문장은 효과를 유지했습니다.

문구가 컷 프레임 자체를 묘사하자 컷 항목의 점수도 올랐습니다. 블랙 스냅 컷이라면 순수한 검은색 한 박자입니다. 점프 매치라면 도약의 정점에서 일어나는 교체입니다. 매치 컷이라면 제자리에 유지되는 형태 하나입니다. 이렇게 다시 쓰자 컷 항목은 기존 문구의 80점 중 62점에 비해 80점 중 73점을 받았습니다. 블랙 스냅 컷에서 기존 문구는 검은 화면을 1.461.75초 동안 유지했습니다. 새 문구는 0.671.12초 동안 유지해 한 박자에 더 가까워졌습니다.

요청한 길이와 실제 길이의 차이

컷 두 개에는 더 부드러운 선택지를 주고 싶었습니다. 하드 컷 대신 짧은 블렌드를 쓰는 방식입니다. 그래서 모델에 약 1초, 2초, 3초의 블렌드를 요청하고, 각 테이크에서 섞임이 10%에서 90%까지 진행되는 구간을 측정했습니다.

길이를 두 배로 요청해도 두 배가 되지 않았습니다. 2초 블렌드는 1.041.34초로, 1초 블렌드의 범위 안에 들어갔습니다. 샷이 두 개인 4초 클립에서 모델은 문장이 어떤 숫자를 말하든 약 11.5초의 크로스페이드를 한 번 만들었습니다.

블렌드는 일부 컷의 성격도 바꿨습니다. 점프 컷에서 남자는 한 프레임에서는 한 위치에, 다음 프레임에서는 다음 위치에 있어야 했습니다. 블렌드 문장을 넣자 남자는 대신 옥상을 가로질러 뛰어올랐습니다. 매치 컷에서는 공유하는 형태가 크로스페이드 속에 사라졌습니다. 그 컷다운 성격을 지킨 것은 심리스 매치와 점프 매치뿐이었습니다.

그래서 제품은 블렌드 길이를 짧게 한 가지만, 그것도 이 두 컷에서만 제공합니다. 다른 모든 길이, 그리고 나머지 컷 6개의 모든 길이에서는 하드 컷이 유지됩니다.

타이밍의 고집은 다른 곳에서도 나타났습니다. 거울 속으로 줌에서는 문구가 무엇이라고 하든 마지막 라운드의 모든 테이크가 약 2.3초에 거울 속 장면을 바꿨습니다. 그때가 두 번째 샷의 구간이 열리는 시점입니다. 문구가 바꾼 것은 교체를 얼마나 잘 감추느냐뿐이었습니다.

타임랩스 트랜지션에는 반대 문제가 있었습니다. 클립 중간의 짧은 구간에 밀어 넣자 낮→밤 타임랩스는 한 프레임 점프로 시작했습니다. 클립 전체를 주자 빛이 자연스럽게 흘렀습니다.

교체가 숨을 곳 만들기

숨기는 방법을 가장 많이 알려 준 것은 글리치 계열이었습니다. 이 계열의 기존 문구는 간섭 줄무늬, 색수차, 픽셀 번짐 같은 효과를 묘사했습니다. 모델은 효과를 조금 그린 다음 그 아래에서 크로스페이드하는 경우가 많았습니다.

다시 쓴 문구는 다른 방식을 택했습니다. 각 문구는 화면 전체에 불투명한 사건 하나를 덮고, 샷 전환을 그 안에 넣었습니다. 채널 전환에는 순간적으로 터지는 흑백 노이즈를, 색 반전 플래시에는 사진 네거티브를, 디스플레이 와이프에는 검은 바탕 위에서 선 하나와 점 하나로 줄어드는 화면을 주었습니다. 글리치 항목 7개에서 다시 쓴 문구는 35점 중 25점을 받아, 기존 문구의 35점 중 21점을 앞섰습니다.

이긴 텍스트들은 같은 구조를 공유합니다. 먼저 사건, 그다음 The camera stays where it is and the framing does not change.(카메라는 제자리에 머물고 프레이밍은 바뀌지 않음)라는 문장, 이어서 넘겨주기, 샷이 끝나는 방식, 마지막으로 화면 전체에 대한 문장 하나입니다. 색 반전 플래시는 다음과 같습니다.

깜빡임에 필요한 꺼진 상태

이 규칙을 증명한 사례는 홀로그램 깜빡임이었습니다. 처음 두 버전은 모두 깜빡이지 않고 크로스페이드했습니다. “간섭 줄무늬” 같은 질감 단어는 깜빡임이 아니라 질감을 만들었습니다.

새 버전 두 개는 모두 화면에 꺼진 상태, 즉 검은색을 주었습니다. 첫 번째는 강한 플래시 사이사이에 완전히 검은 화면으로 끊기는 방식으로, 완전히 검은 프레임 14개가 들어간 진짜 스트로브를 만들었습니다. 두 번째는 첫 번째 샷이 깜빡이다 검은색으로 꺼지게 한 다음, 밝은 주사선으로 새 샷을 그렸습니다. 주사선은 그 자체로 위에서 아래로 내려가는 와이프가 되었고, 홀로그램이 실체화되는 모습으로 가장 잘 읽혔습니다. 출시한 것은 두 번째입니다.

운반체가 주도권을 가져가기도 합니다. 한번은 라이트 릭이 실어 나르는 이중 노출을 썼습니다. 모델은 이중 노출이 아니라 라이트 릭 와이프를 렌더링했습니다. 운반체가 트랜지션 자체가 된 것입니다.

이중 노출: 결과를 정한 것은 이미지

이중 노출은 이 연구에서 가장 어려운 트랜지션이었습니다. 네 라운드가 걸렸습니다.

첫 번째 스틸 이미지 쌍, 즉 밀밭에 선 작고 어두운 인물과 밤의 항구에서 비쳐 보이는 효과를 표현하는 문구 네 가지를 시도했습니다. 프레임 단위로 측정하니 네 문구는 사실상 같은 동영상을 렌더링했고, 그 동영상은 평범한 크로스 디졸브와도 같았습니다. 라이트 릭은 결과를 바꿨지만, 라이트 릭 와이프로 바꿨을 뿐입니다.

돌파구는 다시 쓰기를 멈추고 스틸 이미지를 살펴봤을 때 찾아왔습니다. 고전적인 이중 노출에는 밝은 배경 앞의 큰 실루엣이 필요합니다. 우리 인물은 화면 높이의 약 29%만 차지했고, 밤의 항구는 매우 어두웠습니다. 그래서 새 쌍을 만들었습니다. 흰색에 가까운 바탕에 화면 높이의 93%를 채우는 새까만 옆얼굴을 두고, 밝은 산속 호수로 끝나는 쌍입니다.

새 쌍에서는 평범한 크로스페이드조차 조금 이중 노출처럼 보입니다. 어두운 인물 안에 호수가 보이는 동안 흰 바탕은 하얗게 날아가기 때문입니다. 새 문구는 그 위에 실제적이지만 부분적인 개선을 더했습니다. 이 문구는 인물 부분이 먼저 채워지도록 요청합니다.

인물 부분이 바탕보다 얼마나 앞서 진행되는지 측정했습니다. 새 문구에서는 인물 부분이 섞임 비율로 최대 0.31 앞섰습니다. 같은 쌍에 “반투명 이중 노출”이라는 기존 문구를 쓰자 둘은 보조를 맞춰 움직였고, 앞선 정도는 0.01이었습니다. 각각 테이크 하나씩의 결과이므로 법칙이 아니라 단서로만 봅니다.

교훈

서로 다른 문구가 같은 동영상을 만든다면, 변수는 문구가 아닙니다. 이미지를 살펴보세요.

같은 문구, 서로 다른 두 결과

컷 중에서 가장 많은 테이크가 필요했던 것은 매치 컷이었습니다. 매치 컷은 두 샷을 운율처럼 맞춥니다. 첫 번째 화면의 한 형태가 두 번째 화면에서도 같은 위치, 같은 크기로 놓입니다.

네 라운드, 열두 개가 넘는 테이크 동안 기존 문구를 이긴 것은 없었습니다. 카메라에 형태 쪽으로 푸시 인하라고 요청하면 카메라는 매번 푸시 인했지만, 컷은 나아지지 않았습니다. 카메라 카탈로그에서 빌린 문구는 가장 깔끔한 컷을 만들었지만, 없던 톱니바퀴를 지어냈고, 그것도 종료 프레임이 없을 때만 그랬습니다.

마침내 이긴 문구는 컷 프레임을 묘사했습니다.

옥상에 웅크린 남자에서 모래 언덕을 성큼성큼 걷는 같은 남자로 넘어가는 쌍에서, 이 문구는 걸음이 같은 위치, 같은 크기에 놓인 깔끔한 한 프레임 컷을 만들었습니다. 기존 문구를 5 대 3으로 이겼습니다.

그다음 두 번째 스틸 이미지 쌍인 동전과 대관람차에 이 문구를 적용했습니다. 컷이 전혀 없었습니다. 동전이 부풀어 올라 안에 대관람차가 담긴 유리 원반이 되었고, 두 화면이 약 0.75초 동안 한 프레임을 함께 썼습니다. 섞지 않는다는 우리 자신의 규칙을 깼지만, 아주 멋져 보였습니다. 이 테이크에 5점을 주고 미리보기로 정했습니다.

대체로 지정한 방향으로 가는 와이프

이제 와이프에는 방향 설정이 있습니다. 자동에 더해 왼쪽에서 오른쪽, 오른쪽에서 왼쪽, 위에서 아래, 아래에서 위, 그리고 두 대각선을 고를 수 있습니다. 각 방향은 와이프 설명 안의 단어만 바꿉니다.

방향별 첫 테이크에서는 여섯 방향 중 다섯 방향이 지정한 쪽으로 갔습니다. 왼쪽에서 오른쪽은 오른쪽에서 왼쪽으로 갔는데, 이는 그 쌍에서 방향을 지정하지 않았을 때 모델이 고른 방향이었습니다. 바이트 단위로 같은 입력으로 다시 생성하자 4개 중 2개가 지정한 쪽으로 갔습니다.

빠르게 훑어볼 때 놓친 것을 자동 검사가 잡아냈습니다. 두 대각선 와이프는 서로 거울상인 문구를 쓰지만, 거울상으로 렌더링되지 않았습니다. 하나는 약 45도로, 다른 하나는 약 29도인 화면 자체의 대각선에 가깝게 진행되었습니다. 두 대각선 모두에서 남자의 코트가 아주 잠깐 경계선 너머로 번졌습니다.

해결책이 아닌 안전장치, 부정 문장

점프 컷에는 특정한 실패가 있었습니다. 남자는 한 프레임에서는 웅크리고 있고, 다음 프레임에서는 이미 담장 위에 앉아 있어야 했습니다. 테이크 3개 중 2개에서 남자는 먼저 몇 프레임 동안 새 위치로 뛰어갔습니다.

그래서 문장 하나를 추가했습니다.

그 결과 깨끗한 테이크가 이전의 3개 중 1개에서 3개 중 2개가 되었습니다. 이전 비율 그대로라도 3개 중 2개 이상이 깨끗할 확률은 운만으로 약 26%입니다. 그리고 세 번째 테이크는 여전히 이전 실패와 똑같이 번졌습니다.

이는 카메라 모션 랩에서 알게 된 것과 일치합니다. 원하는 프레임을 먼저 묘사하세요. 제외 지시는 그 위에서 조금 거들 뿐입니다.

모델이 무시하는 단어

어떤 문장은 아예 없는 것처럼 렌더링되었습니다.

• 같은 강도에서 멈춘 뒤 뚜렷한 한 박자 동안 변함없이 유지되어야 했던 이중 노출. 평탄하게 유지되는 구간은 없었습니다.
• 실루엣 바깥은 모두 첫 번째 샷으로 남으라고 요청한 다섯 번째 문장. 그래도 화면 전체가 함께 바뀌었습니다.
• 텍스트에는 그다음 개고 해가 돌아온다고 쓰여 있었지만, 종료 프레임에서는 여전히 비가 내리던 날씨 변화. 두 테이크 모두 끝까지 비가 내렸습니다.
• 정지된 시작 프레임에서 블록이 길게 번지는 줄무늬를 그리며 화면을 옆으로 미끄러져야 했던 데이터모시. 블록은 제자리에서 다른 블록으로 바뀌었습니다. 미끄러진 것은 없었습니다.

이미 옳았던 기존 문구 대부분

모든 것을 다시 쓰기는 쉬웠을 것입니다. 하지만 그것은 잘못된 선택이기도 했을 것입니다.

렌더링하기 전에 설명 81개를 모두 글로만 먼저 검토했습니다. 66개는 괜찮아 보였고, 12개는 다시 써야 했고, 3개는 결정이 필요했습니다. 동영상으로 확인하자 첫 번째 다시 쓰기 라운드에서 새 문구가 이긴 트랜지션은 3개였고, 기존 텍스트가 버틴 트랜지션은 6개였습니다. 기본 페이드와 와이프에서는 기존 한 줄 설명이 9개 항목 중 6개에서 5점 만점에 5점을 받았습니다. 롤은 바뀐 3개 중 하나였습니다. 기존 문구는 일부만 돌았다가 되돌아왔고, 새 문구는 with no swing back(되돌아오지 않고)이라는 말대로 한쪽으로만 돕니다.

단어 하나가 무게를 가졌습니다. 심리스 매치에는 “abrupt”(갑작스러운)가 필요했습니다. 녹아내림은 “standing”(서 있는)을 빼자 약해졌습니다. 입 속으로 줌은 “throat”(목구멍)을 빼자 좋아졌습니다.

결국 트랜지션 82개 중 41개가 새 문구로 출시되었고, 나머지는 기존 문구를 유지했습니다.

두 모습이 모두 좋을 때는 둘 다 유지

연기 속 사라짐은 동점이었습니다. 두 버전이 서로 다른 모습으로 같은 점수를 받았습니다. 하나는 피사체를 감싸고, 다른 하나는 화면 전체를 덮습니다. 하나를 고르는 대신 둘 다 스타일 선택지로 남겼습니다.

이제 트랜지션 7개에 스타일이 있습니다. 연기 속 사라짐, 모래폭풍, 벚꽃 폭풍, 오로라 스윕, 정원 개화, 파편 소나기, 화이트 플래시입니다.

아직 해결되지 않은 것

일부 트랜지션은 해결된 문제가 아니라, 우리가 찾은 최선의 문구로 출시되었습니다.

• 이중 노출은 스틸 이미지에 좌우됩니다. 네 라운드의 어떤 테이크도 진짜 겹침을 0.5초 동안 유지하지 못했습니다. 이중 노출을 성립시키는 것은 밝은 바탕 위의 크고 어두운 실루엣입니다.
• 거울 속으로 줌은 한 번도 거울의 유리를 통과하지 않습니다. 장면은 거울 안에서 바뀌며, 그 교체를 가장 잘 감추는 것은 액체 물결입니다.
• 매치 컷은 동전 때처럼 일부 스틸 이미지 쌍에서 모프로 바뀔 수 있습니다.
• 모래폭풍의 가볍게 스치기 스타일은 테이크 2개 중 1개에서 한 방향으로 쓸고 지나갔습니다. 다른 테이크는 고르게 퍼진 회색 안개였습니다.

제품에서 바뀐 점

• 전환 피커의 트랜지션 82개는 모두 랩에서 테스트한 문구를 씁니다. 그중 41개가 바뀌었습니다.
• 모든 트랜지션은 이름 뒤에 설명이 붙는 형태로 쓰입니다.
• 컷에는 섞임 방지 문장이 붙고, 길이나 속도감은 붙지 않습니다.
• 심리스 매치와 점프 매치는 컷 대신 약 1초의 짧은 블렌드로 섞을 수 있습니다.
• 와이프에는 방향 설정이 있고, 트랜지션 7개에는 스타일이 있습니다.
• Nodaro Studio의 전환 피커에서는 트랜지션 81개에 미리보기 클립이 표시됩니다. 모두 연구에서 실제로 생성한 테이크입니다.

남긴 규칙

1. 트랜지션의 이름을 쓰고, 그다음 프레임이 무엇을 하는지 쓰세요.
2. 컷은 한 프레임입니다. 그렇게 명시하고, 두 이미지는 절대 섞이지 않는다고 쓰세요.
3. 컷에는 길이나 속도감을 나타내는 문구를 붙이지 마세요.
4. 트랜지션의 타이밍을 숫자에 기대지 마세요. 4초 클립에서는 약 1~1.5초의 블렌드가 한 번 일어난다고 예상하세요.
5. 샷 전환은 화면 전체를 덮는 불투명한 사건 하나 안에 숨기세요.
6. 깜빡임에는 꺼진 상태가 필요합니다. 화면이 검은색으로 끊긴다고 쓰세요.
7. 스틸 이미지는 트랜지션과 함께 설계하세요. 이미지 쌍이 문구보다 중요할 수 있습니다.
8. 문구는 스틸 이미지 쌍 두 개 이상에서 테스트하세요.
9. 텍스트와 종료 프레임이 다르면 종료 프레임이 이깁니다.
10. 지정한 방향은 방향을 지정하지 않았을 때 모델이 하는 동작과 비교해 확인하세요.
11. 원하는 프레임을 먼저 묘사하세요. 부정 문장은 안전장치로 다루세요.
12. 타임랩스 트랜지션에는 클립 전체를 주세요.
13. 두 모습이 모두 좋으면 둘 다 남기세요.
14. 다시 쓰기 전에 기존 문구를 테스트하고, 한 번에 한 가지씩 바꾸세요.

배운 점

처음에는 트랜지션의 이름을 더 정확하게 붙이려고 했습니다. 결국에는 화면에 일어나는 일을 묘사하게 되었습니다.

내버려 두면 동영상 모델은 첫 화면에서 마지막 화면까지 가장 쉬운 길, 즉 크로스페이드를 택합니다. 트랜지션은 모델이 그렇게 하지 못하게 막는 모든 것입니다. 문구는 검은 프레임, 순간적인 노이즈, 물결처럼 교체가 숨을 곳을 줄 수 있습니다. 하지만 그 숨을 곳이 그럴듯한지는 이미지가 정합니다. 호수를 담을 수 있는 실루엣이나 컷을 실어 나를 수 있는 형태가 그런 예입니다.

그래서 지금은 트랜지션이 실패하면 두 가지를 묻습니다. 교체는 어디에 숨을 수 있을까요? 그리고 스틸 이미지가 그 자리를 주고 있나요?

한 줄 요약

모델에 트랜지션을 요청하지 마세요. 교체가 숨을 곳을 주세요.

트랜지션 랩 연구 노트, 2026년 10월. 이 페이지의 모든 클립은 연구에서 실제로 생성한 테이크입니다. Seedance 2.5 이미지로 동영상, 480p, 4초로 생성했습니다.