이 새로운 AI 도구를 사용하여 몇 분 안에 낙서를 비디오 클립으로 변환하세요. 방법은 다음과 같습니다.

ZDNET을 팔로우하세요: 우리를 선호 소스로 추가하세요 Google에서.

---

ZDNET의 주요 시사점

• Runway의 새로운 기능을 사용하면 기념일 로고에서 비디오를 생성할 수 있습니다.
• 인상적이지만 조심스럽게 손을 잡을 때 최고의 성능을 발휘합니다.
• 액세스하려면 최소한 Standard Runway 계정에 대한 비용을 지불해야 합니다.

---

들소 떼를 감상하던 정착민 가족이 날개 달린 악마 같은 생물 두 마리가 머리 위로 날아가자 도망치기 시작합니다. 어린 소녀는 유령처럼 울타리 기둥을 통과합니다.

이 초현실적인 5초 장면은 AI 플랫폼 Runway의 Motion Sketch라는 새로운 기능 덕분에 만들어졌습니다. 이름에서 알 수 있듯이 정지 이미지 위에 직접 만들 수 있는 간단한 낙서로 비디오를 생성합니다.

또한: 나는 로컬, 오픈 소스, 완전 무료인 Claude Code 경쟁 제품을 사용해 보았습니다. 어떻게 진행되었는지

아래 클립의 경우, Runway 플랫폼을 통해 제공되는 텍스트-이미지 변환 모델 중 하나인 Google의 Nano Banana Pro를 사용하여 이미지를 생성한 다음 새와 같은 모양과 가족과 들소가 도망가야 할 방향을 가리키는 두 개의 화살표를 간단히 그렸습니다. 약간의 추가 안내를 위해 몇 가지 텍스트 프롬프트를 추가했고 나머지는 모델이 처리했습니다.

ChatGPT가 원하는 출력을 생성하기 위해 정교하게 제작된 여러 프롬프트를 요구하는 것과 마찬가지로 이 기능은 여전히 ​​약간의 손길을 필요로 합니다. 그럼에도 불구하고 이는 AI로 생성된 비디오와 언어보다 시각적으로 더 많이 생각하는 것을 선호하는 창조 산업의 전문가에게 큰 진전이 될 수 있습니다.

또한: Claude의 무료 등급에는 4개의 Pro 기능이 포함되어 있습니다. 20달러 구독이 여전히 가치가 있나요?

Runway 제품 관리자 Aditi Poduval은 ZDNET에 “이 기능은 모든 유형의 사용자에게 유용합니다.”라고 말했습니다. “궁극적으로 우리는 사람들이 특정 서면 메시지를 작성하지 않고도 정확한 움직임을 얻을 수 있도록 돕고 있습니다.”

Motion Sketch를 사용하면서 배운 내용은 다음과 같습니다.

내 실험

곤경에 처한 정착민 가족의 이미지를 처음 실험한 후, 말하자면 대략적인 느낌을 높이기로 결정했습니다.

나는 텍스트 프롬프트를 사용하여 가족의 이미지를 생성했습니다. 그러나 Runway를 통해 Nano Banana Pro는 낙서만을 기반으로 이미지를 생성할 수도 있으며 Microsoft Paint 플랫폼에서 직접 만들 수 있습니다. 나는 시각예술가가 아닌 작가이지만 나무가지에 매달려 있는 뱀처럼 막연하게 보이길 바라는 것을 최선을 다해 스케치했다.

그런 다음 모션 스케치를 사용했습니다. 앞서 언급했듯이 저는 낙서에 몇 가지 텍스트 프롬프트를 추가하여 정착민 가족 실험의 중간에 모델을 만났지만 이번에는 서면 지침 없이도 모델이 얼마나 잘 작동하는지 확인하고 싶었습니다. 나는 오른쪽으로 미끄러지는 뱀의 클립을 생성하기를 원했기 때문에 뱀 몸의 길이를 따라 몇 가지 간단한 동작 지시 화살표를 그렸습니다. 6세 어린이라면 누구나 그 화살표가 무엇을 의미하는지 이해할 수 있지만 AI는 어떻게 수행할까요? 길이를 10초로 설정하고 Runway의 Gen-4.5 비디오 모델(Google의 Veo 3 및 Veo 3.1도 사용 가능)을 선택한 후 생성을 클릭했습니다.

또한: AI는 더 똑똑해지는 것이 아니라 점점 더 전력 소모가 심해지고 비용이 많이 듭니다.

나는 뱀이 나뭇가지를 따라 이동하고 장면의 오른쪽 하단에서 빠져나가는 비교적 부드러운 클립을 기대했지만 훨씬 더 밋밋한 결과를 얻었습니다. 뱀은 총격의 왼쪽에 몸의 일부를 남겨두고 다른 뱀이 몸에서 나와 나무에서 떨어졌습니다. 어느 순간 악어 같은 발이 자라나 나뭇가지를 따라 스스로 당기곤 했습니다. 내가 그린 원래 화살표도 분해되기 전에 클립 시작 부분에 잠깐 나타났습니다.

공평하게 말하면 뱀은 생물학적 경이로움이며 뱀의 움직임을 정확하게 모델링하는 것은 인간이든 기계이든 모든 애니메이터에게 작은 작업이 아닙니다. 그리고 모델은 제가 여러 개의 화살을 뱀이 동시에 여러 방향으로 움직이도록 지시하는 것으로 잘못 해석한 것 같았습니다. 이는 분명히 혼란스러운 일이었습니다. 그래서 저는 돌아가서 원본 이미지에 화살표가 있는 간단한 텍스트 프롬프트를 추가했습니다. “뱀이 나뭇가지를 따라 미끄러져 들어갑니다.”

이번 최종 결과물은 제가 생각했던 것과 조금 더 가까워졌습니다(갑자기 뱀 몸이 복제되거나 다리가 돋아나지 않음). 모션은 여전히 ​​어색해 보였지만 뱀의 움직임은 복잡한 세밀한 물리학이 많이 포함되어 상당히 어려운 작업이었습니다.

실험 하나 더: 모델이 실제 사진과 얼마나 잘 어울리는지 확인하고 싶어서 노트북에서 한 장을 업로드했습니다. 몇 달 전에 브루클린의 Prospect Bark에서 찍은 사진입니다.

나는 사실상 보편적인 불의 아이콘을 그렸습니다. 주황색으로 상감되어 위쪽으로 방사되는 물결 모양의 빨간색 선입니다. 다시 말하지만, 나는 재능 있는 일러스트레이터라고 주장하지 않습니다. 그러나 대부분의 인간은 내가 이것을 통해 무엇을 하려고 했는지 인식할 수 있을 것입니다. Runway의 모델도 이를 포착하여 내 사진에 포착된 고요한 호숫가 장면 중앙에 거대한 모닥불을 떨어뜨렸습니다. 다시 한 번 내 스케치가 클립에 잠시 나타났다가 흔들리는 선이 점차 짧아지는 환각적인 움직임으로 사라졌습니다. 그리고 상상하고 있을지도 모르지만 모닥불 옆의 나무들도 그 열기로 인해 검게 변하는 것 같았습니다.

테이크아웃

다른 생성 AI 도구와 마찬가지로 모션 스케치에도 불완전성과 결함이 있습니다(나무 기둥을 통과하는 어린 소녀, 다리가 돋아나는 뱀, 최종 비디오 클립에 잠깐 나타나는 내 원본 스케치의 물결선). 그래도 감동받았어요.

또한: AI 직업안정의 비결은? 이제 스트레스를 받지 말고 직장에서 방향을 바꾸세요. 방법은 다음과 같습니다.

AI를 사용하여 비디오를 생성하는 완전히 새로운 형식을 엿볼 수 있습니다. 이는 그 어느 때보다 상상력과 제작 사이의 장벽을 낮출 수 있습니다. 한 X 사용자는 Runway의 화요일 발표 아래에 “이것이 내가 기다려온 것입니다”라고 게시했습니다. “비전을 그린 후 비디오로 렌더링되는 것을 보는 것? 평생 엔지니어링을 할 수 없는 제작자를 위한 절대적인 게임 체인저입니다.”

지금으로서는 특정한 비전을 염두에 두고 있다면 여전히 상당한 시행착오가 필요하지만, 그럼에도 불구하고 미래가 어떻게 될지에 대한 흥미로운 미리보기입니다. 실제로 무엇을 생산할지에 대한 명확한 비전 없이 창의성의 정신으로 작업을 시작하는 경우에도 특히 시도해 볼 가치가 있습니다.

접속 방법

Motion Sketch에는 최소한 Runway의 표준 구독이 필요합니다. 구독료는 사용자당 월 12달러이며 월간 크레딧 625개가 제공됩니다.

사용자 대시보드에서 액세스하려면 왼쪽 메뉴에서 “앱”을 클릭한 다음 “Gen-4.5 탐색” 컬렉션 아래 또는 화면 오른쪽에 있는 미리보기 창 아래에서 “지금 사용해 보세요”라는 버튼이 표시되는 모션 스케치를 선택하세요.

여기에서 이미지를 업로드하고 “스케치” —> “스케치 내보내기” —> 생성을 클릭하세요.