런웨이(Runway)는 2018년에 만들어진 온라인 영상 편집 및 제작 사이트입니다. Runway 팀은 생성 AI 기술과 기계 학습 분야에서 선두를 달리고 있습니다. 이미 많은 사람들에게 알려진 AI 생성 페인팅 모델 stable duffusion이 바로 Runway팀에서 기술 지원을 한거란 사실을 많은 사람들이 잘 모르고 있을 것입니다. Runway가 현재 많은 사람들의 주목을 받고 있는 이유는 AI 동영상 생성 분야에서 선두에 위치하고 있기 때문입니다. 그들은 영상 콘텐츠 제작에 있어 AI를 적용하는데 전념해 왔으며, 영상 제작의 문턱을 낮추어 사람들이 풍성하고 창의적인 영상 콘텐츠를 쉽게 제작할 수 있도록 돕는데 모든 노력을 다해 왔습니다.
런웨이(Runway)는 30개 이상의 AI Magic Tools를 제공하고 있으며 Runway상에서 사용자는 리얼한 이미지 및 영상을 생성하기 위해 사전 훈련을 마친 기계 학습 모델을 미리 생성 및 게시할 수 있습니다. 사용자는 자신의 모델을 교육하여 GItHub를 통해 새 모델을 직접 가져올 수도 있습니다.
3월 23일 런웨이(Runway)는 사용자가 텍스트, 이미지 및 비디오 클립에서 비디오 콘텐츠를 생성할 수 있는 Gen-2 모델을 출시했습니다.
AI 모델 트레이닝 (만들기)
- Subject in focus (15장 정도의 사진을 찾아 초점을 맞춘다.)
- Different context and lighting (다양한 상황, 각도 및 조명에 조여진 사진을 찾는다.)
- Only contain the subject (단체사진이난 복잡한 배경은 훈련상대 제외한 나머지 부분은 자르기 도구를 사용하여 잘라낸다.)
런웨이(Runway) 구독 가격
1. Runway는 현재 연간 결제시 20% 할인이 포함된 4가지 구독 기준을 제공합니다. 각 구독 플랜에는 런웨이 크레딧, 해상도 향상, 워터마크 제거, 무제한 비디어 편집, 용량, 편집자 수, 내보내기 등에 대한 액세스가 포함됩니다.
- 무료 플랜: 월 $0 (1달, 3개의 비디오 프로젝트 제한)
- 기준 플랜: 월 $15 (연간 $144)
- 찬성 플랜: 월 $35 (연간 $336)
- 무제한 플랜: 월 $95 (연간 $912)
AI Magic Tools 에 관하여
1. 비디오 생성 툴
- ① 비디오를 비디오로
모든 비디오를 완전히 스타일화하고 애니메이션이 적용된 렌더 헤드로 AI로 전환하는 방법을 안내해 드리겠습니다.
- AI Magic Tools 에서 Gen1: Video to Video를 찾아 들어갑니다.
- 로컬에서 비디어를 끌어 넣거나 자산 폴드에서 비디오를 찾을 수 있습니다.
- 업로드된 항목을 2번 클릭하면 설정과 참조를 조절할 수 있는 창으로 이동합니다.
- 여기에서 동영상속 사물을 내가 원하는 다른 사물로 바꿀 수 있습니다.
- 사용가능한 3가지 Style reference설정을 통해 원하는 동영상 생성. (1. Image 2. Presets 3. Prompt)
※ 고급설정에서 여러 파라메터들의 값을 조절하여 더 원하는 이미지에 가까운 영상을 얻을 수 있습니다.
- ② 텍스트 Prompt를 통해 비디오 생성 Text to Video
여기서는 머리속으로 상상한 내용을 텍스로 작성하여 Gen2버전에서는 원하는 영상을 생성할 수 있습니다.
- 프롬프트를 작성하고 시드, 업스케일링 ... 등 항목을 조절한 후 비디오가 완료되면 생성 버튼 클릭.
- 생성된 영상은 자산 폴드에 자동 저장되며 컴퓨터에 다운로드 하거나 프롬프트를 다시 조정하여 같은 페이지에 계속 수정된 영상을 생성할 수 있습니다.
- 좀 더 아이디어가 필요할 경우 아래 영감 피드에서 마음에 드는 영상 프롬프트를 확인 및 참조할 수 있습니다.
2. 비디오 편집 툴
- ① 영상 배경 제거
비디오에서 배경을 제거하려면 샷에서 분리하려는 피사체를 클릭한 다음 내보내기 메뉴로 이동하여 출력 유형을 RroRes또는 PNG를 선택한 다음 Export Mask 클릭하면 완성된 비디오가 자산 폴드에 나타납니다.
- ② 동영상에서 사람과 사물을 제거
- ③ 모든 비디오를 부드러운 슬로우 모션으로 바꾸기
- ④ 비디오에서 얼굴을 감지하고 흐리게 하기
AI Magic Tools에서 Blur Faces(얼굴 흐림) 클릭합니다.
- 자산폴드에서 자신의 비디오를 불러오거나 로컬에서 업드르를 할 수 있습니다.
- Runway에서 스캔이 시작되고 완료되면 얼굴 위에 사각형 흐림 효과가 적용이 됩니다.
- 비디오 전체에서 추적합니다.
- 옆에 있는 옵션을 통해 흐림 정도를 조절하거나 Runway가 감지한 얼굴을 확인할 수 있습니다.
- 각 얼굴 아래에는 얼굴을 식별하는 미리보기 프레임이 있습니다.
- 특정 얼굴만 흐리게 처리하려면 아래로 내려와 흐리게 하고 싶지 않은 얼굴을 제거한 다음 얼굴 위로 마우스를 가져가서 클릭하면 됩니다.
- Pedding을 조정하여 흐림 모양의 크기를 늘릴 수 도 있습니다.
- ⑤ 비디오에 Bokeh 추가하기
3. 오디오 생성 툴
- ① 원치 않는 배경 소음 즉시 제거
- ② 오디오나 비디오에서 무음부분을 자라내기
- ③ 모든 비디오를 테스트로 복사히기
- ④ 모든 비디오에 대한 자막을 생성하기
4. 이미지 생성 및 편집 툴
- ① 단어만으로 원본 이미지 생성하기
- ② 텍스트 프롬프트로 모든 이미지를 변환하기
- ③ 마춤형 인물 사진, 동물, 스타일등을 만들기
- ④ 텍스트를 이미지로 생성하여 이미지 확장하기
- ⑤ 이미지의 가장자리를 확장하기
- ⑥ 일련의 이미지를 에니메이션 비디오로 변환하기
- ⑦ 이미지의 일부를 다시 상상하고 리믹스하기
- ⑧ 사진에 무한한 배경을 제공하기
- ⑨ 이미지에 새로운 변형을 가져오기
- ⑩ 흑백 이미지를 색상화하기
AI 모델 트레이닝 (만들기)
- Subject in focus (15장 정도의 사진을 찾아 초점을 맞춘다.)
- Different context and lighting (다양한 상황, 각도 및 조명에 조여진 사진을 찾는다.)
- Only contain the subject (단체사진이난 복잡한 배경은 훈련상대 제외한 나머지 부분은 자르기 도구를 사용하여 잘라낸다.)
- 준비된 이지미를 AI Magic Tools을 클릭 후 Portrait Generator(초상화 생성기) 선택하여 사진을 업로드 진행.
- 사진 업로드 되면 Next 클릭
- My avatar is (내 아바타에 대한 정의), Keyword (간단한 키워드) 작성 후 Create Portraits 클릭
- AI 모델 생성하는데 약 20분 정도 소요.
- 생성 완료 후 아바타 이미지를 클릭하면 Runway에서 자동으로 100개의 멋진 이미지를 제공해 줍니다.
- Text to image Tool을 이용하여 좀 더 맞춤한 이미지를 얻을 수 있습니다. (Magic model항에는 전에 입력한 키워드 선택)
여기까지 강력한 AI 비디오 생성 프로그램을 한번 살펴 보았습니다.
자세하게 언급되지 않은 부분에 대해서는 직접 체험하면서 채워나가시길 바랍니다.
감사합니다.