Nov 20, 2023

Runway ML : Text to Video

AIFFEL : 스타트업 실무자와 리더 모두 꼭 필요한 "생성 AI 시대" 비즈니스 생존 전략'
Runway ML : Text to Video

1. 수강 과정명 :

"스타트업 실무자와 리더 모두 꼭 필요한 "생성 AI 시대" 비즈니스 생존 전략' 교육과정의 프로젝트입니다."
 

2. 프로젝트 내용 : 

ChatGPT와 구글 바드를 제외한 생성형 AI 툴 중 하나를 사용해 보고, 서비스 평가 및 개선점에 대한 의견을 자유롭게 300자 내외로 기술 해 주세요.
 

3. 생성형 AI에 입력한 프롬프트 :

Runway-ML 의 Text to Video 무료버전 사용
A man is riding a bike in a rocky desert in Bolivia. 볼리비아의 돌이 많은 사막에서 한 남자가 자전거를 타고 있다.
The sun is rising over the top of Patagonia's mountains. 파타고니아의 산 정상에 해가 뜨는 모습이 보인다.
A man is walking among ancient Mayan pyramid ruins. 한 남자가 고대 마야 피라미드 유적 사이로 걸어가고 있다.
5 people swimming in a Cenote, in Mexico. 5명의 사람이 멕시코의 세노테(석회동굴)에서 수영하고 있다.
Bird eye view video. Hotels and beach, people having festivals in Cancun, Mexico 하늘에서 본 전경. 멕시코 칸쿤의 호텔, 해변, 축제를 즐기는 사람들의 모습.
 

4. 최종 결과물

notion image
 
 

5. 제품에 대한 서비스 평가 및 개선점 기술 (300자 이내 자율 형식)

① 성능 및 품질 :
  • 전체적인 품질:
    • Image to Video 보다는 Text to Video 기능의 품질이 전체적으로 더 좋았다.
    • 출력 결과가 굉장히 사실적이었고, 인풋값이 구체적일수록 잘 반영되었다.
    • 영상 중간에 화면이 모두 검은색으로 나오는 프레임이 섞여 있었다.
    • 일부 결과물에서 오른쪽 하단에 저작권 표시나 브랜드 마크 같은 모습이 보이기도 했다. (학습 데이터에서 브랜드 홍보 이미지 등이 같이 학습되어서 생긴 문제 같다.)
  • 형상 :
    • 사람, 물건 등의 형상을 잘 표현했지만 자연스럽지 못하거나 형상이 흐려지는 경우가 있었다.
  • 동작 :
    • 큰 동작(ex. 수영한다, 자전거를 탄다)에 대한 인풋은 부자연스럽게 표현되었다.
    • 세부적인 동작(ex. 바람에 머리가 흩날린다, 팔로 얼굴을 가린다)에 대한 인풋은 반영되지 않았다.
 
② 사용자 경험 :
  • 단순히 프롬프트 입력 후 원하는 영상이 만들어진다는 점이 굉장히 편리했다.
  • Image to Video의 경우 선택할 수 있는 예시 이미지가 있으면 더 체험하기 좋을 것이라는 생각이 들었다.
  • 프롬프트 텍스트 길이 제한(320), 영상 길이 제한(4sec)으로 무료버전에서는 제한적인 체험이 아쉬웠다.
  • 프롬프트마다 만들어진 영상을 한번에 합치는 기능이 제공되지 않아서 불편했다.
 
③ 속도와 효율성 :
  • 프롬프트 입력 후 4초 분량의 영상을 생성까지 2-3분 정도 소요됐다.
  • 여러 개의 프롬프트를 입력해놓으면 순차적으로 생성된다는 것은 장점이었다.
  • 전체 영상까지는 아니여도 대략적인 미리보기라가 가능하면 사용이 더 편리할 것 같다.
 
④ 맞춤화 및 제어 :
  • 카메라의 줌인/아웃, 수평이동, 수직이동 등의 제어가 가능했고 기대보다 잘 반영되었다.
  • 하지만 한번에 하나씩만 가능했다.
  • 모션의 속도를 조절하는 기능이 있었는데 각 속도값에 따라 어떻게 반영되는지 예시가 없어서 사용이 어려웠다.
 
⑤ 출력 다양성 :
  • 파타고니아 라는 단어가 사용되면 항상 El Chalten 산봉우리가 표현됐다. 아마 파타고니아 브랜드 로고 때문에 대표적인 이미지로 인식하는 것 같았다.
  • 카메라 구도 : Bird Eye View (하늘에서 본 조감도)와 같은 명령이 잘 적용되었다.
 
Share article
RSSPowered by inblog