[그림] 런웨이(RUNWAY) – GEN 2 립싱크 테스트

[그냥구름]

오늘은 Runway Gen2 의 Lipsync  기능을 사용해 보았습니다.

Haiper ai 의 경우  text to video의 생성할때 50% 정도의 오류들이 일어나는 일들이 있었습니다 (복잡하거나 감정이 들어간 텍스트를 사용했을경우)

오늘 테스트해본 런웨이는 오류가 확연히 줄어서 상당히 안정적이라는 생각이 들 정도 였습니다.

유료로 사용을 고민하고 여러곳을 테스트 생각중이였는데. 런웨이가 적당하단 생각이 들고 있습니다.

런웨이의 립싱크 부분은 Haiper ai의 아쉬운 부분을 만족시켜주기도 했습니다.

Text to video 로 이렇게 영상을 생성하고

                                                                                                                                                                                                                        (( 음성부분을 체크해주세요))

립싱크 기능으로   "Why are you sorry? I just said hi" 이터널 션샤인의 대사중 한부분 을 텍스트로 입력해서 동영상의 주인공이 말을 하는 장면을

만들어봤습니다.

지금까지의 테스트 상으론 런웨이가 제일 안정적이고 편하단 생각이 드네요.

제가 아직 모르는 프로그램들이 있으니 많은 조언해주시면 감사드려요^^

[ink7]

현재로썬 동영상 ai는 런웨이가 가장 좋다는 평을 받고 있는데 저 연내 출시 될 Sora ai 기다리고 있네요

[그냥구름]

저도 Sora ai기대하고 있어요. 그런데 어제 새벽 https://humanaigc.github.io/emote-portrait-alive/
알리바바 인공지는 연구소 라는데를 알게 되었어요. 말하고 노래할때 얼굴에 감정까지 표현되는 립싱크 기술을 선봉였습니다
한번 보시면 오호~~ 하실거예요

[ink7]

그리고 그냥구름님처럼 영화스타일을 추구하는 분은 국내외에서 AI 영화제, AI영화 공모전이 열리고 있으니 한번 도전 해보시는 게 좋을 거 같네요
부천 판타지 영화제에서 이번에 AI 영화제 부문이 시작되는데 아쉽게 공모는 저번 달에 마감되었네요
https://www.kobiz.or.kr/new/kor/03_worldfilm/news/news.jsp?mode=VIEW&blbdComCd=601001&seq=4223
국내외에서 AI영화제가 계속 늘어나는 추세니 좋은 정보가 있으면 이 게시판을 통해 공유하겠습니다