본문 바로가기
AI site

[tensor.art] CogVideo-5B 무료영상생성을 마음껏 해보자~

by slow AI 2024. 11. 29.

이번주는 많은 눈이 내려 출퇴근이나 차량이동에 참 어려움이 많은 한주였네요

뉴스에서 수도권에 눈으로 인한 사건사고가  많았다고 하는데 모쪼록 피해없으셨길 빕니다.    

 

일전에 소개해드렸던 Tensor.Art 텐서아트 사이트 내에 재미있는 기능이 많이 생겨서 소개해드릴까 합니다. 위의 화면 이미지 왼쪽 붉은 사각형에 'AI 도구' 라는 메뉴인데 Tensor.Art 텐서아트가 특정 커스텀노드, 모델, 노라를 쉽게 사용할 수 있도록 사이트내에 별도로 메뉴화한 것인데요. 이 중 중간의 스펀지밥 이미지를 클릭하시면 간단하게 Image to Video 를 통해 영상을 생성할 수 있습니다.  최근 영상생성부분에서 관심을 받고 있는 몇가지 오픈소스들 중 꽤 예전부터 업그레이드를 해온 CogVideo-5B 모델로 생성해볼 수 있는 기능입니다.

 

스펀지밥이미지를 선택해서 메뉴에 진입하면 오른편에 이미지와 프롬프트를 작성할 수 있는 공간이 있습니다. 간단히 원하시는 이미지와 프롬프트를 넣고 아래의 'GO' 버튼을 누르면 영상생성이 시작됩니다. 30-120초 정도가 걸린다는 설명이 나오는데 CogVideo-5B 를 한두달전에 공개했을때 개인로컬PC 상에서 15분넘게 걸렸던 걸 생각하면 비교하기 어려울 정도의 빠른 속돕니다. 편하고 빠르고 좋아요 =ㅅ= 다만 최근의 영상생성형 AI 전문사이트인 MINIMAX, Kling, Runway 등 과는 결과물을 비교하긴 어려운 수준입니다. 2초 길이의 영상을 생성하고 해상도 역시 720 x 480 라 다소 낮습니다. 영상의 속도도 약간 빠른 느낌으로 재생되기도 해서 실제 사용엔 수정이 필요한 요소들이 있습니다. 아래는 직접 생성해본 영상들입니다.

(인물중심의 영상들 - 얼굴이 중심이 될수록 안정감이 높아진다)

 

인물의 얼굴이 중심이 되어 영상을  생성할 경우 결과물이 나쁘지 않습니다. 크진 않지만 인물의 움직임이 생겼음에도 생각보다 인물을 유지하는 성능이 좋습니다.  하지만 이보다 인물이 작아지거나 배경이 많은 경우엔 프롬프트의 영향을 많이 받는 것 같습니다. 정확하게 입력하거나 간결해야 할 듯 한데 아직은 잘 모르는 부분이 많은 것 같습니다.

(여러차례 생성해본 이미지 - 복잡한 문장형 프롬프트는 잘 인식하질 못한다)

 

다른 생성형 AI 들도 마찮가지겠지만 많은 결과물들 중에 적합한 것을 찾는 과정이 필요합니다. 아직은 아쉬운 부분이 많은 CogVideo-5B 의 영상생성기능이지만 다듬는 과정이 곁들여지면 좀 더 쓸만한 영상소스를 만들어 낼 수 있지 않을까 싶습니다. 아래는 위의 생성영상 중 업스케일링과 프레임보정을 해본 결과물입니다.

(업스케일링 + 프레임보정 + 그레인효과 )

 

훨씬 나아진 결과물이라 필요에 따라 써볼만 할 수도 있겠다 싶습니다. 미니막스, 클링 같은 녀석들이 워낙 강력해서 그렇지 불과 몇개월 전엔 이정도도 놀라운 수준이었다는 감안하면 그저 발전속도에 감사인사를 올려야 할 것 같아요 ^^;;; 접근이 쉽기 때문에 관심있으신 분들은 해보시면 좋을 것 같습니다.

 

생성엔 텐서아트 사이트내의 '크레딧' 이 필요한데 영상생성엔 6.3 크레딧이 소요됩니다. 이 크레딧은 매일 로그인보상으로 50크레딧을 지급하고 '좋아요' 를 누르거나 관심목록에 넣는 것만으로도 일정한 크레딧을 지급하니 체험을 해보시는 정도는 따로 결제하지 않으셔도 될 겁니다. 사실 거의 무료에 가까운 셈입니다. 이 외에도 3D변환, FLUX FILL INPAINT 등 다양한 모델, 로라 등을 손쉽게 사용할 수 있도록 준비된 것들이 많으니 재미삼아 둘러보셔도 좋을 것 같네요. 

 

https://tensor.art/

 

 

 

반응형