IT News

stable diffusion 확장기능, modelscope 기능확장

posttstory 2023. 5. 2.
728x90

huggingface에서 modelscope 기능이 출시되어 매우 흥미로웟습니다.

이 기능을 스테이블 디퓨전의 확장 기능으로 설치하여 로컬에서 사용해 볼 수 있다는 것도 매우 신기하게

느껴졌씁니다

 

아직 초기 단계이기는 하지만 발전 가능성이 엄청 나다든 느낌을 받았습니다.

설치방법은 아래와 같습니다.

 

먼저 스테이블 디퓨전 확장 탭에서 지원되는 확장 기능 목록 중 url로 부터 불러오기를 클릭 합니다.

그런다음 확장 기능 중에서 modelscope text2video 를 찾아 설치 합니다.

search에 modelscope 를 간단하게 입력하면 쉽게 찾을 수 있습니다.

이후 설치를 해줍니다.

 

설치 후 ui를 재실행 해줍니다.

 

 

 

재실행 후 탭에 보면 text2video가 생긴것을 확인 가능합니다.

 

 

이제 여기서 사용할 모델 파일을 다운 받아야 합니다.

아래 사이트에서 모델을 다운 받겠씁니다.

 

https://huggingface.co/damo-vilab/modelscope-damo-text-to-video-synthesis/tree/main

 

damo-vilab/modelscope-damo-text-to-video-synthesis at main

Detected Pickle imports (3) "torch._utils._rebuild_tensor_v2", "torch.FloatStorage", "collections.OrderedDict" What is a pickle import?

huggingface.co

 

 

위 4개 파일을 전부 다운 받습니다.

이후 D:\stable-diffusion-webui\models\ModelScope\t2v 에 다운받은 모델을 이동 해줍니다.

이후 재시작 합니다.

 

 

생성 및 update video 를 클릭하면 생성 된다.

 

 

 

흠, 실행 해보니 아직은 썩 만족 스럽지는 않는거 같다.

조금더 두고 봐야겠다..

 

 

728x90

댓글

💲 추천 글