스테이블 디퓨전(stable diffusion)으로 만든 2D이미지를 3D로 바꿔보자!

 

오늘은 스테이블 디퓨전을 활용해서 풍경 배경을 만들고요, 다른 사이트와 연계해서 위의 이미지를 만드는 방법을 스크랩해 보겠습니다.

 

인물 이미지를 이용해서도 위의 효과를 구현 할 수 있는데, 여러 이미지를 적용해 보니 풍경이 가장 자연스러운 느낌이더라고요. 인물을 이용할 경우 인물의 테두리가 선명하면 아무래도 외곡이 덜하다는 느낌이 있었습니다.

 

2D를 3D로 변환하는 방법중에 Colab을 이용하여 PIFuHD라는 프로그램도 사용해 봤었는데요, 저도 정식으로 프로그램을 배운 게 아니라서 그런지 계속 오류가 나더라고요. 게다가 몇몇 안내 영상을 통해서 github에도 접속해 봤었는데, 막혀있는 부분이 있어서 포기했습니다...ㅠㅠ

 

저는 다른 사이트를 이용한 방법을 알게 되었는데요, 정말 3D로 생성하기보다는 약간의 3D느낌이 더해지는 위의 결과물을 얻게 되었습니다. 완전한 3D 오브젝트를 구현하지 못하는 것에 아쉬움은 있지만, 입체감 있는 화면을 구현하면서 배경으로 활용하기에 좋은 기술인 것 같아서 기록을 남겨볼까 합니다.

 

그럼, 제가 위의 이미지를 만든 방법을 정리해 보겠습니다. (아주 쉬워요.)

 

 

1. 스테이블 디퓨전으로 이미지 만들기

먼저, 스테이블 디퓨전을 실행하겠습니다. 위의 이미지를 만들기 위해서 제가 적용한 프롬프트는 다음과 같습니다.

black_border, building, city, day, fantasy, ice, landscape, letterboxed, mountain,
ocean, outdoors, planet, scenery, ship, snow, snowing, water, watercraft, waterfall,
winter  <lora:Pyramid lora_Ghibli_n3:1>

그리고 다음과 같이 네거티브 프롬프트를 설정했습니다.

easynegative, ng_deepnegative_v1_75t,{{{{bad_construction}}}},{bad_structure},bad_wail,
{{{bad_windows}}},{blurry},cloned_window,cropped,{{{deformed}}},{{{disfigured}}},error,
{{{extra_windows}}},{extra_chimney},{{{extra_door}}},extra_structure,{{extra_frame}},
{fewer_digits},{fused_structure},gross_proportions,jpeg_artifacts,{{{{long_roof}}}},
low_quality,{structure_limbs},{{missing_windows}},{missing_doors},{{missing_roofs}},
mutated_structure,{{{mutation}}},normal_quality,out_of_frame,owres,{{poorly_drawn_structure}},
{{poorly_drawn_house}},signature,text,{{too_many_windows}},{{{ugly}}},username,uta,watermark,
worst_quality

그리고 기타 설정은 다음과 같이 나왔습니다.

이미지를 생성하니 하단의 이미지가 만들어졌습니다.

 

 

2. 3D로 만들기

아주 쉽다고 이야기했었는데요, 바로 다음의 사이트를 이용했습니다.

https://convert.leiapix.com/

LeiaPix Converter | Depth Animations

유료사이트가 아니니 걱정하지 않으셔도 됩니다.

대충 알아봤는데, lumePad2라고 3D 영상을 구현하는 태블릿을 판매하는 회사더라고요. 
위의 사이트에 접속해서 로그인을 하면 오른쪽 상단에 Get LumePad2라고 나오는데요, 여기를 클릭하면 lumePad2 가격을 비롯해서 기기 안내 사이트로 연결되더라고요.
아무래도, 아직 3D 이미지에 대한 업계 생태계가 크지 않다 보니 이미지 컨버팅 사이트를 서비스로 제공하면서 업계에서 자신들의 영역을 키우는 게 아닐까 조심스럽게 생각되었습니다.

사이트에 접속하면 아래와 같이 첫 화면이 보입니다.

여기서 오른쪽 상단에 Sign in을 클릭하여 회원가입 및 로그인을 합시다.

위의 화면처럼 화면 왼쪽에 Upload가 있는데요, 이곳을 클릭하세요.

그리고 내 컴퓨터에서 3D로 변환할 이미지를 선택해 봅시다.

여기서 끝이라고 할 수도 있습니다.

화면 왼쪽에 보면 설정 조절이 있습니다.

참고로 애니메이션 길이는 6초까지 설정이 가능하네요.

그리고 움직이는 방향 설정도 가능하고요, 움직이는 방향과 움직이는 정도, 포커스 포인트등 다양한 설정이 가능합니다.

만약, 이미지를 바꾸고 싶으면, 다시 Upload를 클릭하여 다른 이미지를 선택하면 됩니다.

 

결과물을 공유하거나 다운로드하고 싶으면, 왼쪽 하단의 Share를 클릭합니다.

그러면 위와 같이 링크를 포함해서 파일로 다운까지 가능하네요.

 

이상으로 오늘의 포스팅을 마치겠습니다.

끝으로, 스테이블 디퓨전으로 만든 인물 이미지를 3D로 변환한 gif파일을 첨부하겠습니다.