MidJourney 동일 인물의 표정은 바꿀수 있는가?

MidJourney에서 동일 인물 표정 바꾸기

MidJourney에서 생성된 최초의 이미지의 표정을 변화시키는 테스트를 진행하였다. 원래는 2명의 남녀 캐릭터의 얼굴 변화를 만들기 위해 시작하였으나, 스테이블 디퓨전과 같이 완전한 동일한 인물에서 표정의 변화가 가능한지 궁금증이 생겨 테스트를 시작하였다.

 

결론부터 말하자면 스테이블 디퓨전과 같이 완벽한 동일한 인물의 사진에서의 표정 변화를 할 수 없었다.

나의 내공이 부족한... ㅠㅠ

 

 

https://nineyad9.tistory.com/entry/Midjourney-cref

Midjourney V 6.0 Character Reference

 

 

1단계 _ 이미지 생성

Portrait, South Korea, 20-year-old woman, beautiful face, intelligent appearance, dark hair, medium short haircut, detail skin --ar 2:3 --s 50 --v 6.0 --style raw

 

시작은

인물사진, 대한민국 20살 여자, 아름다운 얼굴, 지적인 외모, 검은 머리, 중간 단발, 디테일 피부라는 프롬프트를 작성하여 생성하였다.

 

4장의 사진중 첫 번째 사진이 맘에 들어 선택 표정이 웃는 표정이면 좋겠다는 생각을 하여 표정의 변화를 주기 위한 테스트를 시작하였다.

 

 

2단계 _ 이미지 수정 테스트

 

첫 생성된 이미지를 1차 업스케일 하고 오른쪽이 너무 많이 짤려있어 Make Square를 사용하여 오른쪽을 추가 생성하였다.

 

 

웃는 표정 만들기 

미드저니가 스테이블 디퓨전처럼 완벽한 동일한 이미지에서 수정이 안되는것은 알고 있었다. 하지만 새로운 스타일 레퍼런스와 캐릭터 레퍼런스가 나오고 많은 사람들이 테스트를 하고 있어 100%는 아니지만 90%는 동일한 사진에서 표정 변화가 가능할 거라 생각했다.

하지만 역시 미드저니에서는 아직은 힘들다는 개인적인 결론에 도달했다 

아래는 실패를 향한 과정이다.

 

 

Vary(Region)을 사용한 표정변화 시도

 

Vary(Region)을 선택, 동일한 프롬프트에 스마일만 추가하여 실행

오른쪽 사진처럼 웃는 표정은 만들어 지나 다른 얼굴이 만들어지고 이미지에 대한 열화(개인적인 표현임 디테일이 뭉개지는 현상)가 생기기 시작함

 

 

이번엔 Vary(Region)의 프롬프트에 smile만 넣고 실행 

역시 다른 인물이 만들어지고 처음 원본처럼 디테일이 없어지고 있다.

 

 

 

 

 

 

캐릭터 레퍼런스( --cref )을 사용한 표정변화 시도

'Character Reference' 기능을 사용해 시도

동일한 프롬프트에 --cref url(첫 생성 이미지의 링크) --cw 0(표정만을 가져오기 위해 값을 0으로 설정)

 

portrait, 20 year old woman, South Korea, beautiful face, intelligent appearance, black hair, medium short haircut, detail skin, small smile, sunny weather, bright sunlight --ar 2:3 --cref https://s.mj.run/DwA_NHZlKPo --cw 0 --s 50 --v 6.0 --style raw

 

전체적인 분위기는 비슷하나 인물의 동일성은 없어졌다. 

동양인 인물 생성의 특징일지도 모르나 인물에 과한 리터칭이 들어가는 듯한 변화가 생겼다. 

 

 

 

--cref  +  --sref 를 사용한 표정변화 시도

이번엔 캐릭터 레퍼런스와 스타일 레퍼런스를 같이 사용하여 변화를 시도.

 

portrait, 20 year old woman, South Korea, beautiful face, intelligent appearance, black hair, medium short haircut, detail skin, small smile, sunny weather, bright sunlight --ar 2:3 --cref https://s.mj.run/DwA_NHZlKPo --cw 0 --sref https://s.mj.run/HB4M4b8RsXY --sw 800

 

점점 더 다른 사람이 되어가는... ㅜㅜ

링크에 사용된 링크는 동일한 이미지로 하나는 cref에 다른 하나엔 sref를 적용해 봤다

4장의 사진은 비슷한 인물처럼 보이나 역시 원본의 사진과는 다른 사람이다. 

디테일은 살이있지만 여전히 사진에 열화가 많이 보인다.

 

 

 

혹시 범위가 좁아지면 달라질까 싶어 다시 시도했지만 역시 큰 변화는 없었다.

 

 

 

 

마지막으로 원본에서 작은 부분의 변화라면 가능할까 싶어 시도했지만 역시 다른 인물이 나왔다

 

 

결론

동양인의 얼굴이기 때문일까도 싶은데... 여러 방법들을 시도했지만 원본의 인물을 유지하면서 표정의 변화를 만들어 내는건 불가능했다. 

1:1의 인물의 사진에서 주변 배경을 만들고 변화는 괜찮으나 미드저니가 아직까진 동양인에 대한 학습은 덜 되어있는거 같다. 다음엔 서양인을 대상으로 실험을 해보려고 한다.