[4주차] <주제 변경> 체형별 옷입히기 사전 조사

 

<여기에 웬만한 face, body, clothes에 대한 git 및 논문 링크 다 있음>

https://github.com/lijiaman/awesome-3d-human

<아래 깃허브가 옷에 관한거 모아놓은 링크> - 대신 코드가 없는게 많음 ㅠㅠ

https://github.com/lzhbrian/Clothes-3D

---

 

<방향성>

1. 기존대로 체형에 따라 옷입히기를 할 것인지 (SMPL + 3D clothes화 + 합성 + 디테일 )

2. 옷 입은 사람의 형태를 따서 옷 디자인을 바꾸는 것으로 갈지 (이 친구는 조금 다른 방안)⇒ + upgrade 버전: 우리가 직접 옷을 그린 다음, 옷의 디자인까지 따서 새로 입히는 것(희망 사항)

 

<퍼포먼스>

1번으로 선택할 경우)

• input으로 사진 받고, 모델 돌려서 원하는 옷 입히는걸로 보여주는거?

2번으로 선택할 경우)

• 옷 그리게 해서 디자인을 입혀서 보여주는 정도?가 될 듯 (아이디어 제시일 뿐 - 찾진 않음)

 

1. 체형별 옷입히기

• 하나의 task만으로 좀 활용할 수 있는 것들 위주로 찾았음

TailorNet: Predicting Clothing in 3D as a Function of Human Pose, Shape and Garment Style (2020)

📚 https://arxiv.org/pdf/2003.04583v2.pdf

💻 https://github.com/chaitanya100100/TailorNet

✍️ https://github.com/zycliao/TailorNet_dataset

📺 https://www.youtube.com/watch?v=F0O21a_fsBQ

: 20개의 실제 정적 의복과 1782개의 자세에 따라 시뮬레이션된 9개의 체형에 대한 데이터셋을 제공

 

 

Learning to Transfer Texture from Clothing Images to 3D Humans

📚 https://arxiv.org/pdf/2003.02050v2.pdf

💻 https://github.com/aymenmir1/pix2surf

 

: input은 SMPL + 옷 이미지가 확실한데 논문 이해를 잘 못했어요(어렵)

: 데모 버전 써보려면 blender 설치 후 사용가능 (근데 안써봄)

 

 

TightCap: 3D Human Shape Capture with Clothing Tightness Field

📚 https://arxiv.org/pdf/1904.02601v4.pdf

💻 https://github.com/ChenFengYe/TightCap

: 체형에 따라 옷 입히기 가능 (같은 옷, 다른 체형 비교)

: 그래서 약간 다이어트나, 체형관리 쪽으로 같은 옷인데, 10키로가 더 쪘을 때의 핏과 10키로가 빠졌을 때의 핏 비교 하기? 이런 방향으로도 생각해볼만한.. task?

: 다양한 인간 자세와 228 종류의 다양한 의복을 입은 총 880개의 인간 모델과 인간 형태의 정답 데이터가 포함되어 있음

: 하지만 이 친구는 input이 3d mesh 형태로 들어가야 된다고 함

: output이 tightness field랑 body shape, 옷 이렇게 세 개로 나온다고 함

※ tightness field: 말그대로 어느 부분이 몸에 더 타이트한지를 나타낸 것

: 옷만 따로 출력이 돼서 활용하기에 좋을 수도?

체형에 따라 옷 입혀볼 수 있음 !!

: 좀 좋은데요? (옷 디자인은 모르겠고)

 

SIZER: A Dataset and Model for Parsing 3D Clothing and Learning Size Sensitive 3D Clothing

📚 https://arxiv.org/pdf/2007.11610v1.pdf

💻 https://github.com/garvita-tiwari/sizer

: 이 친구는 옷의 사이즈에 따라 옷 표현을 다르게 해줌. 생각보다 texture 표현이 좋 (사이즈 별 옷 입히기 참고할 때 좋을 듯)