[AI class final project] AI Hub 패션 데이터 살펴보기

2021.07.15 - [KDT AI dev course] - [AI class final project] 주제 선정, 선행 논문 읽는 중 - fashion AI

2021.07.22 - [KDT AI dev course] - [AI class final project] 선행논문 브라우징 & 일부 모델 데모 실행

 

인공지능 dev 코스 파이널 프로젝트를 준비중이다.

기술적으로 computer vision과 관련된 주제를 할 것을 먼저 정했고, 

그 다음에 가장 e-commerce business에서 규모가 큰 분야이며, 또한 vision이 중요한 영향을 차지하는 fashion domain을 다루기로 결정했다.

 

http://www.esocialtimes.com/news/articleView.html?idxno=10576 

"온라인 쇼핑이 대세" 가장 많이 팔린 품목은 뭘까 - 소셜타임스

http://biz.khan.co.kr/khan_art_view.html?artid=201905092056015&code=920100 

대형가전도 온라인 구매 확산…가전유통업계 ‘한숨’

 

우리 팀원들은 computer vision 중에서도 이미지 생성에 관심을 가진 분들이 많았고, fashion과 이미지 생성의 점점을 찾다가, Virtual Try On, 우리말로 가상착용 기술을 구체적인 주제로 잡아 프로젝트를 진행하기로 하였다.

 

시간적인 제약 팀원들의 능력, 경험적인 면을 고려해서 바닥부터 모델을 만들고 학습을 시키는 것은 어렵다고 보고, 관련 논문들을 살펴보면서 선행 연구자들이 공개한 모델의 코드와 pretrained weights를 그대로 활용해 테스트해 보았다.

 

그런데, 기존 연구들에 큰 제한점이 있었다.

죄다 '이너 상의'만 입히는 모델이라는 점이다.

 

물론 여러 위치에 다양한 품목을 입히는 것이 더 학습하기 어려워서일수도 있지만, 큰 이유 중의 하나는 이 도메인에서 가장 널리 쓰이는 데이터셋이 상의 이미지만 제공하고 있는 탓도 큰 것 같았다.

(출처: p.10 패션 상품 및 착용 이미지 데이터 구축 가이드라인 )

 

기존의 모델을 그대로 도입하더라도 하의를 포함한 추가 학습이 꼭 필요하다고 판단하고, 추가 학습이 필요한 데이터를 찾다가, AI Hub에 공개된 패션 상품 및 착용 이미지 데이터 를 찾게 되었다.

https://www.youtube.com/watch?v=jhnkRQBoJR4(데이터 및 데이터 수집에 대한 설명 영상)