2021 DLC

Member

name
김현민	Hyunmin-K
이광열	choco1692
제갈건	geon-j

Objection

딥러닝을 활용한 가상 피팅 시스템

1학기 프로젝트

물체 인식 기술을 이해하고 특정 데이터셋을 활용해 물체 인식

2학기 프로젝트

사람 체형을 인식하여 의상의 사이즈를 조절 후 실제로 입은 것처럼 표현

Concept

CNN을 기반으로 한 Object detection을 활용하여, 의상을 인식하고 이를 추출하는 것

Model

Yolo V1-3

Yolo V4

1-stage detector

Backbone

CSPDarknet-53

CSPNet 기반

Data preprocessing

LetterBoxing

resize
320 × 320 : 작고 정확도는 떨어지지 만 속도 빠름
609 × 609 : 정확도는 더 높지만 속도 느림
416 × 416 : 중간

Parameter

Dataset

Deepfashion2
https://github.com/switchablenorms/DeepFashion2

Custom Dataset

Main model flow

Mediapipe pose

피사체의 landmark를 표시하여 landmark간의 각도를 활용, 아바타 생성

Grabcut algorithm

최소한의 사용자 상호작용을 통한 전경 추출

Clothes recommendation

metadata를 제작하여 통계를 기반으로 옷 추천

참조 Link

https://curiousily.com/posts/object-detection-on-custom-dataset-with-yolo-v5-using-pytorch-and-python/
https://youtu.be/mQXOnOdhSOk
https://www.youtube.com/watch?v=hL-gJXgscOc
https://syncedreview.com/2020/04/07/deep-fashion3d-dataset-benchmark-for-virtual-clothing-try-on-and-more/
https://blog.naver.com/samsjang/220606250662 https://google.github.io/mediapipe/solutions/pose.html https://docs.opencv.org/3.4/d8/d83/tutorial_py_grabcut.html https://hoya012.github.io/blog/yolov4/