boostcampaitech6/level2-3-cv-finalproject-cv-11

level2-3-cv-finalproject-cv-11 created by GitHub Classroom

AI Design Assistant

프로젝트 소개

옷 스케치와 그에 대한 설명을 통해 옷 이미지를 생성하고, 생성된 옷 이미지를 모델 이미지에 입히는 서비스를 제공합니다. 이 서비스를 통해 디자이너가 본인이 스케치한 옷 디자인의 결과를 미리 볼 수 있게 돕습니다.

프로젝트 배경과 목적

옷 제작에 많은 시간과 비용이 들기 때문에 생성형 AI를 통해 옷 스케치로부터 바로 결과를 볼 수 있게 함으로써 옷을 제작하고 수정하는 시간과 비용을 절감하도록 돕는다.

데이터

데이터 수집

• VITON-HD Multimodal

데이터 제작

• Canny Edge Detection으로 스케치 이미지 직접 제작
• Image Captioning을 통한 옷 이미지의 설명 직접 제작

Models

Sketch2Image

• ControlNet

Virtual Try On

• DCI-VTON

Result

Input	→	Output
	→
"The cloth is a pink shirt, and it is made of cotton."
	→

Service

level2-3-cv-finalproject-cv-11's Issues

[DOCS] readme 작성

[] readme 내용 추가

[FEAT] controlnet 모델에 기능 추가

[] celery 추가
[] redis 추가

[FEAT] frontend 추가

[] stramlit 추가

[FEAT] main 서버에 celery and redis 기능 추가

[] celery와 redis를 활용하여 main.py 가 다른 서버와 신호를 주고 받을 수 있게함
[] celery 작업 상태 확인

[FEAT] sketch -> real 기능 추가

Background

• controlnet model을 활용하여 스케치이미지를 실제 의상이미지로 변환

To do

• 코드 구현하기