패션 이미지 데이터를 활용한 딥러닝 기반의 의류속성 분류
Deep learning-based clothing attribute classification using fashion image data
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
패션 이미지에 포함된 소재, 색상, 핏 등의 속성은 소비자가 의류를 구매하는 데 있어서 중요한 요인이다. 그러나 의류 속성을 분류하는 과정은 많은 인력을 필요로 하고, 작업자의 주관적인 판단에 의존하기 때문에 일관성이 떨어진다. 이러한 문제를 완화하기 위해 인공지능을 활용하여 패션 이미지의 의류 속성을 분류하는 연구가 필요하다. 기존 연구에서는 주로 상의 또는 하의 중 하나의 항목에 대한 의류 속성을 분류하는 것에 초점을 두고 있기 때문에 전신 패션 이미지의 경우에는 상의와 하의의 속성을 동시에 파악할 수 없다는 한계가 있었다. 본 연구는 패션 이미지의 상의와 하의를 구분하여 각 항목의 카테고리와 의류 소재의 속성을 분류할 수 있는 딥러닝 모델을 제안한다. 본 연구에서 딥러닝 모델 ResNet과 EfficientNet를 이용하였고, 학습에 활용한 데이터셋은 패션 이미지 1,002,718장과 의류 카테고리와 소재 속성을 포함한 라벨 총 125개를 사용하였다. Weighted F1-Score를 기준으로 ResNet은 0.800, EfficientNet는 0.781로 ResNet이 더 우수한 성능을 보였다.
Abstract
Attributes such as material, color, and fit in fashion images are important factors for consumers to purchase clothing. However, the process of classifying clothing attributes requires a large amount of manpower and is inconsistent because it relies on the subjective judgment of human operators. To alleviate this problem, there is a need for research that utilizes artificial intelligence to classify clothing attributes in fashion images. Previous studies have mainly focused on classifying clothing attributes for either tops or bottoms, so there is a limitation that the attributes of both tops and bottoms cannot be identified simultaneously in the case of full-body fashion images. In this study, we propose a deep learning model that can distinguish between tops and bottoms in fashion images and classify the category of each item and the attributes of the clothing material. The deep learning models ResNet and EfficientNet were used in this study, and the dataset used for training was 1,002,718 fashion images and 125 labels including clothing categories and material properties. Based on the weighted F1-Score, ResNet is 0.800 and EfficientNet is 0.781, with ResNet showing better performance.
참고문헌 (27)
- Z. He, "Multi-Deep Features Fusion Algorithm for Clothing Image Recognition", 2020 8th International Conference on Digital Home, pp.104~109 (2020)
- 이수민, "딥러닝을 이용한 시각적 의류 분석 기술 : 서베이", 한국통신학회논문지, 45(7), pp.1174~1182 (2020)
- A. Nestler, "Sizeflags : reducing size and fit related returns in fashion e-commerce", Proceedings of the 27th ACM SIGKDD Conference on Knowledge Discovery and Data, pp.3432~3440 (2021)
- 박혜령, "코로나 19 상황에서 온라인 쇼핑몰의 품질요인이 패션제품 구매자의 행동의도에 미치는 영향", 한국산학기술학회논문지, 24(8), pp.615~623 (2023)
- Y. Chun, "A novel clothing attribute representation network-based self-attention mechanism", IEEE Access, 8, pp.201762~201769 (2020)
- 김인화, "패션소재이미지에 따른 직물감성의 인지-직물의 시각적 촉감을 중심으로", 한국의상디자인학회지, 22(1), pp.97~111 (2020)
- 이소영, "딥러닝을 이용한 의류 이미지의 텍스타일 소재 분류", 스마트미디어저널, 12(7), pp.43~51 (2023)
- P. S. Rajput, "IndoFashion Apparel Classification for Indian Ethnic Clothes", Proceedings of the IEEE, 2021, 3935~3939
- S. Pecenakova, "Fitgan : fit-and shape-realistic generative adversarial networks for fashion", 2022 26th International Conference on Pattern Recognition, pp.3097~3104 (2022)
- A. Nayak, "Fine-grained Fashion Clothing Image Classification and Recommendation", 2021 2nd International Conference on Electronics, Communications and Information Technology, pp.600~606 (2021)
- 김형숙, "인공지능 기반 개인 맞춤형 의류 추천 서비스 개발", 스마트미디어저널, 10(1), pp.116~123 (2021)
- O. Nocentini, "Image classification using multiple convolutional neural networks on the fashion-MNIST dataset", Sensors, 22(23), pp.9544~ (2022)
- S. Rohrmanstorfer, "Image classification for the automatic feature extraction in human worn fashion data", Mathematics, 9(6), pp.624~ (2021)
- 조승아, "비정형 패션 이미지 검색을 위한 MASK R-CNN 선형처리 기반 CNN 분류 학습모델 구현", 한국산업정보학회논문지, 27(6), pp.13~23 (2022)
- S. Xu, "Fashionformer : A simple, effective and unified baseline for human fashion segmentation and recognition", European Conference on Computer Vision, pp.545~563 (2022)
- Y. Zhang, "Texture and shape biased two-stream networks for clothing classification and attribute recognition", Proceedings of the IEEE, 2020, 13538~13547
- Y. Wan, "Learning Image Representation via Attribute-Aware Attention Networks for Fashion Classification", MultiMedia Modeling : 28th International Conference(MMM), pp.69~81 (2022)
- M. Shajini, "A multi-staged feature-attentive network for fashion clothing classification and attribute prediction", ELCVIA : Electronic Letters on Computer Vision and Image Analysis, 20(2), pp.83~100 (2021)
- C. Kong, "Leveraging off-the-shelf diffusion model for multi-attribute fashion image manipulation", Proceedings of the IEEE, 2023, 848~857
- K. HE, "Deep residual learning for image recognition", Proceedings of the IEEE conference on computer vision and pattern recognition, pp.770~778 (2016)
- M. Tan, "Efficientnet : Rethinking model scaling for convolutional neural networks", International conference on machine learning, pp.6105~6114 (2019)
- 유수빈, "CWRU 데이터셋을 이용한 ResNet 기반의 베어링 결함 진단 모델 구현", 대한전자공학회 학술대회, pp.655~657 (2021)
- 조장훈, "단락흔 및 용융흔 판별을 위한 CNN 과 Resnet 알고리즘 비교 분석", 대한전기학회 학술대회 논문집, pp.1991~1992 (1991)
- 남은수, "딥러닝을 이용한 직물의 결함 검출에 관한 연구", 스마트미디어저널, 11(11), pp.92~98 (2022)
- A. E. Maxwell, "Thematic classification accuracy assessment with inherently uncertain boundaries : An argument for center-weighted accuracy assessment metrics", Remote Sensing, 12(12), pp.1905~ (2020)