도배 하자 유형 분류 AI 경진대회

Github

Readme

Info

• Classification Task

  • 19 개의 class가 존재
  • Imbalance Data임.
  • 전체 데이터: 3457

• Pytorch Lightening

• related paper

  Few-Shot Classification & Segmentation Using Large Language Models Agent

Baseline

1. ResNet50, EfficientNet* 을 가지고 baseline 설정

   • ResNet50 점수

     

2. ChatGPT는 얼마나 잘 맞출까?

Performance Enhancing

• Data가 imbalance 해서 이를 어떻게 처리할지 고민

  5 Techniques to Handle Imbalanced Data For a Classification Problem

  1. Over-sampling (SMOTE) - feature를 기반으로 sample을 생성하는 것임.

  2. Focal Loss

  3. Label smoothing

     Label Smoothing

• aumentation 을 어떻게 할 수 있을까?

  Comparing Different Automatic Image Augmentation Methods in PyTorch

  • TrivialAugmentation 수행

• segmentation을 하면 더 좋은 성능을 기대할 수 있지 않을까?

• CLIP을 붙이면 더 좋지 않을까?

Finetuning Scheduler

Fine-Tuning Scheduler — PyTorch Lightning 2.1.2 documentation

• fine tuning 스케쥴링을 통해 fine tuning을 더 효과적으로 할 수 있음