[플레이데이터 SK네트웍스 Family AI 캠프 10기] 2개월차 회고

2개월 차 학습

 

 

데이터 분석

 

Data Visualization

• Matplotlib
• Auto ViML
  • sweetviz
• Seaborn

 

 

Machine Learning

 

Data Preprocessing

• EDA
  • 상관계수
  • 왜도
  • 첨도
  • 이상치
  • 교차분석
• Data Cleaning
  • 완결성
    • 결측치 처리
  • 유일성
    • 중복 데이터 제거
  • 통일성

 

Feature Extraction

 

Data Encoding

• Normal Encoding
  • One Hot Encoding
  • Mean Encoding
• Ordinal Encoding
  • Label Encoding
  • Target Encoding
  • Ordinal Encoding

 

Data Scaling

• Standard Scaler
• Min Max Scaler
• Max Abs Scaler
• Robust Scaler

 

Data Transforming

• Power Transformer
• Quantile Transformer

 

Imbalanced Data

• Resampling
  • Under Sampling
    • Random Under Sampler
    • One Sided Selection
    • Neighbourhood Cleaning Rule
  • Over Sampling
    • Random Over Sampler
    • ADASYN
    • SMOTE

 

HPO

• Manual Search
• Grid Search
• Random Search
• Bayesian Search

 

Machine Learning

• Supervised Learning
  • Regression
  • Classification
  • Ensemble
    • Bagging
      • Random Forest
    • Boosting
      • Gradient Boost
      • XGBoost
      • Light GBM
      • CatBoost
    • Voting
      • Hard Voting
      • Soft Voting
    • Stacking
• Unsupervised Learning
  • Dimensionality Reduction
  • Clustering

 

 

Deep Learning

 

Optimizer

• SGD
• Momentum
• RMSProp
• Adam

 

PyTorch

• Tensor
• DataLoader
• Dataset Class

 

Vision

• Image Preprocessing
  • Torchvision
  • PIL
• CNN
  • Convolutional Layer
  • Pooling Layer
  • Fully Connected Layer

 

Fine Tuning

• Dataset이 크고 유사성이 작은 경우
  • 전체 모델 학습
• Dataset이 크고 유사성이 큰 경우
  • Pre-trained model의 일부분과 Classifier만 학습
• Dataset이 작고 유사성이 작은 경우
  • Pre-trained model의 일부분과 Classifier만 학습
• Dataset이 작고 유사성이 큰 경우
  • Classifier만 학습

 

추천 시스템

• 비개인화 추천 알고리즘
  • 조회수 기반 추천
  • 평점 기반 추천
  • Knowledge-Based Filtering
• 개인화 추천 알고리즘
  • Content-Based Filtering
  • Collaborative Filtering
    • Memory-Based Algorithm
      • User-Based Filtering
      • Item-Based Filtering
    • Model-Based Algorithm
• Hybrid Recommender System

 

---

 

2개월 차 회고

 

 

Keep

 

하나씩 나아가기

 먼저, 이번에 ADsP 자격증 시험을 응시했다. 결과는 3월 후반에 나오지만 일단은 하나를 완료했다. 그리고 곧 SQLD 시험을 치를 예정이고, 그 이후에는 빅데이터분석기사 시험을 신청할 예정이다. 또한, 데이콘에 조금이라도 참여할 계획이고, 코딩 테스트도 준비할 예정이다. 벌써 상반기 공고들이 쏟아져 나오고 있어서 바쁘게 살아야 할 것 같다.

 

 

Problem

 

미래에 대한 불확실함

 벌써 2개월이 지났지만 내가 제대로 가고 있는 것인지 확신할 수 없다. 배운 것은 많지만 내가 완전히 소화하지 못해서 여전히 과거에 머물러있는 기분이다. 이를 해결하기 위해서는 나에게 부족한 부분을 제대로 파악하고 보충할 수 있어야 할 것 같다.

 

 

Try

 

긍정적으로 생각하기

 최근 들어 부정적인 생각이 많아진 것 같다. 너무 빠른 일정에 지치기도 한 것 같아서 조금이라도 휴식을 가지며 마음을 안정시켜야 할 것 같다. 그리고 긍정적으로 생각하도록 노력해야겠다. 시간은 제 스스로 흐르니까 이를 그냥 흘려보내지 말고 내가 주도적으로 시간을 활용해야 한다.