Published on2026년 3월 17일머신러닝을 위한 수학적 최적화: Adam부터 볼록 최적화, ZeRO optimizer까지최적화AdamW학습률스케줄링손실함수볼록최적화ZeRO2026-032026-03-17SGD, Adam, AdamW, Lion optimizer, cosine annealing 스케줄링, Focal Loss, InfoNCE부터 ZeRO optimizer까지 ML 학습 최적화 수학 완전 가이드입니다.