2025-12-19

기울기 소실(Vanishing Gradient) – 딥러닝이 '단기 기억상실증'에 걸린 이유

딥러닝에서 기울기 소실(Vanishing Gradient) 현상이 왜 발생하는지, 시그모이드 함수와 연쇄 법칙이 문제를 일으키는 메커니즘을 설명합니다. ReLU와 ResNet이 어떻게 이 문제를 해결했는지, 실전 적용 팁까지 자세히 다룹니다.