ABOUT CATEGORIES ARCHIVE

Posts tagged with "vanishing gradient"

There are a total of 2 posts.

기울기 소실(Vanishing Gradient) – 딥러닝이 '단기 기억상실증'에 걸린 이유

2025-12-19

기울기 소실(Vanishing Gradient) – 딥러닝이 '단기 기억상실증'에 걸린 이유

딥러닝에서 기울기 소실(Vanishing Gradient) 현상이 왜 발생하는지, 시그모이드 함수와 연쇄 법칙이 문제를 일으키는 메커니즘을 설명합니다. ReLU와 ResNet이 어떻게 이 문제를 해결했는지, 실전 적용 팁까지 자세히 다룹니다.

#딥러닝 #역전파 #vanishing gradient #relu +2
역전파(Backpropagation): AI가 에러의 '범인'을 색출하는 법

2025-12-19

역전파(Backpropagation): AI가 에러의 '범인'을 색출하는 법

역전파(Backpropagation)를 통해 AI가 에러의 원인을 어떻게 찾아내는지, 연쇄 법칙(Chain Rule)과 파이토치 Autograd가 어떻게 자동으로 기울기를 계산하는지, 그리고 깊은 네트워크에서 발생하는 기울기 소실(Vanishing Gradient) 문제와 그 해결책을 쉽고 직관적으로 설명합니다.

#deep learning #ai #backpropagation #chain rule +2