연결 중…
연결 중…
전체 보기
Good Vibe AI
Telegram · @goodvibeai

karpathy/micrograd ★17.0k

게시
2026.08.04 08:30
조회
88
포워드
2

역전파(backpropagation)의 계산 과정을 스칼라 값 단위로 직접 보여주는 초소형 자동미분 엔진

• 복잡한 딥러닝 프레임워크 내부에 가려진 역전파 원리를 100줄 안팎 코드로 압축해 학습자가 직접 들여다볼 수 있게 함

• 연산 하나하나를 동적으로 DAG(계산 그래프)로 구성하고, backward() 호출 시 체인룰을 따라 각 변수의 기울기를 역으로 계산

• 텐서 단위가 아니라 개별 스칼라 값 단위로 덧셈·곱셈까지 쪼개 처리해, 신경망 내부의 미분 흐름을 한 단계씩 추적 가능

• PyTorch와 유사한 API의 소형 신경망 라이브러리를 함께 제공해 이진 분류 같은 간단한 모델을 직접 학습시켜보는 교육용 실습에 활용

https://github.com/karpathy/micrograd

AI의 최신 흐름과 다양한 큐레이션 된 정보를 제공합니다.
__Good Vibe AI

조회88포워드2텔레그램에서 보기