전체 게시판
모든 게시판의 글을 시간순으로 모았습니다.
총 688건 · 4/69쪽
레퍼런스
[레퍼런스] RNN에서 기울기 소실과 폭주 (On the difficulty of training Recurrent Neural Networks)기울기 소실과 폭주가 RNN 구조에서 야코비안 행렬 곱 때문에 필연적으로 발생
2026.01.2901.29
레퍼런스
[레퍼런스] TRM(Tiny Recursion Model) (Less is More: Recursive Reasoning with Tiny Networks)TRM 소형 재귀 모델로 LLM 대비 높은 ARC-AGI 퍼즐 추론 성능 검증
2026.01.2301.23
레퍼런스
[레퍼런스] 대규모 학습에서 최적화 알고리즘 (The Tradeoffs of Large Scale Learning)대규모 문제에서는 형편없는 최적화 알고리즘(SGD)이 매우 잘 작동한다.
2026.01.2301.23
레퍼런스
[레퍼런스] 트랜스포머 (Attention is All you need)Self-Attention을 반복적으로 적용해 단어의 관계를 병렬적으로 계산하는 트랜스포머 구조
2026.01.1701.17
레퍼런스
[레퍼런스] LLM의 컨텍스트 길이 제한을 극복하기 위한 재귀 호출 아키텍처 (Recursive Language Models(RLM))긴 입력을 외부 환경으로 취급하고 스스로 분할·탐색·재귀 호출을 통해 처리하게 함으로써 Context Window 제한 해결
2026.01.1601.16