tag: Transformer · 3건
- 근거: AI/LLM 관심 분야 — minGPT 스타일의 초소형 트랜스포머 학습 실험 저장소로, 직접 코드 확인 가능
- 액션: git clone https://github.com/lostmsu/TurboGPT 후 코드 구조 및 22KiB 트랜스포머 구현 방식 확인 (CUDA/Windows 환경 없으면 코드 리딩만)
- 근거: AI/LLM 트랜스포머 아키텍처 연구 논문 프로젝트 페이지로 관심 분야인 LLM 연구에 해당하나, 루트에 실제 소스 코드가 없고 PDF 논문·HTML만 존재해 클론해서 실행할 구현체가 없음
- 액션: 저장소의 Recurrent_Looped_Transformer.pdf 열어 RLT 아키텍처 핵심 개념 파악
- 근거: AI/LLM 분야 — 트랜스포머 아키텍처를 단계별로 설명하는 교육 자료 저장소
- 액션: 저장소 클론 후 README 및 자료 훑어보며 어텐션 변형과 포지셔널 임베딩 개념 정리