WHAT IT DOES

무엇을 하나요?

Korean LLM v4는 PyTorch 기반 한국어 LLM 구현 및 학습 프로젝트입니다. 현재 페이지는 약 50M 규모의 초기 실험, 약 541M의 v1, 약 1.09B의 v2를 거쳐 v4에 이른 과정을 소개합니다. 모델 클래스와 실제 학습 설정의 기본 시퀀스 길이가 다르다는 점도 안내합니다.

KEY FEATURES

주요 기능

• 한국어 LLM 구현 및 학습 프로젝트
• 초기 실험부터 v4까지의 개발 과정 소개
• 모델 클래스와 학습 설정의 기본 시퀀스 길이 안내