TRL v1.13.0 공식 릴리스
발행일: 2026년 9월 10일
Hugging Face의 TRL(Transformers Reinforcement Learning)은 기초 모델의 사후 훈련을 위한 종합 라이브러리로, 감독 미세조정(SFT), 그룹 상대 정책 최적화(GRPO), 직접 선호도 최적화(DPO), 보상 모델링 등의 방법론을 제공합니다. v1.13.0 릴리스에서는 DistillationTrainer가 안정적인 API로 승격되어, 메모리 효율적인 청크 JSD 손실과 vLLM 기반 생성을 지원하는 온-정책 지식 증류 기능을 제공합니다.
이 라이브러리는 Hugging Face 트랜스포머 생태계에 통합되어 있으며, 다양한 모델 아키텍처와 멀티모달 구성을 지원하고, 단일 GPU부터 멀티 노드 클러스터까지 확장 가능한 훈련을 제공합니다. PyTorch 생태계와의 높은 호환성과 명령줄 인터페이스(CLI)를 통해 코드 작성 없이도 미세조정이 가능합니다.