학습 데이터·후속학습EleutherAI
The Pile
The Pile — 825GiB, 22개 서브셋
왜 중요한가
다양성 큐레이션 패러다임. 동시에 Books3 등 저작권 부담을 이후 모델에 전가
출처 — 1차 출처만 싣고, 직접 이동해 확인할 수 있어요
논문arxiv.orghttps://arxiv.org/abs/2101.000272026년 8월 24일에 더한 조각 · 그 주 보기
The Pile — 825GiB, 22개 서브셋
다양성 큐레이션 패러다임. 동시에 Books3 등 저작권 부담을 이후 모델에 전가