한국어 대화 데이터셋 · 텍스트
한국어 대화 데이터셋
한국어 ELECTRA 모델 학습 및 어휘 사전(Vocabulary) 구성을 위해 나무위키, 위키백과, 뉴스 기사 등을 골고루 배합하고 신뢰성 높은 토큰들만 정밀 샘플링한 데이터셋입니다.
제공처
GitHub (monologg)
라이선스
Apache 2.0
카탈로그 확인됨
언어
한국어
재확인 필요
형식
Text
재확인 필요
용량
대용량 (34GB)
수백만 토큰 시퀀스
연도
2020
KoELECTRA 보캡 최적화 원시 텍스트 말뭉치는 한국어 대화 데이터셋입니다. 한국어 대화 데이터셋 과제에 맞습니다. 평가용 벤치마크와 한 배치로 받지 않는 것이 좋습니다. GitHub (monologg)에서 받습니다. 라이선스 표기는 Apache 2.0입니다. 상업 이용은 가능으로 표시되어 있으나 원본 약관을 다시 읽습니다. 용량 표기는 대용량 (34GB)이며 다시 잰 값이 아닙니다.
이 기기에서만 돌아가는 도구
KoELECTRA 보캡 최적화 원시 텍스트 말뭉치: 한국어 대화 데이터셋. 제공처 GitHub (monologg). 라이선스 Apache 2.0. 원본 주소에서 받습니다.
제목·연도·제공처·주소·라이선스 표기는 저장된 칸입니다. 저자 이름은 카탈로그에 없습니다.
KoELECTRA 보캡 최적화 원시 텍스트 말뭉치 (2020). GitHub (monologg). 라이선스 표기: Apache 2.0 카탈로그 상업 이용 표기: 가능 원본: https://github.com/monologg/KoELECTRA. 기어델 카탈로그: https://geardel.com/datasets/koelectra-vocab-corpus. 확인일: 2026-09-03. 저자 이름은 카탈로그 칸에 없어 여기서 만들지 않습니다.
아래 차이는 카탈로그 필드만 사용합니다. 라이선스, 상업 이용, 제공처, 용량 표기, 연도입니다.
발췌
저장된 발췌 1개입니다. 기어델은 원본 파일을 보관하지 않습니다.
가공 원문
토크나이저는 문장을 인공지능이 분석하기 쉬운 정수 시퀀스 형태로 끊어내는 필수적인 전처리 모듈입니다.
기어델은 파일을 보관하지 않습니다. 아래 상태는 카탈로그 표기이며 원본과 다를 수 있습니다.