이 프로젝트는 shareGPT 데이터셋 60만 대화문을 DeepL 을 통해 한국어로 번역하고 있습니다.
현재 번역이 진행 중이며, 아래의 진행상황을 참고해 주세요.
62만 대화문중 62만 대화문번역완료.
original_dataset.json : 원본 shareGPT 파일(62만 영문대화문)
ko_dataset.json : 번역본 shareGPT파일, 구조 원본과 동일
ko_dataset_2.json : ko_dataset.json 에서 파일구조가 불안정한(대화가 없거나, 대화의 시작이 gpt 인데 그 이후 대화가 없는것들) 대화 삭제 버전
ko_alpaca_style_dataset.json : 알파카 파인튜닝을 위한 구조로 변경
원본 데이터가 OPENAI 이기 때문에 해당 약관에 따릅니다.
그 이외의 부분은 다음 라이센스를… See the full description on the dataset page:
https://huggingface.co/datasets/junelee/sharegpt_deepl_ko.
