Downloads · 30 days
10
11% of all-time downloads
AIFT/AIFT-ko-orca-plat-Yi-ko-6b-v1.2-dpo-2
AIFT-ko-orca-plat-Yi-ko-6b-v1.2-dpo-2 is a text generation model from AIFT. Use it when you need the model to write or continue text. It is set up for transformers. The card lists the license as cc-by-sa-4.0.
<h1orca-platypus - instruct-dpo-2 모델 v1.2</h1
Downloads · 30 days
10
11% of all-time downloads
All-time downloads
89
Public
Parameters
6.2B
12.4 GB on disk
Likes
0
Public
Click a slice to open those files.
.safetensors12.4 GB · 100%
From the Hugging Face model README
<b><학습 데이터 구축></b> kyujinpy 님이 공개하신 KOR-OpenOrca-Platypus 데이터를 일부 삭제(샘플링) 및 정제 작업 진행하여 활용. 그 이후 해당 데이터들을 보며 관련 태스크를 추출하였고 이를 기반으로 해당 태스크에 맞춰서 NLP 관련 오픈소스 데이터를 활용하여 학습데이터를 자체적으로 역사, 과학, 수학, 기계독해, 리뷰 분석 문제를 gpt를 통해서 구축하였고, aihub 일반상식 및 기계독해 데이터를 활용하여 추가로 학습 데이터를 구축(형태소 관련, 기계독해 관련 및 요약) 각종 블로그에서 역사 및 상식 퀴즈를 사람이 직접 학습데이터 형태로 변경 AI2AI Challenge 데이터 형태를 보고 gpt를 통해 초등 수준의 과학 수학 문제 유형을 제작 500문제 영어 번역 데이터 영한/한영 데이터 학습 데이터로 활용 진행 총 데이터 4만개 정도 사용하였습니다.
<br><DPO학습 데이터> DPO 데이터는 CommonGen과 TruthfulQA에 초점을 맞추어 약 17,000개의 데이터를 학습하였습니다.