Downloads · 30 days
574
7% of all-time downloads
Vikhrmodels/Vikhr-7b-0.1
Vikhr-7b-0.1 is a text generation model from Vikhrmodels. Use it when you need the model to write or continue text. It is set up for transformers. The card lists the license as apache-2.0.
Введение в Vikhr: представляем Vikhr, основанную на архитектуре Mistral и предварительно обученную на 400 миллионах токенов в течение трех эпох.
Downloads · 30 days
574
7% of all-time downloads
All-time downloads
8.6K
Public
Parameters
7.3B
146 GB on disk
Likes
60
Public
Click a slice to open those files.
.safetensors14.6 GB · 100%
From the Hugging Face model README
Введение в Vikhr: представляем Vikhr, основанную на архитектуре Mistral и предварительно обученную на 400 миллионах токенов в течение трех эпох.
Она должна быть лучше чем оригинальный мистраль на русских задачах, а вот с кодом скорее всего будут проблемы.
| Датасет | Vikhr-7b-0.1 | Mistral-7B-v0.1 |
|---|---|---|
| mmlu_ru | 0.60 | 0.66 |
| xwinograd | 0.72 | 0.68 |
| xnli | 0.3812 | 0.3691 |