Downloads · 30 days
107
28% of all-time downloads
BangorAI/mistral-7b-cy-epoch-3
mistral-7b-cy-epoch-3 is a text generation model from BangorAI. Use it when you need the model to write or continue text. It is set up for transformers. The card lists the license as apache-2.0.
Mae'r model LLM yn seiliedig ar mistralai/Mistral-7B-v0.1, gyda hyfforddiant parhaus am 3 Epoch cyfan o ddata Cymreig o'r dataset allenai/MADLAD-400.
Downloads · 30 days
107
28% of all-time downloads
All-time downloads
386
Public
Repo size
29 GB
Likes
0
Public
Click a slice to open those files.
.bin14.5 GB · 100%
From the Hugging Face model README
Mae'r model LLM yn seiliedig ar mistralai/Mistral-7B-v0.1, gyda hyfforddiant parhaus am 3 Epoch cyfan o ddata Cymreig o'r dataset allenai/MADLAD-400.
Pwrpas y model yw fod yn gychwyn i hyfforddiant cywrain pellach i greu casgliad o LLMs Cymreig penodol.
Mae'r fersiwn 2 epoch gyda training evals ychydig yn is na'r fersiwn yma. Mae'n syniad arbrofi gyda'r ddau fersiwn.
Contains information from allenai/MADLAD-400 which is made available under the ODC Attribution License.