Downloads · 30 days
22
23% of all-time downloads
Endezyar/gemma-3-finetune
gemma-3-finetune is a text generation model from Endezyar. Use it when you need the model to write or continue text. It is set up for transformers. The card lists the license as apache-2.0.
Bu model, alibayram/yapayzekaturkcemmlumodelcevaplari veri seti ve Türkçe MMLU ölçüm betiği (olcum.py) kullanılarak değerlendirilmiştir. google/gemma-3-1b-it base modeli üzerinden [Endezyar/siyerdatasets] veri seti eğ…
Downloads · 30 days
22
23% of all-time downloads
All-time downloads
94
Public
Parameters
1000M
2 GB on disk
Likes
0
Public
Click a slice to open those files.
.safetensors2 GB · 98%
From the Hugging Face model README
Bu model, alibayram/yapay_zeka_turkce_mmlu_model_cevaplari veri seti ve Türkçe MMLU ölçüm betiği (olcum.py) kullanılarak değerlendirilmiştir.
google/gemma-3-1b-it base modeli üzerinden [Endezyar/siyer_datasets] veri seti eğiltilmişdi. Lakin sistem çıktıları tatmin edici değildi. Yapılan testlerde başarı oranı %25 rastlantı sınırının altında kalmıştır.
Ne var ki base model kendi haliyle teste sokulduğundan hemen hemen aynı sonuçlar alınmış ve sorunun veri setinden değil modelden olduğu sonucuna varılmıştır.
| Model | Model Türü | MMLU Başarı Skoru (%) | Test Süresi (sn) |
|---|---|---|---|
| google/gemma-3-1b-it | Base Model | %22.37 | 3704.42 saniye |
| Metrik | Değer |
|---|---|
| Soru Sayısı | 6200 |
| Doğru Cevap Sayısı | 1387 |
| Başarı Oranı | %22.37 |
| Toplam Süre | 3704.42 saniye |
This gemma3_text model was trained 2x faster with Unsloth and Huggingface's TRL library.