Downloads · 30 days
4
14% of all-time downloads
tunahangkrr/mitoz-anlatim-lora
mitoz-anlatim-lora is a text generation model from tunahangkrr. Use it when you need the model to write or continue text. It is set up for peft. The card lists the license as llama3.
Bir mitoz tespitinin neden üretildiğini patoloğun okuyabileceği Türkçeyle anlatan LoRA adaptörü.
Downloads · 30 days
4
14% of all-time downloads
All-time downloads
29
Public
Repo size
336 MB
Likes
0
Public
Click a slice to open those files.
.safetensors336 MB · 100%
From the Hugging Face model README
Bir mitoz tespitinin neden üretildiğini patoloğun okuyabileceği Türkçeyle anlatan LoRA adaptörü.
En önemli tasarım kararı budur. Model sayı, yön sözcüğü, etiket ya da karar üretmez. Her gerçek taşıyan simge süslü parantezli bir yuva olarak kalır; yuvaları ölçüm kodu doldurur.
Modelin ürettiği:
Kararın ne kadar sağlam olduğu, eşiği çeviren noktalar kapalı formda
çözülerek belirlenmiştir. {kirilganlik.p_yorumu} {kirilganlik.s_yorumu}
İki pay karşılaştırıldığında kararın {kirilganlik.dayanikli_asama}
aşamasındaki değişimlere daha dayanıklı olduğu görülür.
Kodun doldurduğu:
kirilganlik.dayanikli_asama = yanlış alarm eleme
Model yuvanın içinde ne yazdığını görmez. Uydurabileceği bir gerçek yoktur — elinde gerçek yoktur. Öğrendiği tek şey biçimdir: hangi yuvanın nereye geleceği, Türkçe cümle yapısı ve doğru ekler.
| Taban | ytu-ce-cosmos/Turkish-Llama-8b-Instruct-v0.1 |
| Yöntem | QLoRA, 4-bit NF4, çift nicemleme |
| LoRA | r=32, α=64, dropout 0,05 |
| Hedef katmanlar | q, k, v, o, gate, up, down projeksiyonları |
| Eğitilen parametre | 83.886.080 (%1,03) |
| Etkin yığın | 16 (yığın 1 × biriktirme 16) |
| Öğrenme oranı | 1e-4, kosinüs, %3 ısınma |
| Azami uzunluk | 1664 jeton |
| Donanım | tek RTX 4060 Ti (16 GB) |
| Doğrulama kaybı | 0,03499 |
Eğitim verisi 19.695 rapordan bölünen 227.454 bölüm örneğidir; bölme slayt bazlı yapılmıştır (490 slaydın 29'u doğrulamaya ayrılmıştır), aynı görüntünün örnekleri hem eğitimde hem doğrulamada bulunmaz.
| Ölçüm | Sonuç |
|---|---|
| Bölüm kabul oranı | 360/360 = %100 |
| Tam LLM raporu | 32/32 |
| Doğrulanmamış ifade | 0 |
| Düşen cümle | 0 |
| Onarılan yuva | 0 |
| Rapor başına süre | 75 sn |
Doğrulanmamış ifade sayısının sıfır olması sistemin tek sert garantisidir. Üretilen her cümle, yuvalar doldurulduktan sonra anlam denetiminden geçer; geçemeyen cümle yayımlanmaz.
Aynı 32 aday üzerinde, peş peşe iki raporda ortak cümle sayısı:
| ortak cümle | |
|---|---|
| kanonik metin (varyantsız) | 30,9 |
| bu adaptör | 11,8 |
Aşama 0 (slayt bağlamı) · Aşama 1 (koşullandırma) · Aşama 2 (aday tespiti) · Aşama 3 (yanlış alarm eleme) · odaklanılan bölge · kapatma sınaması · öznitelik uzayında komşular · karar · kararın kırılganlığı · bu karara neden güvenilebilir, neden güvenilmeyebilir · kararlılık sınamaları · adayın slayt içindeki yeri.
Son bölüm altı bağımsız ölçümü kararı destekleyen ve zayıflatan diye ayırır; özet cümlesini de kod seçer, model değil.
from transformers import AutoModelForCausalLM, AutoTokenizer, BitsAndBytesConfig
from peft import PeftModel
import torch
TABAN = "ytu-ce-cosmos/Turkish-Llama-8b-Instruct-v0.1"
tok = AutoTokenizer.from_pretrained(TABAN)
model = AutoModelForCausalLM.from_pretrained(
TABAN, device_map={"": 0}, dtype=torch.bfloat16,
quantization_config=BitsAndBytesConfig(
load_in_4bit=True, bnb_4bit_quant_type="nf4",
bnb_4bit_compute_dtype=torch.bfloat16,
bnb_4bit_use_double_quant=True))
model = PeftModel.from_pretrained(model, "tunahangkrr/mitoz-anlatim-lora")
Çıkarım 4-bit yapılmalıdır — eğitim de 4-bit yapılmıştır.
İstem biçimi:
<talimat>
### BÖLÜM
<bölüm başlığı>
### ÖLÇÜMLER
<yuva adı> = <değer>
...
### METİN
Üretim üst sınırı 1024 jeton olmalıdır: en uzun bölüm ("Modelin kırpıntı içinde odaklandığı bölge") 692 jetondur ve daha düşük bir sınır çıktıyı sessizce keser.
Yuvaları dolduracak ölçüm katmanı olmadan çıktı süslü parantezli bir
iskelettir. Ölçüm katmanı TITAN, CONCH v1.5 ve MIDOG25 FCOS gerektirir;
bkz. tunahangkrr/mitoz-tespit-modulleri.
Taban model Llama 3 Community License'a tabidir ve bu adaptör de aynı lisans zincirine bağlıdır. Built with Llama.
TÜBİTAK destekli araştırma projesi kapsamında üretilmiştir.