Downloads · 30 days
19
3% of all-time downloads
uygarkurt/bert-restore-punctuation-turkish-legacy
bert-restore-punctuation-turkish-legacy is a token classification model from uygarkurt. Use it when you need labels on individual words, such as names. It is set up for transformers. The card lists the license as mit.
This bert-base-cased model fine-tuned for punctuation restoration task on a mixture of open-source datasets. Model is able to predict [! ? , . ; :]
Downloads · 30 days
19
3% of all-time downloads
All-time downloads
546
Public
Repo size
880 MB
Likes
1
Public
Click a slice to open those files.
.bin440 MB · 100%
From the Hugging Face model README
This bert-base-cased model fine-tuned for punctuation restoration task on a mixture of open-source datasets. Model is able to predict [! ? , . ; :]
This model works on arbitrarily large Turkish text.
from transformers import pipeline
classifier = pipeline("token-classification", model="uygarkurt/bert-restore-punctuation-turkish", tokenizer="uygarkurt/bert-restore-punctuation-turkish")
txt = "Türkiye toprakları üzerindeki ilk yerleşmeler Yontma Taş Devri'nde başlar Doğu Trakya'da Traklar olmak üzere Hititler Frigler Lidyalılar ve Dor istilası sonucu Yunanistan'dan kaçan Akalar tarafından kurulan İyon medeniyeti gibi çeşitli eski Anadolu medeniyetlerinin ardından Makedonya kralı Büyük İskender'in egemenliğiyle ve fetihleriyle birlikte Helenistik Dönem başladı"
print(classifier(txt))
# Output
# Türkiye toprakları üzerindeki ilk yerleşmeler Yontma Taş Devri'nde başlar. Doğu Trakya'da Traklar olmak üzere Hititler, Frigler, Lidyalılar ve Dor istilası sonucu Yunanistan'dan kaçan Akalar tarafından kurulan İyon medeniyeti gibi çeşitli eski Anadolu medeniyetlerinin ardından Makedonya kralı Büyük İskender'in egemenliğiyle ve fetihleriyle birlikte Helenistik Dönem başladı.
| Epoch | Training Loss | Validation Loss | Precision | Recall | F1 | Accuracy |
|---|---|---|---|---|---|---|
| 1 | 0.100300 | 0.096145 | 0.862800 | 0.829047 | 0.845586 | 0.965330 |
| 2 | 0.084200 | 0.092011 | 0.878079 | 0.830346 | 0.853546 | 0.967148 |
| 3 | 0.075200 | 0.093337 | 0.878449 | 0.833345 | 0.855303 | 0.967539 |
This is a plot project. Depending on the demand it can be improved.
Contact [email protected]