Downloads · 30 days
35
25% of all-time downloads
RuGPT-5-small-v1
Dmitriy-Zemskov/RuGPT-5-small-v1
RuGPT-5-small-v1 is a text generation model from Dmitriy-Zemskov. Use it when you need the model to write or continue text. It is set up for transformers. The card lists the license as apache-2.0.
!!!АХТУНГ!!! Данная модель не создана компанией "СБЕР" это кастомный LM.
All-time downloads
142
Public
Parameters
321M
641 MB on disk
Likes
1
Public
Repo makeup
Click a slice to open those files.
.safetensors641 MB · 99%
At a glance
- Task
- Text Generation
- Library
- transformers
- License
- apache-2.0
- Model type
- gpt2
- Access
- Public
- Created
- Feb 16, 2026
- Updated
- Feb 16, 2026
- SHA
- 8b329190
Base models
Model card
From the Hugging Face model README
🌌 RuGPT-5-small (v1.0)
!!!АХТУНГ!!! Данная модель не создана компанией "СБЕР" это кастомный LM.
Подробнее:
⚙️ Детали модели
- Архитектура: используется GPT + DeepSeek, но модель своя.
- Параметры: 320M
- Язык: Русский, только русский.
- Лицения: Apache 2.0
🏋️ Детали Тренировки
- Датасет: ``
- Железо: ОДНА NVIDIA GEFORCE RTX 5060 TI (16GB VRAM)
- Эпохи: ...
- Шагов: - 115 тысяч
- СРЕДНИЙ LOSS: 3.501953
- Оптимизатор: lr = 2e-4
- Контекст: 2048 токенов
- Task
- Text Generation
- Library
- transformers
- Type
- gpt2
- License
- apache-2.0
- Languages
- ru
- Created
- Feb 16, 2026
- Updated
- Feb 16, 2026