Downloads · 30 days
7
7% of all-time downloads
Amir337/llm-course-hw2-dpo
llm-course-hw2-dpo is a text generation model from Amir337. Use it when you need the model to write or continue text. It is set up for transformers.
При выполнении этого задания были потрачены 3 коллаба и 1 каггл, обучениее падало примерно 10 раз
Downloads · 30 days
7
7% of all-time downloads
All-time downloads
106
Public
Parameters
135M
1.6 GB on disk
Likes
0
Public
Click a slice to open those files.
.safetensors538 MB · 99%
From the Hugging Face model README
При выполнении этого задания были потрачены 3 коллаба и 1 каггл, обучениее падало примерно 10 раз
PPO - https://huggingface.co/Amir337/llm-course-hw2-ppo
reward model: https://huggingface.co/Amir337/trainer_output

