Downloads · 30 days
9
16% of all-time downloads
MakiAi/gpt-oss-2048-rl-s2-r32-b1-lora
gpt-oss-2048-rl-s2-r32-b1-lora is a text generation model from MakiAi. Use it when you need the model to write or continue text. The card lists the license as apache-2.0.
このモデルは、OpenAIのgpt-oss-20bを2048ゲームの戦略生成タスクで強化学習(GRPO)によりファインチューニングしたものです。
Downloads · 30 days
9
16% of all-time downloads
All-time downloads
55
Public
Repo size
91.6 MB
Likes
0
Public
Click a slice to open those files.
.safetensors63.7 MB · 70%
From the Hugging Face model README
このモデルは、OpenAIのgpt-oss-20bを2048ゲームの戦略生成タスクで強化学習(GRPO)によりファインチューニングしたものです。
| パラメータ | 値 |
|---|---|
| ベースモデル | unsloth/gpt-oss-20b |
| max_seq_length | 2048 |
| lora_rank | 32 |
| lora_alpha | 64 |
| batch_size | 1 |
| gradient_accumulation | 1 |
| 実効バッチサイズ | 1 |
| num_generations | 2 |
| max_steps | 2 |
| learning_rate | 5e-05 |
| warmup_ratio | 0.1 |
| 量子化 | 4bit |
2048ゲームのボード状態を入力として、最適な次の一手(W/A/S/D)を出力するPython関数を生成します。
from unsloth import FastLanguageModel
model, tokenizer = FastLanguageModel.from_pretrained(
model_name="MakiAi/gpt-oss-2048-rl-s2-r32-b1-lora",
max_seq_length=2048,
load_in_4bit=True,
)
Apache 2.0