Downloads · 30 days
35
4% of all-time downloads
liuchen88/Qwen3.8-27B-CommercialLoan-MLX
Qwen3.8-27B-CommercialLoan-MLX is a text generation model from liuchen88. Use it when you need the model to write or continue text. It is set up for mlx.
基于 Qwen3.8-27B 通过 LoRA 微调的企业信贷审批专用大模型,支持三态分类决策(批准 / 有条件批准 / 拒绝)。
Downloads · 30 days
35
4% of all-time downloads
All-time downloads
984
Public
Repo size
54.7 GB
Likes
1
Public
Click a slice to open those files.
.safetensors54.7 GB · 100%
From the Hugging Face model README
基于 Qwen3.8-27B 通过 LoRA 微调的企业信贷审批专用大模型,支持三态分类决策(批准 / 有条件批准 / 拒绝)。
本仓库为 MLX BF16 版:Safetensors 权重,适用于 Apple Silicon 上的 MLX / LM Studio。
本模型面向商业银行对公信贷审批场景,针对企业贷款申请给出审批结论。融合了上市公司财务数据、小微企业违约数据、真实司法不良记录等多源训练语料。
approve(批准)、cond_approve(有条件批准)、reject(拒绝)| 项目 | 内容 |
|---|---|
| 架构 | Qwen3_5ForConditionalGeneration (MLX) |
| 精度 | BF16(未量化) |
| 参数量 | 27B |
| 隐藏维度 | 5120 |
| 层数 | 64 (48 SSM + 16 full attention) |
| 词表大小 | 248,320 |
| 注意力头 | Gated Attention: 24 Q + 4 KV, Head dim 256 |
| 上下文长度 | 262,144 tokens |
| 文件 | 大小 | 说明 |
|---|---|---|
model-00001-of-00011.safetensors ~ model-00011-of-00011.safetensors | 共 ~54.7 GB | BF16 权重分片 |
config.json / tokenizer* / chat_template.jinja | - | 配置与分词器 |
| 项目 | 内容 |
|---|---|
| 基座模型 | Qwen3.8-27B |
| 微调方式 | QLoRA (rank=8, dropout=0.1, scale=16.0) |
| 训练框架 | mlx-lm v0.31.3 (Apple MLX) |
| 训练步数 | 1,000 iterations |
| 学习率 | 5e-6 (cosine decay, warmup=150) |
| 序列长度 | 2048 tokens |
| 精度 | 硬件 | 配置 | 支持 |
|---|---|---|---|
| BF16 | Apple Silicon Mac | 64GB+ 统一内存 | ✅ |
pip install mlx-lm
from mlx_lm import load, generate
model, tokenizer = load("liuchen88/Qwen3.8-27B-CommercialLoan-MLX")
messages = [
{"role": "system", "content": "你是一位具有20年企业信贷审批经验的商业银行对公信贷审批专家。"},
{"role": "user", "content": "某企业申请授信500万元,该企业当前存在被执行案件,尚未结案。请给出审批结论。"}
]
text = tokenizer.apply_chat_template(messages, tokenize=False, add_generation_prompt=True, enable_thinking=False)
response = generate(model, tokenizer, prompt=text, max_tokens=2048)
print(response)
liuchen88/Qwen3.8-27B-CommercialLoan-MLX 下载,或将文件放入 ~/models/liuchen88/ 目录下