Downloads · 30 days
311
4% of all-time downloads
mmnga/japanese-stablelm-3b-4e1t-instruct-gguf
japanese-stablelm-3b-4e1t-instruct-gguf is a machine learning model from mmnga. Use it for the machine learning task on the model card, and read the license before you ship it in a product. The card lists the license as apache-2.0.
stabilityaiさんが公開しているjapanese-stablelm-3b-4e1t-instructのggufフォーマット変換版です。
Downloads · 30 days
311
4% of all-time downloads
All-time downloads
8.6K
Public
Repo size
21.4 GB
Likes
1
Public
Click a slice to open those files.
.gguf21.4 GB · 100%
From the Hugging Face model README
stabilityaiさんが公開しているjapanese-stablelm-3b-4e1t-instructのggufフォーマット変換版です。
こちら本家にサポートPRがありますので、本家で将来的に実行可能になると思います。
他のモデルはこちら
3bモデル
mmnga/japanese-stablelm-3b-4e1t-base-gguf
mmnga/japanese-stablelm-3b-4e1t-instruct-gguf
7bモデル
mmnga/japanese-stablelm-base-gamma-7b-gguf
mmnga/japanese-stablelm-instruct-gamma-7b-gguf
git clone --branch mmnga-dev-merge https://github.com/ggerganov/llama.cpp.git
cd llama.cpp
make -j
./main -m 'japanese-stablelm-3b-4e1t-instruct-q4_0.gguf' -n 128 -p '### 指示: 今夜の晩御飯のレシピを教えて \n ### 応答:'