Downloads · 30 days
19
1% of all-time downloads
grapevine-AI/aya-expanse-8b-gguf
aya-expanse-8b-gguf is a machine learning model from grapevine-AI. Use it for the machine learning task on the model card, and read the license before you ship it in a product. The card lists the license as cc-by-nc-4.0.
CohereForAIのマルチリンガル言語モデルaya-expanse-8bをGGUFフォーマットに変換したものです。
Downloads · 30 days
19
1% of all-time downloads
All-time downloads
1.8K
Public
Repo size
46.7 GB
Likes
6
Public
Click a slice to open those files.
.gguf46.7 GB · 100%
From the Hugging Face model README
CohereForAIのマルチリンガル言語モデルaya-expanse-8bをGGUFフォーマットに変換したものです。
日本語能力を重視し、日本語が多量に含まれるTFMC/imatrix-dataset-for-japanese-llmデータセットを使用しました。<br> imatrixの算出は本来の数値精度であるfloat16モデルを使用して行いました。
<|START_OF_TURN_TOKEN|><|SYSTEM_TOKEN|>ここにSystem Promptを書きます<|END_OF_TURN_TOKEN|><|START_OF_TURN_TOKEN|><|USER_TOKEN|>ここにMessageを書きます<|END_OF_TURN_TOKEN|><|START_OF_TURN_TOKEN|><|CHATBOT_TOKEN|>
Windows版llama.cpp-b3621およびllama.cpp-b3472同時リリースのconvert-hf-to-gguf.pyを使用して量子化作業を実施しました。
cc-by-nc-4.0
CohereForAI