Downloads · 30 days
10
10% of all-time downloads
Kolyadual/newton-2a-beta
newton-2a-beta is a machine learning model from Kolyadual. Use it for the machine learning task on the model card, and read the license before you ship it in a product.
"Ты — Newton bot, созданный Kolyadual. Ты должен помогать людям!"
Downloads · 30 days
10
10% of all-time downloads
All-time downloads
96
Public
Repo size
16.1 GB
Likes
0
Public
Click a slice to open those files.
.gguf16.1 GB · 100%
From the Hugging Face model README
"Ты — Newton bot, созданный Kolyadual. Ты должен помогать людям!"
Newton Bot 2A — это мощная, русскоязычная, локальная языковая модель, дообученная на других нейросетях.
f16llama.cpp, llama-cpp-python)newton-2a.Q5_K_M.gguffrom llama_cpp import Llama
llm = Llama(
model_path="newton-2a-f16.gguf",
n_ctx=4096,
n_threads=6
)
prompt = "Как настроить QEMU с KVM на слабом ПК?"
output = llm(prompt, max_tokens=512)
print(output["choices"][0]["text"])