Downloads · 30 days
41
8% of all-time downloads
VirtuoTuring/chat_noir-24b-gguf
chat_noir-24b-gguf is a text generation model from VirtuoTuring. Use it when you need the model to write or continue text. It is set up for adapter-transformers. The card lists the license as other.
Chat Noir is a conversational model developed by Octávio Viana in collaboration with Virtuo Turing. It is designed for direct and private, built upon a customized Mistral-24B architecture with proprietary LoRA layers…
Downloads · 30 days
41
8% of all-time downloads
All-time downloads
505
Public
Repo size
137 GB
Likes
0
Public
Click a slice to open those files.
.gguf61.5 GB · 100%
From the Hugging Face model README
Chat Noir is a conversational model developed by Octávio Viana in collaboration with Virtuo Turing.
It is designed for direct and private, built upon a customized Mistral-24B architecture with proprietary LoRA layers and a corpus authored entirely in European Portuguese, covering technical, legal, and literary works.
The model received additional training with statements of claim filed in Portuguese courts and judgments from the Courts of Appeal of Guimarães, Porto, Coimbra, Lisbon and Évora, as well as from the Supreme Court of Justice.
It includes specialized training in:
Chat Noir was optimized for short and precise answers, targeting low memory usage and fast latency, even on local hardware.
Training was performed with moderate context windows (≈4 000 tokens), prioritizing semantic density and inference speed over extended context length.
The adapted Mistral-24B architecture with LoRA layers was configured to:
Q4_K_S, Q5, Q8) without major structural loss.The model was not trained for long-context reasoning (no long-context fine-tuning or position interpolation beyond 8k), and is therefore best suited for dialogue, legal Q&A, and concise summarization, rather than extensive document retrieval tasks.
Released under the Virtuo License, which permits use (including commercial), modification, and redistribution, provided that:
Official website: https://justina.cloud
Q4_K_S, GEN: max_new_tokens=400, temperature=0.2, top_p=0.9)Método. 49 prompts de eval_set.jsonl. Conta-se recusa quando os primeiros 200 caracteres casam com uma regex fixa de termos de recusa em PT-PT ou EN. Sem avaliação de exatidão. Só recusas e tempo médio de geração foram medidos.
Limitações. Amostra pequena. IC amplo. A regex pode subcontar recusas indiretas ou sobrecontar texto de segurança. Resultados dependem de hardware e quantização.
chatnoir_f16.ggufchatnoir_q4_k_s.ggufREADME.mdconfig.json./main -m ./chatnoir_f16.gguf -p "O que é o artigo 6.º da Lei n.º 83/95, de 31 de agosto?"
Developed and trained by Virtuo Turing – Artificial Intelligence, S.A. (Portugal)
in partnership with Octávio Viana.
Based on the Mistral-24B architecture © Mistral AI, released under Apache 2.0.
O Chat Noir é um modelo conversacional desenvolvido por Octávio Viana, em parceria com a Virtuo Turing.
Foi concebido para diálogos diretos e privados, assente numa arquitetura Mistral-24B personalizada, com camadas LoRA próprias e um corpus autoral integralmente em português europeu, abrangendo obras técnicas, jurídicas e literárias.
O modelo foi adicionalmente treinado com petições iniciais apresentadas nos tribunais portugueses e acórdãos dos Tribunais da Relação de Guimarães, Porto, Coimbra, Lisboa e Évora, bem como do Supremo Tribunal de Justiça.
Inclui treino especializado em:
Normativos-alvo recorrentes: CPC, CPP, CP, CC, CRP, CEDH, CRC, RGPD (e Lei n.º 58/2019), Lei n.º 112/2009, Lei n.º 130/2015 (Estatuto da Vítima), LAV, Lei de Imprensa, Convenções de Haia (1980, 1993), Regulamentos (UE) 1215/2012, 2019/1111, 4/2009, Diretivas 2004/25/CE, 2011/99/UE, 2020/1828, CVM (arts. 194.º e 196.º), LMV/ordenações nacionais comparadas.
Formatos utilizados no treino: pares Q/A autossuficientes em JSONL, checklists, testes binários, contraexemplos, “ruído controlado”, micro-minutas e minutas longas, regras de validação determinística.
O Chat Noir foi otimizado para respostas curtas e precisas, com o objetivo de manter baixo consumo de memória e latência reduzida, mesmo em hardware local.
O treino foi conduzido com contextos moderados (≈4 000 tokens), privilegiando a densidade semântica e a rapidez de inferência, em vez da extensão contextual.
A arquitetura Mistral-24B adaptada com camadas LoRA foi configurada para:
Q4_K_S, Q5, Q8) sem perda estrutural relevante.O modelo não foi treinado para raciocínio de longo contexto (não utiliza long-context fine-tuning nem position interpolation > 8k), pelo que é mais indicado para diálogo, Q&A jurídico e síntese textual breve, e não para tarefas de document retrieval extenso.
Distribuído sob a Licença Virtuo 1.0, que permite o uso (incluindo comercial), a modificação e a redistribuição, desde que:
Website oficial: https://justina.cloud
Q4_K_S, GEN: max_new_tokens=400, temperature=0.2, top_p=0.9)Method. 49 prompts from eval_set.jsonl. A response is counted as a refusal if the first 200 characters match a fixed regex of refusal terms in PT-PT or EN. No correctness scoring. Only refusals and mean wall-clock generation time were measured.
Caveats. Small sample. Wide CI. Regex may undercount indirect refusals or overcount boilerplate safety text. Results depend on hardware and quantization.
chatnoir_f16.ggufchatnoir_q4_k_s.ggufREADME.mdconfig.json./main -m ./chatnoir_f16.gguf -p "O que é o artigo 6.º da Lei n.º 83/95, de 31 de agosto?"
Desenvolvido e treinado por Virtuo Turing – Artificial Intelligence, S.A. (Portugal)
em parceria com Octávio Viana.
Baseado na arquitetura Mistral-24B, © Mistral AI, distribuída sob licença Apache 2.0.