🧠 BitNet TinyDialogues CPU
BitNet b1.58 GGUF TQ1_0 CPU TinyDialogues
Modelo experimental ternário treinado do zero com TinyDialogues.
Rodar em CPU
llama-cli -m bitnet-tinydialogues-TQ1_0.gguf \ -p "User: Hello Assistant:" -n 64 --temp 0.8 -t 2 -r "User:"
Use um build de llama.cpp com o patch ReLU² para BitNet incluído no repositório do modelo.
Space
Este Space é estático porque a conta não tem assinatura PRO para hospedar Spaces Docker/Gradio em CPU.
O repositório inclui Dockerfile e app.py para implantar em uma conta/organização com PRO ou hardware pago.