rinnaさんのgemma-2-baku-2b-itを量子化したものたちです。 ライセンスをよく読んだうえでお好きな方法で使ってください。
npakaさんのLLM-jp-3 を gguf に変換する手順
4-bit
8-bit
Base model