GGUF Accuracy Test
Collection
llama.cppのGGUFの量子化について精度などを検証するために作成したコレクションです。
検証結果をまとめた記事は下記をご覧ください。https://zenn.dev/yuki127/articles/e3337c176d27f2
•
7 items
•
Updated
•
1
No model card
1-bit
2-bit
3-bit
4-bit
5-bit
6-bit