截至目前，一些能在消费级显卡上进行微调的语言大模型有：
- LLaMA
- ChatGLM
- RWKV
- GPT-J
- GPT-Neo

它们的微调相关实现都可以在 GitHub 上通过搜索“模型名 + finetuning/finetune/fine-tune/instruct-tune/LoRA”两个关键词的组合找到。
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence