README.md

metadata

license: mit

模型说明

基于RWKV6-v2.1-1B6 基模微调的超小模型，模型基于此语料进行pissa微调，并微调了embedding层

非常感谢Moemuu提供的开源语料支持

此模型因参数较少，应该可以在安卓系统中使用进行推理，在拥有6G运行内存的安卓手机中进行部署聊天

效果如下：

补充说明

因此模型参数量较少，逻辑不够清晰是很正常的，并且使用默认角色对话即可，即：

System:
User:
Assistant:

推荐参数如下：

Temperature=2

Top_P=0.55

Presence Penalty=0.4-0之间

Frequency Penalty=0.8-1.2之间