v4와 v2 다른점
#1
by
BMandAI
- opened
안녕하세요.
올려주신 nox-solar-10.7b-v2와 nox-solar-10.7b-v4가 받은 평가점수가 다른데 둘의 차이점이 궁금합니다. 나와있는 것으로는 차이점을 못 찾겠어서요..
차이점은 v2는 dpo, v4는 sft+dpo로 학습하였습니다. 내용을 추가하겠습니다 그리고 현재 코드 공개를 준비하고 있어서 자세한 코드는 https://github.com/davidkim205/nox 을 참고하면 좋을것 같습니다.
답변 감사합니다 좋은 모델도 감사합니다!!