[sentencepiece](https://github.com/google/sentencepiece)
[Byte pair encoding](https://texonom.com/byte-pair-encoding-d5c29c3c7dec44c2a4c530a4669124c1) 


BPE를 포함하여 기타 서브워드 토크나이징 알고리즘들을 내장




> [13-02 센텐스피스(SentencePiece)](https://wikidocs.net/86657)






