分词算法有快速Rust和缓慢Python两种实现方式BytePairEncodingBPE是自底向上的算法，代表模型包括GPTGPT2RoBERTaBART和DeBERTaWordPiece也是自底向上的算法，代表模型有BERTDistilBERTMobileBERTFunnelTransformers和MPN...