Tokenizer

人気のあるモデルのトークナイザーで、テキストがどう分割されるかを確認できます。