tokenizer_config.json

{
    "tokenizer_class": "PreTrainedTokenizerFast",
    "bos_token": "␂",
    "eos_token": "␃",
    "unk_token": "␦",
    "sep_token": "␃",
    "pad_token": "␢",
    "cls_token": "␂",
    "mask_token": "␥"
}