vocab.json

{
  "chars": [
    "0",
    "1",
    "2",
    "3",
    "4",
    "5",
    "6",
    "7",
    "8",
    "9",
    "[CLS]",
    "[EOS]",
    "[MASK]",
    "[PAD]",
    "[PUNC]",
    "[SEP]",
    "[UNK]",
    "a",
    "b",
    "c",
    "d",
    "e",
    "f",
    "g",
    "h",
    "i",
    "j",
    "k",
    "l",
    "m",
    "n",
    "o",
    "p",
    "q",
    "r",
    "s",
    "t",
    "u",
    "v",
    "w",
    "x",
    "y",
    "z"
  ],
  "char_to_id": {
    "[PAD]": 0,
    "[CLS]": 1,
    "[SEP]": 2,
    "[MASK]": 3,
    "[UNK]": 4,
    "[EOS]": 5,
    "[PUNC]": 6,
    "0": 7,
    "1": 8,
    "2": 9,
    "3": 10,
    "4": 11,
    "5": 12,
    "6": 13,
    "7": 14,
    "8": 15,
    "9": 16,
    "a": 17,
    "b": 18,
    "c": 19,
    "d": 20,
    "e": 21,
    "f": 22,
    "g": 23,
    "h": 24,
    "i": 25,
    "j": 26,
    "k": 27,
    "l": 28,
    "m": 29,
    "n": 30,
    "o": 31,
    "p": 32,
    "q": 33,
    "r": 34,
    "s": 35,
    "t": 36,
    "u": 37,
    "v": 38,
    "w": 39,
    "x": 40,
    "y": 41,
    "z": 42
  },
  "special_tokens": {
    "pad_token": "[PAD]",
    "cls_token": "[CLS]",
    "sep_token": "[SEP]",
    "mask_token": "[MASK]",
    "unk_token": "[UNK]",
    "eos_token": "[EOS]"
  }
}