google/umt5-xxl/special_tokens_map.json
| 1 | { |
| 2 | "additional_special_tokens": [ |
| 3 | "<extra_id_0>", |
| 4 | "<extra_id_1>", |
| 5 | "<extra_id_2>", |
| 6 | "<extra_id_3>", |
| 7 | "<extra_id_4>", |
| 8 | "<extra_id_5>", |
| 9 | "<extra_id_6>", |
| 10 | "<extra_id_7>", |
| 11 | "<extra_id_8>", |
| 12 | "<extra_id_9>", |
| 13 | "<extra_id_10>", |
| 14 | "<extra_id_11>", |
| 15 | "<extra_id_12>", |
| 16 | "<extra_id_13>", |
| 17 | "<extra_id_14>", |
| 18 | "<extra_id_15>", |
| 19 | "<extra_id_16>", |
| 20 | "<extra_id_17>", |
| 21 | "<extra_id_18>", |
| 22 | "<extra_id_19>", |
| 23 | "<extra_id_20>", |
| 24 | "<extra_id_21>", |
| 25 | "<extra_id_22>", |
| 26 | "<extra_id_23>", |
| 27 | "<extra_id_24>", |
| 28 | "<extra_id_25>", |
| 29 | "<extra_id_26>", |
| 30 | "<extra_id_27>", |
| 31 | "<extra_id_28>", |
| 32 | "<extra_id_29>", |
| 33 | "<extra_id_30>", |
| 34 | "<extra_id_31>", |
| 35 | "<extra_id_32>", |
| 36 | "<extra_id_33>", |
| 37 | "<extra_id_34>", |
| 38 | "<extra_id_35>", |
| 39 | "<extra_id_36>", |
| 40 | "<extra_id_37>", |
| 41 | "<extra_id_38>", |
| 42 | "<extra_id_39>", |
| 43 | "<extra_id_40>", |
| 44 | "<extra_id_41>", |
| 45 | "<extra_id_42>", |
| 46 | "<extra_id_43>", |
| 47 | "<extra_id_44>", |
| 48 | "<extra_id_45>", |
| 49 | "<extra_id_46>", |
| 50 | "<extra_id_47>", |
| 51 | "<extra_id_48>", |
| 52 | "<extra_id_49>", |
| 53 | "<extra_id_50>", |
| 54 | "<extra_id_51>", |
| 55 | "<extra_id_52>", |
| 56 | "<extra_id_53>", |
| 57 | "<extra_id_54>", |
| 58 | "<extra_id_55>", |
| 59 | "<extra_id_56>", |
| 60 | "<extra_id_57>", |
| 61 | "<extra_id_58>", |
| 62 | "<extra_id_59>", |
| 63 | "<extra_id_60>", |
| 64 | "<extra_id_61>", |
| 65 | "<extra_id_62>", |
| 66 | "<extra_id_63>", |
| 67 | "<extra_id_64>", |
| 68 | "<extra_id_65>", |
| 69 | "<extra_id_66>", |
| 70 | "<extra_id_67>", |
| 71 | "<extra_id_68>", |
| 72 | "<extra_id_69>", |
| 73 | "<extra_id_70>", |
| 74 | "<extra_id_71>", |
| 75 | "<extra_id_72>", |
| 76 | "<extra_id_73>", |
| 77 | "<extra_id_74>", |
| 78 | "<extra_id_75>", |
| 79 | "<extra_id_76>", |
| 80 | "<extra_id_77>", |
| 81 | "<extra_id_78>", |
| 82 | "<extra_id_79>", |
| 83 | "<extra_id_80>", |
| 84 | "<extra_id_81>", |
| 85 | "<extra_id_82>", |
| 86 | "<extra_id_83>", |
| 87 | "<extra_id_84>", |
| 88 | "<extra_id_85>", |
| 89 | "<extra_id_86>", |
| 90 | "<extra_id_87>", |
| 91 | "<extra_id_88>", |
| 92 | "<extra_id_89>", |
| 93 | "<extra_id_90>", |
| 94 | "<extra_id_91>", |
| 95 | "<extra_id_92>", |
| 96 | "<extra_id_93>", |
| 97 | "<extra_id_94>", |
| 98 | "<extra_id_95>", |
| 99 | "<extra_id_96>", |
| 100 | "<extra_id_97>", |
| 101 | "<extra_id_98>", |
| 102 | "<extra_id_99>", |
| 103 | "<extra_id_100>", |
| 104 | "<extra_id_101>", |
| 105 | "<extra_id_102>", |
| 106 | "<extra_id_103>", |
| 107 | "<extra_id_104>", |
| 108 | "<extra_id_105>", |
| 109 | "<extra_id_106>", |
| 110 | "<extra_id_107>", |
| 111 | "<extra_id_108>", |
| 112 | "<extra_id_109>", |
| 113 | "<extra_id_110>", |
| 114 | "<extra_id_111>", |
| 115 | "<extra_id_112>", |
| 116 | "<extra_id_113>", |
| 117 | "<extra_id_114>", |
| 118 | "<extra_id_115>", |
| 119 | "<extra_id_116>", |
| 120 | "<extra_id_117>", |
| 121 | "<extra_id_118>", |
| 122 | "<extra_id_119>", |
| 123 | "<extra_id_120>", |
| 124 | "<extra_id_121>", |
| 125 | "<extra_id_122>", |
| 126 | "<extra_id_123>", |
| 127 | "<extra_id_124>", |
| 128 | "<extra_id_125>", |
| 129 | "<extra_id_126>", |
| 130 | "<extra_id_127>", |
| 131 | "<extra_id_128>", |
| 132 | "<extra_id_129>", |
| 133 | "<extra_id_130>", |
| 134 | "<extra_id_131>", |
| 135 | "<extra_id_132>", |
| 136 | "<extra_id_133>", |
| 137 | "<extra_id_134>", |
| 138 | "<extra_id_135>", |
| 139 | "<extra_id_136>", |
| 140 | "<extra_id_137>", |
| 141 | "<extra_id_138>", |
| 142 | "<extra_id_139>", |
| 143 | "<extra_id_140>", |
| 144 | "<extra_id_141>", |
| 145 | "<extra_id_142>", |
| 146 | "<extra_id_143>", |
| 147 | "<extra_id_144>", |
| 148 | "<extra_id_145>", |
| 149 | "<extra_id_146>", |
| 150 | "<extra_id_147>", |
| 151 | "<extra_id_148>", |
| 152 | "<extra_id_149>", |
| 153 | "<extra_id_150>", |
| 154 | "<extra_id_151>", |
| 155 | "<extra_id_152>", |
| 156 | "<extra_id_153>", |
| 157 | "<extra_id_154>", |
| 158 | "<extra_id_155>", |
| 159 | "<extra_id_156>", |
| 160 | "<extra_id_157>", |
| 161 | "<extra_id_158>", |
| 162 | "<extra_id_159>", |
| 163 | "<extra_id_160>", |
| 164 | "<extra_id_161>", |
| 165 | "<extra_id_162>", |
| 166 | "<extra_id_163>", |
| 167 | "<extra_id_164>", |
| 168 | "<extra_id_165>", |
| 169 | "<extra_id_166>", |
| 170 | "<extra_id_167>", |
| 171 | "<extra_id_168>", |
| 172 | "<extra_id_169>", |
| 173 | "<extra_id_170>", |
| 174 | "<extra_id_171>", |
| 175 | "<extra_id_172>", |
| 176 | "<extra_id_173>", |
| 177 | "<extra_id_174>", |
| 178 | "<extra_id_175>", |
| 179 | "<extra_id_176>", |
| 180 | "<extra_id_177>", |
| 181 | "<extra_id_178>", |
| 182 | "<extra_id_179>", |
| 183 | "<extra_id_180>", |
| 184 | "<extra_id_181>", |
| 185 | "<extra_id_182>", |
| 186 | "<extra_id_183>", |
| 187 | "<extra_id_184>", |
| 188 | "<extra_id_185>", |
| 189 | "<extra_id_186>", |
| 190 | "<extra_id_187>", |
| 191 | "<extra_id_188>", |
| 192 | "<extra_id_189>", |
| 193 | "<extra_id_190>", |
| 194 | "<extra_id_191>", |
| 195 | "<extra_id_192>", |
| 196 | "<extra_id_193>", |
| 197 | "<extra_id_194>", |
| 198 | "<extra_id_195>", |
| 199 | "<extra_id_196>", |
| 200 | "<extra_id_197>", |
| 201 | "<extra_id_198>", |
| 202 | "<extra_id_199>", |
| 203 | "<extra_id_200>", |
| 204 | "<extra_id_201>", |
| 205 | "<extra_id_202>", |
| 206 | "<extra_id_203>", |
| 207 | "<extra_id_204>", |
| 208 | "<extra_id_205>", |
| 209 | "<extra_id_206>", |
| 210 | "<extra_id_207>", |
| 211 | "<extra_id_208>", |
| 212 | "<extra_id_209>", |
| 213 | "<extra_id_210>", |
| 214 | "<extra_id_211>", |
| 215 | "<extra_id_212>", |
| 216 | "<extra_id_213>", |
| 217 | "<extra_id_214>", |
| 218 | "<extra_id_215>", |
| 219 | "<extra_id_216>", |
| 220 | "<extra_id_217>", |
| 221 | "<extra_id_218>", |
| 222 | "<extra_id_219>", |
| 223 | "<extra_id_220>", |
| 224 | "<extra_id_221>", |
| 225 | "<extra_id_222>", |
| 226 | "<extra_id_223>", |
| 227 | "<extra_id_224>", |
| 228 | "<extra_id_225>", |
| 229 | "<extra_id_226>", |
| 230 | "<extra_id_227>", |
| 231 | "<extra_id_228>", |
| 232 | "<extra_id_229>", |
| 233 | "<extra_id_230>", |
| 234 | "<extra_id_231>", |
| 235 | "<extra_id_232>", |
| 236 | "<extra_id_233>", |
| 237 | "<extra_id_234>", |
| 238 | "<extra_id_235>", |
| 239 | "<extra_id_236>", |
| 240 | "<extra_id_237>", |
| 241 | "<extra_id_238>", |
| 242 | "<extra_id_239>", |
| 243 | "<extra_id_240>", |
| 244 | "<extra_id_241>", |
| 245 | "<extra_id_242>", |
| 246 | "<extra_id_243>", |
| 247 | "<extra_id_244>", |
| 248 | "<extra_id_245>", |
| 249 | "<extra_id_246>", |
| 250 | "<extra_id_247>", |
| 251 | "<extra_id_248>", |
| 252 | "<extra_id_249>", |
| 253 | "<extra_id_250>", |
| 254 | "<extra_id_251>", |
| 255 | "<extra_id_252>", |
| 256 | "<extra_id_253>", |
| 257 | "<extra_id_254>", |
| 258 | "<extra_id_255>", |
| 259 | "<extra_id_256>", |
| 260 | "<extra_id_257>", |
| 261 | "<extra_id_258>", |
| 262 | "<extra_id_259>", |
| 263 | "<extra_id_260>", |
| 264 | "<extra_id_261>", |
| 265 | "<extra_id_262>", |
| 266 | "<extra_id_263>", |
| 267 | "<extra_id_264>", |
| 268 | "<extra_id_265>", |
| 269 | "<extra_id_266>", |
| 270 | "<extra_id_267>", |
| 271 | "<extra_id_268>", |
| 272 | "<extra_id_269>", |
| 273 | "<extra_id_270>", |
| 274 | "<extra_id_271>", |
| 275 | "<extra_id_272>", |
| 276 | "<extra_id_273>", |
| 277 | "<extra_id_274>", |
| 278 | "<extra_id_275>", |
| 279 | "<extra_id_276>", |
| 280 | "<extra_id_277>", |
| 281 | "<extra_id_278>", |
| 282 | "<extra_id_279>", |
| 283 | "<extra_id_280>", |
| 284 | "<extra_id_281>", |
| 285 | "<extra_id_282>", |
| 286 | "<extra_id_283>", |
| 287 | "<extra_id_284>", |
| 288 | "<extra_id_285>", |
| 289 | "<extra_id_286>", |
| 290 | "<extra_id_287>", |
| 291 | "<extra_id_288>", |
| 292 | "<extra_id_289>", |
| 293 | "<extra_id_290>", |
| 294 | "<extra_id_291>", |
| 295 | "<extra_id_292>", |
| 296 | "<extra_id_293>", |
| 297 | "<extra_id_294>", |
| 298 | "<extra_id_295>", |
| 299 | "<extra_id_296>", |
| 300 | "<extra_id_297>", |
| 301 | "<extra_id_298>", |
| 302 | "<extra_id_299>" |
| 303 | ], |
| 304 | "bos_token": "<s>", |
| 305 | "eos_token": "</s>", |
| 306 | "pad_token": "<pad>", |
| 307 | "unk_token": "<unk>" |
| 308 | } |
| 309 | |