{
"version": "1.0",
"truncation": null,
"padding": null,
"added_tokens": [
{
"id": 0,
"content": "",
"single_word": false,
"lstrip": false,
"rstrip": false,
"normalized": false,
"special": true
},
{
"id": 1,
"content": "",
"single_word": false,
"lstrip": false,
"rstrip": false,
"normalized": false,
"special": true
},
{
"id": 2,
"content": "",
"single_word": false,
"lstrip": false,
"rstrip": false,
"normalized": false,
"special": true
},
{
"id": 3,
"content": "",
"single_word": false,
"lstrip": false,
"rstrip": false,
"normalized": false,
"special": true
},
{
"id": 4,
"content": "",
"single_word": false,
"lstrip": false,
"rstrip": false,
"normalized": false,
"special": true
}
],
"normalizer": null,
"pre_tokenizer": {
"type": "ByteLevel",
"add_prefix_space": true,
"trim_offsets": true,
"use_regex": true
},
"post_processor": {
"type": "TemplateProcessing",
"single": [
{
"Sequence": {
"id": "A",
"type_id": 0
}
},
{
"SpecialToken": {
"id": "",
"type_id": 0
}
}
],
"pair": [
{
"Sequence": {
"id": "A",
"type_id": 0
}
},
{
"SpecialToken": {
"id": "",
"type_id": 0
}
},
{
"Sequence": {
"id": "B",
"type_id": 1
}
},
{
"SpecialToken": {
"id": "",
"type_id": 1
}
}
],
"special_tokens": {
"": {
"id": "",
"ids": [
1
],
"tokens": [
""
]
},
"": {
"id": "",
"ids": [
0
],
"tokens": [
""
]
}
}
},
"decoder": {
"type": "ByteLevel",
"add_prefix_space": true,
"trim_offsets": true,
"use_regex": true
},
"model": {
"type": "BPE",
"dropout": null,
"unk_token": "",
"continuing_subword_prefix": null,
"end_of_word_suffix": null,
"fuse_unk": false,
"byte_fallback": false,
"vocab": {
"": 0,
"": 1,
"": 2,
"": 3,
"": 4,
"!": 5,
"%": 6,
"'": 7,
"+": 8,
",": 9,
"-": 10,
".": 11,
"/": 12,
"0": 13,
"1": 14,
"2": 15,
"3": 16,
"4": 17,
"5": 18,
"6": 19,
"7": 20,
"8": 21,
"9": 22,
":": 23,
"?": 24,
"A": 25,
"B": 26,
"C": 27,
"D": 28,
"E": 29,
"F": 30,
"G": 31,
"H": 32,
"I": 33,
"J": 34,
"K": 35,
"L": 36,
"M": 37,
"N": 38,
"O": 39,
"P": 40,
"Q": 41,
"R": 42,
"S": 43,
"T": 44,
"U": 45,
"V": 46,
"W": 47,
"X": 48,
"Y": 49,
"Z": 50,
"a": 51,
"b": 52,
"c": 53,
"d": 54,
"e": 55,
"f": 56,
"g": 57,
"h": 58,
"i": 59,
"j": 60,
"k": 61,
"l": 62,
"m": 63,
"n": 64,
"o": 65,
"p": 66,
"q": 67,
"r": 68,
"s": 69,
"t": 70,
"u": 71,
"v": 72,
"w": 73,
"x": 74,
"y": 75,
"z": 76,
"¡": 77,
"¢": 78,
"£": 79,
"¤": 80,
"§": 81,
"¨": 82,
"©": 83,
"ª": 84,
"«": 85,
"¬": 86,
"®": 87,
"¯": 88,
"°": 89,
"±": 90,
"²": 91,
"³": 92,
"´": 93,
"µ": 94,
"¶": 95,
"¸": 96,
"º": 97,
"¼": 98,
"½": 99,
"¾": 100,
"Â": 101,
"Ã": 102,
"Ä": 103,
"Å": 104,
"È": 105,
"â": 106,
"Ġ": 107,
"Ģ": 108,
"ģ": 109,
"Ĥ": 110,
"ĥ": 111,
"Ħ": 112,
"ĩ": 113,
"ī": 114,
"Į": 115,
"į": 116,
"ķ": 117,
"ĸ": 118,
"ĺ": 119,
"Ļ": 120,
"Ľ": 121,
"ľ": 122,
"Ł": 123,
"ł": 124,
"Ń": 125,
"se": 126,
"Ġk": 127,
"st": 128,
"Ġ.": 129,
"Ġ,": 130,
"le": 131,
"Ġt": 132,
"Ġm": 133,
"ä": 134,
"Ġo": 135,
"õ": 136,
"Ġe": 137,
"id": 138,
"Ġv": 139,
"in": 140,
"Ġp": 141,
"ja": 142,
"Ġs": 143,
"da": 144,
"Ġse": 145,
"ma": 146,
"li": 147,
"me": 148,
"oo": 149,
"Ġn": 150,
"Ġa": 151,
"it": 152,
"Ġon": 153,
"is": 154,
"ü": 155,
"ga": 156,
"Ġja": 157,
"ud": 158,
"Ġme": 159,
"ks": 160,
"ra": 161,
"us": 162,
"va": 163,
"ta": 164,
"te": 165,
"ik": 166,
"Ġte": 167,
"Ġka": 168,
"ur": 169,
"Ġet": 170,
"en": 171,
"Ġva": 172,
"si": 173,
"la": 174,
"Ġko": 175,
"lle": 176,
"ust": 177,
"es": 178,
"aa": 179,
"õi": 180,
"lt": 181,
"ö": 182,
"pa": 183,
"mi": 184,
"use": 185,
"ri": 186,
"Ġh": 187,
"na": 188,
"ge": 189,
"gi": 190,
"Ġj": 191,
"ea": 192,
"ee": 193,
"Ġku": 194,
"ne": 195,
"Ġselle": 196,
"il": 197,
"lu": 198,
"ĠE": 199,
"Ġü": 200,
"de": 201,
"Ġole": 202,
"uroo": 203,
"Ġpa": 204,
"Ġsee": 205,
"uroopa": 206,
"Ġr": 207,
"ĠEuroopa": 208,
"Ġvä": 209,
"gu": 210,
"sta": 211,
"ine": 212,
"ku": 213,
"nd": 214,
"Ġei": 215,
"ii": 216,
"Ġta": 217,
"ida": 218,
"Ġpea": 219,
"ko": 220,
"Ġl": 221,
"ää": 222,
"ha": 223,
"Ġtu": 224,
"el": 225,
"vad": 226,
"ti": 227,
"ie": 228,
"Ġsi": 229,
"tud": 230,
"ni": 231,
"Ġma": 232,
"Ġsaa": 233,
"är": 234,
"nud": 235,
"Ġtä": 236,
"est": 237,
"öö": 238,
"sa": 239,
"ime": 240,
"Ġsu": 241,
"mise": 242,
"uta": 243,
"ide": 244,
"tsi": 245,
"Ġvõi": 246,
"stu": 247,
"Ġin": 248,
"Ġli": 249,
"Ġvõ": 250,
"Ġmis": 251,
"Ġra": 252,
"ro": 253,
"Ġkui": 254,
"tu": 255,
"lik": 256,
"ĠL": 257,
"Ġmeie": 258,
"ing": 259,
"lise": 260,
"ka": 261,
"Ġseda": 262,
"Ġkõ": 263,
"or": 264,
"he": 265,
"ita": 266,
"ba": 267,
"Ġna": 268,
"ste": 269,
"Ġar": 270,
"Ġju": 271,
"Ġto": 272,
"mis": 273,
"Ġtule": 274,
"Ġsõ": 275,
"Ġning": 276,
"Ġkes": 277,
"er": 278,
"hen": 279,
"Ġmeil": 280,
"Ġsa": 281,
"Ġvastu": 282,
"Ġnä": 283,
"di": 284,
"ĠLi": 285,
"tse": 286,
"üü": 287,
"õig": 288,
"uu": 289,
"Ġsiis": 290,
"Ġoma": 291,
"ts": 292,
"nda": 293,
"Ġaga": 294,
"Ġväga": 295,
"Ġsuur": 296,
"Ġkas": 297,
"Ġolu": 298,
"ul": 299,
"nna": 300,
"Ġpro": 301,
"Ġkõik": 302,
"ise": 303,
"tsioo": 304,
"ite": 305,
"ke": 306,
"Ġtege": 307,
"Ġpeame": 308,
"ju": 309,
"re": 310,
"usta": 311,
"Ġtaga": 312,
"Ġtöö": 313,
"ol": 314,
"al": 315,
"im": 316,
"uste": 317,
"kse": 318,
"Ġtõ": 319,
"usi": 320,
"mist": 321,
"üüd": 322,
"mine": 323,
"bi": 324,
"ära": 325,
"Ġüle": 326,
"riik": 327,
"Ġmida": 328,
"ki": 329,
"et": 330,
"liku": 331,
"idu": 332,
"Ġmõ": 333,
"Ġnüüd": 334,
"Ġne": 335,
"Ġnii": 336,
"Ġla": 337,
"äh": 338,
"Ġsel": 339,
"Ġvaja": 340,
"inu": 341,
"ĠP": 342,
"jo": 343,
"line": 344,
"Ġliik": 345,
"ina": 346,
"rd": 347,
"nik": 348,
"Ġsiin": 349,
"ht": 350,
"Ġkü": 351,
"Ġosa": 352,
"eg": 353,
"kt": 354,
"asta": 355,
"Ġ2": 356,
"Ġõig": 357,
"Ġnen": 358,
"used": 359,
"Ġaasta": 360,
"Ġal": 361,
"Ġvõima": 362,
"Ġlä": 363,
"Ġinime": 364,
"õh": 365,
"ema": 366,
"kra": 367,
"Ġmit": 368,
"Ġnende": 369,
"sed": 370,
"Ġjär": 371,
"Ġ?": 372,
"Ġpu": 373,
"eed": 374,
"õige": 375,
"Ġkon": 376,
"Ġrää": 377,
"ika": 378,
"itäh": 379,
"misjo": 380,
"Ġaitäh": 381,
"Ġliikme": 382,
"Ġette": 383,
"oli": 384,
"Ġol": 385,
"Ġüh": 386,
"aal": 387,
"Ġneed": 388,
"nu": 389,
"ar": 390,
"õp": 391,
"Ġselleks": 392,
"Ġtaha": 393,
"eta": 394,
"Ġ1": 395,
"Ġväl": 396,
"ist": 397,
"Ġtea": 398,
"Ġoleme": 399,
"rii": 400,
"ua": 401,
"tus": 402,
"Ġpal": 403,
"Ġloo": 404,
"mu": 405,
"Ġsõna": 406,
"Ġsoo": 407,
"mas": 408,
"ĠLiidu": 409,
"Ġkoo": 410,
"iga": 411,
"Ġpra": 412,
"lame": 413,
"Ġhää": 414,
"enda": 415,
"tte": 416,
"Ġtäna": 417,
"Ġkoh": 418,
"oliit": 419,
"rv": 420,
"Ġpoo": 421,
"por": 422,
"Ġvälja": 423,
"Ġkoda": 424,
"Ġmi": 425,
"ile": 426,
"Ġkolle": 427,
"Ġliikmes": 428,
"gia": 429,
"Ġhääle": 430,
"likult": 431,
"Ġlu": 432,
"Ġmuu": 433,
"võ": 434,
"res": 435,
"sim": 436,
"Ġhea": 437,
"Ġkodanik": 438,
"val": 439,
"Ġtuleb": 440,
"tuse": 441,
"ĠK": 442,
"Ġnad": 443,
"ĠV": 444,
"Ġneid": 445,
"tle": 446,
"dus": 447,
"Ġjä": 448,
"sti": 449,
"ĠS": 450,
"Ġde": 451,
"Ġlõp": 452,
"takse": 453,
"Ġkolleeg": 454,
"Ġmitte": 455,
"Ġle": 456,
"Ġeest": 457,
"Ġkä": 458,
"Ġoleks": 459,
"Ġjärg": 460,
"Ġsoov": 461,
"Ġkait": 462,
"Ġnime": 463,
"eel": 464,
"Ġkuida": 465,
"Ġro": 466,
"Ġnõ": 467,
"Ġpeaks": 468,
"Ġpõh": 469,
"konna": 470,
"tsioon": 471,
"ärast": 472,
"ĠA": 473,
"egu": 474,
"Ġu": 475,
"Ġküsim": 476,
"Ġkomisjo": 477,
"Ġkasuta": 478,
"list": 479,
"jand": 480,
"pane": 481,
"ru": 482,
"iden": 483,
"Ġf": 484,
"ndi": 485,
"ĠU": 486,
"sime": 487,
"Ġkuidas": 488,
"tsiooni": 489,
"iir": 490,
"mo": 491,
"Ġes": 492,
"henda": 493,
"kor": 494,
"Ġmil": 495,
"Ġkõige": 496,
"Ġminu": 497,
"Ġpuud": 498,
"selt": 499
},
"merges": [
"s e",
"Ġ k",
"s t",
"Ġ .",
"Ġ ,",
"l e",
"Ġ t",
"Ġ m",
"Ã ¤",
"Ġ o",
"Ã µ",
"Ġ e",
"i d",
"Ġ v",
"i n",
"Ġ p",
"j a",
"Ġ s",
"d a",
"Ġ se",
"m a",
"l i",
"m e",
"o o",
"Ġ n",
"Ġ a",
"i t",
"Ġo n",
"i s",
"Ã ¼",
"g a",
"Ġ ja",
"u d",
"Ġm e",
"k s",
"r a",
"u s",
"v a",
"t a",
"t e",
"i k",
"Ġt e",
"Ġk a",
"u r",
"Ġe t",
"e n",
"Ġv a",
"s i",
"l a",
"Ġk o",
"l le",
"u st",
"e s",
"a a",
"õ i",
"l t",
"Ã ¶",
"p a",
"m i",
"u se",
"r i",
"Ġ h",
"n a",
"g e",
"g i",
"Ġ j",
"e a",
"e e",
"Ġk u",
"n e",
"Ġse lle",
"i l",
"l u",
"Ġ E",
"Ġ ü",
"d e",
"Ġo le",
"ur oo",
"Ġp a",
"Ġse e",
"uroo pa",
"Ġ r",
"ĠE uroopa",
"Ġv ä",
"g u",
"st a",
"in e",
"k u",
"n d",
"Ġe i",
"i i",
"Ġt a",
"id a",
"Ġp ea",
"k o",
"Ġ l",
"ä ä",
"h a",
"Ġt u",
"e l",
"va d",
"t i",
"i e",
"Ġs i",
"t ud",
"n i",
"Ġm a",
"Ġs aa",
"ä r",
"n ud",
"Ġt ä",
"e st",
"ö ö",
"s a",
"i me",
"Ġs u",
"mi se",
"u ta",
"id e",
"t si",
"Ġv õi",
"st u",
"Ġ in",
"Ġ li",
"Ġv õ",
"Ġm is",
"Ġ ra",
"r o",
"Ġku i",
"t u",
"li k",
"Ġ L",
"Ġme ie",
"in g",
"li se",
"k a",
"Ġse da",
"Ġk õ",
"o r",
"h e",
"it a",
"b a",
"Ġn a",
"st e",
"Ġa r",
"Ġj u",
"Ġt o",
"m is",
"Ġtu le",
"Ġs õ",
"Ġn ing",
"Ġk es",
"e r",
"h en",
"Ġme il",
"Ġs a",
"Ġva stu",
"Ġn ä",
"d i",
"ĠL i",
"t se",
"ü ü",
"õi g",
"u u",
"Ġsi is",
"Ġo ma",
"t s",
"n da",
"Ġa ga",
"Ġvä ga",
"Ġsu ur",
"Ġka s",
"Ġo lu",
"u l",
"n na",
"Ġp ro",
"Ġkõ ik",
"i se",
"tsi oo",
"it e",
"k e",
"Ġte ge",
"Ġpea me",
"j u",
"r e",
"ust a",
"Ġta ga",
"Ġt öö",
"o l",
"a l",
"i m",
"ust e",
"k se",
"Ġt õ",
"us i",
"mi st",
"üü d",
"m ine",
"b i",
"ä ra",
"Ġü le",
"ri ik",
"Ġm ida",
"k i",
"e t",
"li ku",
"id u",
"Ġm õ",
"Ġn üüd",
"Ġn e",
"Ġn ii",
"Ġ la",
"ä h",
"Ġse l",
"Ġva ja",
"in u",
"Ġ P",
"j o",
"l ine",
"Ġli ik",
"in a",
"r d",
"n ik",
"Ġsi in",
"h t",
"Ġk ü",
"Ġo sa",
"e g",
"k t",
"a sta",
"Ġ 2",
"Ġ õig",
"Ġn en",
"use d",
"Ġa asta",
"Ġa l",
"Ġvõi ma",
"Ġl ä",
"Ġin ime",
"õ h",
"e ma",
"k ra",
"Ġm it",
"Ġnen de",
"se d",
"Ġj är",
"Ġ ?",
"Ġp u",
"ee d",
"õi ge",
"Ġko n",
"Ġr ää",
"ik a",
"it äh",
"mis jo",
"Ġa itäh",
"Ġliik me",
"Ġet te",
"o li",
"Ġo l",
"Ġü h",
"aa l",
"Ġn eed",
"n u",
"a r",
"õ p",
"Ġselle ks",
"Ġta ha",
"e ta",
"Ġ 1",
"Ġvä l",
"i st",
"Ġte a",
"Ġole me",
"ri i",
"u a",
"t us",
"Ġpa l",
"Ġl oo",
"m u",
"Ġsõ na",
"Ġs oo",
"ma s",
"ĠLi idu",
"Ġk oo",
"i ga",
"Ġp ra",
"la me",
"Ġh ää",
"en da",
"t te",
"Ġtä na",
"Ġko h",
"oli it",
"r v",
"Ġp oo",
"p or",
"Ġväl ja",
"Ġko da",
"Ġm i",
"i le",
"Ġko lle",
"Ġliikme s",
"gi a",
"Ġhää le",
"liku lt",
"Ġ lu",
"Ġm uu",
"v õ",
"r es",
"si m",
"Ġh ea",
"Ġkoda nik",
"va l",
"Ġtule b",
"t use",
"Ġ K",
"Ġna d",
"Ġ V",
"Ġne id",
"t le",
"d us",
"Ġj ä",
"st i",
"Ġ S",
"Ġ de",
"Ġl õp",
"ta kse",
"Ġkolle eg",
"Ġmit te",
"Ġ le",
"Ġe est",
"Ġk ä",
"Ġole ks",
"Ġjär g",
"Ġsoo v",
"Ġka it",
"Ġn ime",
"ee l",
"Ġku ida",
"Ġr o",
"Ġn õ",
"Ġpea ks",
"Ġp õh",
"ko nna",
"tsioo n",
"ära st",
"Ġ A",
"e gu",
"Ġ u",
"Ġkü sim",
"Ġko misjo",
"Ġkas uta",
"li st",
"ja nd",
"pa ne",
"r u",
"id en",
"Ġ f",
"nd i",
"Ġ U",
"si me",
"Ġkuida s",
"tsioo ni",
"ii r",
"m o",
"Ġe s",
"hen da",
"ko r",
"Ġm il",
"Ġk õige",
"Ġm inu",
"Ġpu ud",
"se lt"
]
}
}