{ "add_bos_token": false, "add_eos_token": false, "add_prefix_space": false, "additional_special_tokens": [ "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "", "" ], "eos_token": { "__type": "AddedToken", "content": "", "lstrip": false, "normalized": true, "rstrip": false, "single_word": false }, "extra_ids": 125, "name_or_path": "models/bygpt5-small/de", "pad_token": { "__type": "AddedToken", "content": "", "lstrip": false, "normalized": true, "rstrip": false, "single_word": false }, "special_tokens_map_file": "/home/jbelouadi/.cache/huggingface/transformers/3715c3de7f5eda8f5c9274c55ea8e8632fe6e4cdfdf8e9066ae173b956cd9b80.063895353d5ef9e19a25220cb616c43abc5e84a2f11b1ffb71c29e097572a109", "tokenizer_class": "ByGPT5Tokenizer", "unk_token": { "__type": "AddedToken", "content": "", "lstrip": false, "normalized": true, "rstrip": false, "single_word": false } }