tokenizer_config.json

{
  "tokenizer_class": "PaligemmaTokenizer",
  "max_len": 200,
  "auto_map": {
    "AutoTokenizer": ["tokenizer_pi05.PaligemmaTokenizer", null]
  }
}