Tokenizer și Reductor de Tokeni pentru Prompte

Vizualizator de tokeni BPE și compresor de prompte pentru eliminarea spațiilor inutile și reducerea costurilor API.