Токенизатор и оптимизатор промптов

Визуализатор токенов BPE и компрессор промптов для удаления лишних пробелов, вежливых фраз и снижения затрат на API.