YouTokenToMe: инструмент для быстрой токенизации текста от Команды ВКонтакте

vk.com/tech?w=wall-147415323_3421
Вот в этом видео рассказывают, например, чем он полезен для суммаризации. Конкретно BPE минуты с 13-й.