TatarTokenizer

Tags

• tokenizer
• tatar-language
• wordpiece
• unigram
• bpe
• bbpe
• huggingface
• tt
• license:mit
• region:us