Англійська ⇄ Німецька Російська Українська Японська +

tokenizing імен. наголоси
прогр.	маркирование (ssn); разбиение на лексемы (ssn); выделение лексем (ssn)
tokenize дієсл.
комп.	пометить; помечать; снабжать метками
прогр.	маркировать (ssn); разбивать на лексемы (ssn); выделять лексемы (ssn)
tokenized дієсл.
IT	размеченный

tokenizing : 5 фраз в 2 тематиках

Майкрософт	1
Програмування	4