Англійська ⇄ Німецька Російська Українська Японська +

tokenized дієсл. наголоси
IT	размеченный
tokenize дієсл.
комп.	пометить; помечать; снабжать метками
прогр.	маркировать (ssn); разбивать на лексемы (ssn); выделять лексемы (ssn)

tokenized : 5 фраз в 3 тематиках

Майкрософт	1
Програмування	1
Штучний інтелект	3