Angielski ⇄ Japoński Niemiecki Rosyjski Ukraiński +

tokenizing rzecz. akcenty
progr.	маркирование (ssn); разбиение на лексемы (ssn); выделение лексем (ssn)
tokenize czas.
komp.	пометить; помечать; снабжать метками
progr.	маркировать (ssn); разбивать на лексемы (ssn); выделять лексемы (ssn)
tokenized czas.
technol.	размеченный

tokenizing : 5 do fraz, 2 tematyki

Microsoftu	1
Programowanie	4