אנגלית ⇄ אוקראינית גרמנית יפנית רוסית +

tokenizing נ מתח
.תִכנו	маркирование (ssn); разбиение на лексемы (ssn); выделение лексем (ssn)
tokenize v
.תִכנו	маркировать (ssn); разбивать на лексемы (ssn); выделять лексемы (ssn)
מחש.	пометить; помечать; снабжать метками
tokenized v
.טכנול	размеченный

tokenizing : 5 צירופים, 2 נושאים

מיקרוסופט	1
תִכנוּת	4