tokenize abbr. | |
comp. | пометить; помечать; снабжать метками |
progr. | маркировать; разбивать на лексемы; выделять лексемы |
tokenized abbr. | |
IT | размеченный |
A string abbr. | |
gen. | струна "ля" |
tokenizing : 5 phrases in 2 subjects |
Microsoft | 1 |
Programming | 4 |