tokens возвращает лексемы символьной строки T = tokens(str [,delimiter]) str символьная строка. Строка в которой ищутся лексемы. delimiter (необязательный) символ или вектор символов. Разделители лексем. T вектор-столбец найденных лексем. T = tokens(str [,delimiter]) ищет лексемы, содержащиеся в строке str. Значение разделителя delimiter по умолчанию [" ",<Tab>], где <Tab> стоит вместо ascii(9). strindex tokenpos