tokenpos возвращает положение лексем в символьной строке kdf = tokenpos(str [,delimiter]) str символьная строка. Строка в которой ищутся лексемы. delimiter (необязательный) символ или вектор символов. Разделители лексем. kdf матрица из двух столбцов; первый столбец даёт индекс начала лексемы, второй даёт индекс последнего символа лексемы. kdf = tokenpos(str [,delimiter]) ищет лексемы, содержащиеся в строке str. Значение разделителя delimiter по умолчанию [" ",<Tab>], где <Tab> стоит вместо ascii(9). Эта функция возвращает индексы первого и последнего символов каждой найденной лексемы. strindex tokens