# tokens

文字列のトークンを返す.

## 呼び出し手順

    T=tokens(str [,delimiter])

## パラメータ

str

  文字列. トークンを探す文字列.

delimiter

  (オプション) 文字または文字のベクトル. トークンデリミタ.

T

  みつかったトークンの列ベクトル

## 説明

`T=tokens(str [,delimiter])` は, 文字列`str`の中に含まれるトークンを探します. `delimiter`のデフォルト値は [" ",<Tab>]です. ただし, <Tab> は `ascii(9)`を意味します.

## 例

    tokens('This is a character string')

    tokens('SCI/demos/scicos','/')

    tokens('y=a+b*2',['=','+','*'])

## 参照

- strindex
- tokenpos