入力文字列を一気にトークン化するように変更