kmc-jp/Klang — pull request #57 by hatsusato (2014-10-01 07:29:11+00:00)
Title: lexerの実装を見直す

* `tokenize()`が処理を失敗したかどうかを取得したい
- ref #52
- `tuple`を返す
- `optional`を返す
* マッチ処理を文字列のコピーを作って行っているのを見直したい。
- `iterator`で走査する(トラックバックしたりする)
- `string_view`的なのを導入する。