usingの整理。
NUnitを導入
Tokenizerクラスを作成。
EndOfLine関数をリファクタリング。
WhiteSpace関数をリファクタリング。
BlockComment関数をリファクタリング。
LineCommnet関数をリファクタリング。
StringLiteral関数とBuiltInExpression関数をリファクタリング。
LetterStartString関数をリファクタリング。
DigitStartString関数をリファクタリング。
OtherString関数をリファクタリング。
XxxPunctuator関数をリファクタリング。
不要な関数を削除。
EndOfLine関数をLineTerminator関数にリネーム。
Lexerクラスに関数をまとめた。
usingの整理。
Lexerクラスをstatic化。
SyntacticAnalysisTestプロジェクトを作成。
TestCaseお試し。
TokenizerTestを作成。