字句解析
計算機科学における字句解析 (じくかいせき、) とは、ある言語で書かれた文について、その文字の並びを解析し、言語的に意味のある最小の単位（トークン）に分解する処理のこと。