詞法分析

詞法分析  是計算機科學中將字符序列轉換爲記號 （ token ） 序列的過程 。 進行詞法分析的程序或者函數叫作詞法分析器 （ lexical analyzer ， 簡稱lexer ） ， 也叫掃描器 （ scanner ） 。 詞法分析器一般以函數的形式存在 ， 供語法分析器調用 。