章节2：词法解析

词法解析

英语的句子是由多个单词组成，比如"i eat a fresh apple"，每一个单词都有对应的含义，除了含义还有词的性质，eat是动词，fresh是形容词，apple是名词。分析词的性质和内容就是词法解析。

词法单元

分析计算表达式"1+1" , "1"是数字 , "+"是加法运算符。词性和词的文本组合在一起叫词法单元。

词法单元包含两个部分，词性和词值。用程序语言表达词法单元Token(type=Number , value=1)。