我先來
lexeme vs token
lexeme 是由一個以上character組成的字串
而 token 則是在 lexical analysis後 對lexeme 給的一個性質
通常包括 token name 和 attribute value(不一定有)
舉例
lexemes: pi = 3.1416 ;
tokens: ID ASSIGN FLOAT-LIT SEMI-COL
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 203.70.51.7