深入浅出词法分析(正则表达式)

基本概念 词法分析器的主要任务:读入源程序的输入字符,将他们组成词素,生成并输出一个词法单元序列,每一个词法单元对应于一个词素。 词法分析器还要过滤源程序中的注释和空白和注释 还要将编译器生成的错误消息与源程序的位置联系起来 词法分析器将其转为token的序列,语法分析器每次从词法分析器获得一个token,对不同的token的处理也不同 token词法:带有附加信息的字符串 lexeme词素:单纯
相关文章
相关标签/搜索