12、词法分析与语法分析工具使用指南

词法分析与语法分析工具使用指南

1. 词法分析相关函数

在词法分析过程中，有几个重要的函数和宏，它们能帮助我们更灵活地处理输入和控制分析流程。

1.1 yymore() 函数

yymore()函数可以在规则关联的代码中调用，用于告诉词法分析器将下一个标记追加到当前标记之后。例如：

%% hyper yymore (); text printf("Token is %s\n", yytext);

如果输入字符串是hypertext，输出将是 “Token is hypertext.”。当使用正则表达式定义标记边界不方便或不切实际时，使用yymore()函数非常有用。

1.2 yyless() 函数

如果引号字符串在结束引号前以反斜杠结尾，会使用yyless()函数将结束引号推回，并使用yymore()函数告诉词法分析器将下一个标记追加到当前标记。调用yyless()与使用unput()推送字符具有相同的效果，但yyless()通常更快，因为它可以利用推回的字符与刚刚从输入中获取的字符相同这一事实。
yyless()的另一个用途是使用不同的起始状态规则重新处理标记：