当前位置:  开发笔记 > 编程语言 > 正文

无法识别Lex中的单行注释

如何解决《无法识别Lex中的单行注释》经验,为你挑选了1个好方法。

我在这个过程中学习lex,我正在为C语言生成令牌,并且我试图识别单行注释"//",但是我与分区运算符有冲突

[1-9][0-9]*|0x[0-9a-fA-F][0-9a-fA-F]*           return NUMBER;
[a-zA-Z][a-zA-Z0-9]*                            return IDENT;
/                                               {return DIVIDE;}

[ \t\r\n]
[//]

但是当我运行示例并输入//它将它们识别为2个分区运算符时.我应该在哪里修改代码.有什么建议.

编辑:

Lex代码:

%{
#include "y.tab.h"
%}
%array
%%
if                                              {return IF;}
while                                           {return WHILE;}
else                                            {return ELSE;}
int                                             {return INT;}
return                                          {return RETURN;}
\/\/[^\r\n]*
[1-9][0-9]*|0x[0-9a-fA-F][0-9a-fA-F]*           return NUMBER;
[a-zA-Z][a-zA-Z0-9]*                            return IDENT;

[+]                                             {return ADD;}
[-]                                             {return SUB;}
[<]                                             {return LESS;}
[>]                                             {return GREAT;}
[*]                                             {return MULT;}
[/]                                             {return DIVIDE;}
[;]                                             {return SEMICOLON;}

\{                                              return LBRACE;
\}                                              return RBRACE;

[ \t\r\n]

\(                                              return LPAREN;

\)                                              return RPAREN;

.                                               return BADCHAR;
%%

以下是我使用的头文件

typedef enum {END=0, WHILE, IF, ELSE,RETURN, IDENT, LPAREN, RPAREN,INT,LBRACE,RBRACE, SEMICOLON, EQUALITY, DIVIDE, MULT, LESS, GREAT,
 ADD, SUB, NUMBER,BADCHAR} Token;

以下是输入运行,

//
/
p
Token 16, text /
Token 16, text /
Token 16, text /
Token 5, text p

在运行它时,会消耗注释,甚至会忽略除法运算符.但是检查何时进入p,它会对上面列出的运算符进行分类,而不应该对其进行分类.

Note: Am trying to ignore tabs, newline characters and single line comments. 

Note 2: \/\/[^\r\n]* I have understood where I committed the mistake and wanted to share this.

danben.. 6

根据Lex手册:

用Lex编写的词法分析程序接受模糊规范,并在每个输入点选择最长匹配.如有必要,对输入执行实质性前瞻,但输入流将备份到当前分区的末尾,以便用户可以自由地操作它.

所以你不需要做任何特殊的事情 - ///它更长的时候,当它看到两个时,它会更喜欢对除法运算符的评论.但是,您没有发布评论规则 - 它在哪里?

编辑:没关系,我明白了. [//]是一个角色类.取下方括号.此外,您将希望匹配行的结尾 - 否则您将只允许空注释.所以你的正则表达式应该是这样的:

//[^\r\n]*\r\n(根据需要调整你支持的换行符 - 这个要求换行符正好\r\n).

编辑2:@ tur1ng带来了一个好点 - 文件中的最后一行可能不会以换行结束.我查了一下,Lex也支持<>它的正则表达式(参见http://pltplp.net/lex-yacc/lex.html.en).所以你可以改为:

//[^\r\n]*((\r\n)|<>)



1> danben..:

根据Lex手册:

用Lex编写的词法分析程序接受模糊规范,并在每个输入点选择最长匹配.如有必要,对输入执行实质性前瞻,但输入流将备份到当前分区的末尾,以便用户可以自由地操作它.

所以你不需要做任何特殊的事情 - ///它更长的时候,当它看到两个时,它会更喜欢对除法运算符的评论.但是,您没有发布评论规则 - 它在哪里?

编辑:没关系,我明白了. [//]是一个角色类.取下方括号.此外,您将希望匹配行的结尾 - 否则您将只允许空注释.所以你的正则表达式应该是这样的:

//[^\r\n]*\r\n(根据需要调整你支持的换行符 - 这个要求换行符正好\r\n).

编辑2:@ tur1ng带来了一个好点 - 文件中的最后一行可能不会以换行结束.我查了一下,Lex也支持<>它的正则表达式(参见http://pltplp.net/lex-yacc/lex.html.en).所以你可以改为:

//[^\r\n]*((\r\n)|<>)

推荐阅读
周扒pi
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有