词法分析的实验报告.pdf

《词法分析的实验报告.pdf》由会员分享，可在线阅读，更多相关《词法分析的实验报告.pdf（12页珍藏版）》请在得力文库 - 分享文档赚钱的网站上搜索。

1、词法分析实验报告目录目录目录 错误错误!未定义书签。未定义书签。1 实验目的 错误错误!未定义书签。未定义书签。2 实验内容 错误错误!未定义书签。未定义书签。TINY 计算机语言描述 错误错误!未定义书签。未定义书签。实验要求 错误错误!未定义书签。未定义书签。3 此法分析器的程序实现 错误错误!未定义书签。未定义书签。状态转换图 错误错误!未定义书签。未定义书签。程序源码 错误错误!未定义书签。未定义书签。实验运行效果截图 错误错误!未定义书签。未定义书签。4 实验体会 错误错误!未定义书签。未定义书签。1 1 实验目的实验目的1、学会针对 DFA 转换图实现相应的高级语言源程序。2、深刻

2、领会状态转换图的含义，逐步理解有限自动机。3、掌握手工生成词法分析器的方法，了解词法分析器的内部工作原理。2 2 实验内容实验内容2.12.1 TINYTINY 计算机语言描述计算机语言描述TINY 计算机语言的编译程序的词法分析部分实现。从左到右扫描每行该语言源程序的符号，拼成单词，换成统一的内部表示（token）送给语法分析程序。为了简化程序的编写，有具体的要求如下：1、数仅仅是整数。2、空白符仅仅是空格、回车符、制表符。3、代码是自由格式。4、注释应放在花括号之内，并且不允许嵌套语言的单词语言的单词保留字保留字ifthenelseendrepeatuntil特殊符号特殊符号+-*/=数标

3、识符其他其他（一个或更多的字母）（一个或更多的数字）readwrite2.22.2 实验要求实验要求要求实现编译器的以下功能要求实现编译器的以下功能;1、按规则拼单词,并转换成二元式形式2、删除注释行3、删除空白符(空格、回车符、制表符)4、列表打印源程序，按照源程序的行打印，在每行的前面加上行号，并且打印出每行包含的记号的二元形式5、发现并定位错误词法分析进行具体的要求词法分析进行具体的要求1、记号的二元式形式中种类采用枚举方法定义；其中保留字和特殊字符是每个都一个种类，标示符自己是一类，数字是一类；单词的属性就是表示的字符串值。2、词法分析的具体功能实现是一个函数 GetToken()，每

4、次调用都对剩余的字符串分析得到一个单词或记号识别其种类，收集该记号的符号串属性，当识别一个单词完毕，采用返回值的形式返回符号的种类，同时采用程序变量的形式提供当前识别出记号的属性值。这样配合语法分析程序的分析需要的记号及其属性，生成一个语法树。3、标示符和保留字的词法构成相同，为了更好的实现，把语言的保留字建立一个表格存储，这样可以把保留字的识别放在标示符之后，用识别出的标示符对比该表格，如果存在该表格中则是保留字，否则是一般标示符。3 3 此法分析器的程序实现此法分析器的程序实现3.13.1 状态转换图状态转换图图 1 TINY 语言的确定有限自动机（DFA）3.23.2 程序源码程序源码#

5、includeusing namespace std;#include#include#includeclass CApublic:void getToken();.:/./.格式cout请输入源程序代码.cpp 文件的绝对路径：filename;ifstream infile(filename,ios:in);if(!infile)char ch;int count1=1;count2=0;cout第 count1 行;while(ch)buffer1count2+1=0;preDo(ch);coutch;/逐行打印出源程序if(ch=n)count1+;cout第 count1 行;cer

6、ropen error!endl;abort();coutendl;/对 buffer1 中的字符进行扫描getToken();();coutendl;cout符号表：;for(int i=0;im;i+)coutIDi ;coutendl;cout数字表：;for(int j=0;jn;j+)coutConsj ;coutendl;void CA:preDo(char c)char*p=buffer1;buffer10=#;/赋#给扫描缓冲区的第一个元素count2+;*(p+count2)=c;if(buffer1count2-1=)/删除注释else if(buffer1count2-1

7、=&c=)count2-;/若干相继的空白符结合成一个if(c=r)count2-;if(c=t)count2-;void CA:getToken()int n=1;cout第 1 行:;for(int i=1;istrlen(buffer1);i+)if(buffer1i=n)n+;coutn 第n行：;else if(isLetter(buffer1i)string tok=;tok+=buffer1i;while(isLetter(buffer1+i)tok+=buffer1i;if(c=)cout注释不允许嵌套!;/注释不允许嵌套if(c!=)count2-;else count2=c

8、ount2-2;int r=Search(K,(),8);i-;if(r!=-1)cout(关键字r+1,tok);/关键字编码elsecout(标识符,tok);/标识符编码 r=InsertID(char*)();else if(isDigit(buffer1i)else if(buffer1i=)elsestring tok=;string tok=;tok+=buffer1i;while(isDigit(buffer1+i)int y=InsertConst(char*)();cout(数字,tok);i-;/数字编码tok+=buffer1i;tok+=buffer1i;int q=

9、Search(K,(),18);if(q!=-1)cout(特殊符号,tok);elsecout非法符号!;/*main 函数*/int main()CA ca;();coutendl;return 0;3.33.3 实验运行效果截图实验运行效果截图4 4 实验体会实验体会本次实验是编译技术的第一次实验，按理说也应该是最简单的一次实验验，但是在具体的实现过程中还是遇到了这样或那样的问题，比如对原输入串进行分析的预处理是在注释的嵌套判断上出现了问题，调试了几次才发现是出现注释时计数值本来应该减 2 结果减了 1。类似的错误还有，但好在最后都解决了。除了提升了自己的动手能力外本次实验最大的收获应该是对词法分析器的运行机制有了更深入的理解了，再画状态转换的过程中也激发了我的一些关于那些复杂的语言（如 c+）的词法分析器是怎样书写的联想，希望在今后的学习实践中能有更深入的学习。最后感谢老师的悉心指导，谢谢老师！