编译原理实验课做的词法分析器，包含整个实验的说明文档，标识符转换表，测试用例，可执行程序，还有源代码

java编写编译原理实验一：词法分析器，可以直接完美运行

1.实验目的………………………………………………………………1 2.实验要求 2.1 待分析的简单语言的词法……………………………………1 2.2 各种单词符号对应的种别码…………………………………1 2.3 词法分析程序的功能…………………………………………1 3.词法分析程序的算法思想 3.1 主程序示意图…………………………………………………2 3.2 扫描子程序的算法思想………………………………………2 4.源代码…………………………………………………………………2 5.程序运行结果…………………………………………………………6 6.心得体会………………………………………………………………7 7.附录……………………………………………………………………7

很好的编译原理的词法分析程序，c语言编写，压缩包里面有实验的报告和代码的源程序，讲的很详细。

编译原理课程设计 词法分析器 java版 题目要求：把关键字、算符、界符称为语言固有的单词，标识符、常量称为用户自定义的单词。为此设置三个全程量：SYM,ID,NUM 。 SYM：存放每个单词的类别，为内部编码的表示形式。 ID：存放用户所定义的标识符的值，即标识符字符串的机内表示。 NUM：存放用户定义的数。 GETSYM要完成的任务： 1. 滤掉单词间的空格。 2. 识别关键字，用查关键字表的方法识别。当单词是关键字时，将对应的类别放在SYM中。如IF的类别为IFSYM，THEN的类别为THENSYM。 3. 识别标识符，标识符的类别为IDENT，IDRNT放在SYM中，标识符本身的值放在ID中。关键字或标识符的最大长度是10。 4. 拼数，将数的类别NUMBER放在SYM中，数本身的值放在NUM中。 5. 拼由两个字符组成的运算符，如：>=、<=等等，识别后将类别存放在SYM中。 6. 打印源程序，边读入字符边打印。 由于一个单词是由一个或多个字符组成的，所以在词法分析程序GETSYM中定义一个读字符过程GETCH。

较复杂的词法分析器，编译原理 词法分析器 C++

编译原理 词法分析器 C++，注释很详细

1）对文法进行消除左递归等改造。对改造后的文法,求各非终结符follow集和first集,以验证其是LL(1) 的。 2）结合词法分析器(需在词法分析器中加入识别关键字float的部分,设置其单词种别编码为26)，构造递归下降分析程序。

本书中c程序均在Turbo c 2.0下调试通过。 源程序的输入和扫描 词法分析 递归下降分析法　LL（1）分析法　算符优先法处理算术表达式与赋值语句　逆波兰式的产生及计算　LR（1）分析法 实验报告样例 词法分析器生成工具FLEX简介 语法分析器生成工具YACC

python实现手工编写的简易词法分析器，主要目的是提供一个词法分析器框架，有详细的函数分析。可以通过这个简易的词法分析器完善成为一个更详细的词法分析器。