该词法分析器可以识别中文,使用了少量的C++的知识,大部分是C语言的知识,采用的每次读取单个字符的方式