在编译器词法分析器(或扫描器)中:读取输入流并将源文本的字符融合为语言的标记。 令牌:具有集体意义的字符序列。形成标记的字符序列称为Lexeme。
这个例子可能有帮助
考虑下面的赋值语句
newvalue = oldvalue + rate * 60
词法分析器将生成以下标记。
令牌词位 标识符新值 分配操作 = 标识符旧值 插件 + 识别率 穆洛普 * 6号
| 归档时间: |
|
| 查看次数: |
30224 次 |
| 最近记录: |