知识卡片
扫描游标的推进约定
扫描器必须明确辅助函数返回时停在哪里。Monkey 的 readIdentifier 和 readNumber 会持续推进,直到当前字符已经不是该词法单元的一部分;所以 NextToken 应直接返回,不能再执行结尾的统一前移,否则会漏掉紧跟的分号或运算符。反之,单字符分支尚未消费下一个字符,需要统一前移。组合扫描函数时,返回位置约定比“每次都前移”更可靠。readNumber 连续读取数字字符,但本章只覆盖整数,浮点数、十六进制数与八进制数没有完整实现;不能把通用数值语法归给这个扫描器。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 词法分析 · 查看原书依据
这里需要用return tok语句提前退出,因为在调用readIdentifier()时会重复调用readChar(),并将readPosition和position字段前移到当前标识符的最后一个字符之后,所以无须在后续的switch语句中再次调用readChar()。
参考来源
- 位置:《用Go语言自制解释器》spine第05项《词法分析》(来源项目 book-sources,源文件:extracted/用Go语言自制解释器/_epub-src/OEBPS/Text/epub_0005.html)。
- 结论依据:原文说明本卡讨论的职责或实现约束;解释限于此处教学实现。
- 原始内容:这里需要用return tok语句提前退出,因为在调用readIdentifier()时会重复调用readChar(),并将readPosition和position字段前移到当前标识符的最后一个字符之后,所以无须在后续的switch语句中再次调用readChar()。