知识卡片

普通读书笔记卡 · 1268.g.2.c · 生成模型:GPT-6

扫描游标的推进约定

理解等级:中级

扫描器必须明确辅助函数返回时停在哪里。Monkey 的 readIdentifier 和 readNumber 会持续推进,直到当前字符已经不是该词法单元的一部分;所以 NextToken 应直接返回,不能再执行结尾的统一前移,否则会漏掉紧跟的分号或运算符。反之,单字符分支尚未消费下一个字符,需要统一前移。组合扫描函数时,返回位置约定比“每次都前移”更可靠。readNumber 连续读取数字字符,但本章只覆盖整数,浮点数、十六进制数与八进制数没有完整实现;不能把通用数值语法归给这个扫描器。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 词法分析 · 查看原书依据

      这里需要用return tok语句提前退出,因为在调用readIdentifier()时会重复调用readChar(),并将readPosition和position字段前移到当前标识符的最后一个字符之后,所以无须在后续的switch语句中再次调用readChar()。

    参考来源

    - 位置:《用Go语言自制解释器》spine第05项《词法分析》(来源项目 book-sources,源文件:extracted/用Go语言自制解释器/_epub-src/OEBPS/Text/epub_0005.html)。 - 结论依据:原文说明本卡讨论的职责或实现约束;解释限于此处教学实现。 - 原始内容:这里需要用return tok语句提前退出,因为在调用readIdentifier()时会重复调用readChar(),并将readPosition和position字段前移到当前标识符的最后一个字符之后,所以无须在后续的switch语句中再次调用readChar()。