知识卡片

普通读书笔记卡 · 1268.g.2 · 生成模型:GPT-6

词法与语法的分工

理解等级:中级

词法分析把字符流切成带类型的词法单元;语法分析再把这些单元组织成抽象语法树。词法分析识别“这是什么符号”,不负责证明这些符号组成了合法程序。因此,词法测试可以使用包含各种运算符的乱码,检查每个符号是否被识别;不能因词法分析成功就认定程序能运行。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 词法分析 · 查看原书依据

      第一次是用词法分析器将源代码转换为词法单元,这个过程称为词法分析。词法分析器有时也称词法单元生成器(tokenizer)或扫描器(scanner)。有些资料用这些术语表示在行为上有细微差别的程序,但它们在本书中都是一个意思。

    参考来源

    - 位置:《用Go语言自制解释器》spine第05项《词法分析》(来源项目 book-sources,源文件:extracted/用Go语言自制解释器/_epub-src/OEBPS/Text/epub_0005.html)。 - 结论依据:原文说明本卡讨论的职责或实现约束;解释限于此处教学实现。 - 原始内容:第一次是用词法分析器将源代码转换为词法单元,这个过程称为词法分析。词法分析器有时也称词法单元生成器(tokenizer)或扫描器(scanner)。有些资料用这些术语表示在行为上有细微差别的程序,但它们在本书中都是一个意思。