原书出处
用Go语言自制解释器
5 词法分析
基于这些分析,现在来定义Token数据结构。它需要哪些字段呢?正如刚刚看到的,肯定需要一个类型属性,这样就可以区分“整数”和“右括号”这样不同的词法单元。然后还需要一个字段用于保存词法单元的字面量,以便后续步骤复用,比如对于表示数字的词法单元,这个字段能记录5或10这样的信息。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/用Go语言自制解释器/_epub-src/OEBPS/Text/epub_0005.html
EPUB SHA-256:54056bf4c7c546cf7d8c707a5eec5bb79a397295b967b52264228e0b0f64c30e