2.18 字符串令牌解析中“令牌”翻译不对

[umdreamer]

英文应该是token，这里应该是标记或者字符的意思。

参考：https://baike.baidu.com/item/Token/2615248?fr=aladdin
编译原理术语）
词法分析是计算机科学中将字符序列转换为标记（token）序列的过程。从输入字符流中生成标记的过程叫作标记化（tokenization），在这个过程中，词法分析器还会对标记进行分类。

[flyor2017]

哈哈哈，我也想提这个问题，token确实应该被翻译成编译原理中的标记/词法单元，而不是令牌。

[renzituo95]

这两天不上线了.有事给我发短信.回头见.!

[flyor2017]

收件成功。---------------------------------------------------------This is an automatic reply, confirming that your e-mail was received.Thank you