解析英语句子的例子

例如,在句子中:

那蛋糕非常好吃。

英语语言的规则将使蛋糕一个名词极端副词修饰的*形容词*不错,并通过这种分析的含义可以理解。

然而,这种分析依赖于我们认识到所使用的符号序列是单词。如果我们不熟悉使用的字符,我们就无法做到这一点。如果我们使用不熟悉的符号(例如中文)遇到句子,则以这种方式解析可能会很困难。这是一个中文句子的例子:

我可以写一点儿中文。

对于没有阅读中文字符的人来说,不清楚哪些符号组合形成单词。处理英语或中文时计算机算法也是如此。

因此,必须通过称为词法分析扫描的过程来进行解析,其中将各个字符组合在一起形成识别的符号,我们通常可以将其称为单词,但在解析算法中称为标记