Análise léxica

A análise léxica é um processo de redução do texto a um conjunto de palavras, frases e parágrafos distintos.