Funciones del analizador lxico

Mediante un autmata finito que nos permita identificar el patrn de transicin

entre los caracteres de entrada, generando tokens, que posteriormente sern
clasificados.

Tabla de tokens
Int a=3+2;
id
1

Token
TipoDato
identificador
operador
valor
Conector de fuga

Lexema
a
=
3+2
;

Atributo