docoo
Token
Unidad básica que reconoce el compilador.

Que es un token y que no lo define el compilador o el interprete del lenguaje , una sucesión de caracteres puede ser un token valido en un compilador y no en otro.

Todos los compiladores ( o interpretes ) destinados a tratar un mismo lenguaje suelen tener las mismas reglas de tokens.

--