Analizador Lexico

Hola que tal amig@s programadores y gente con mucho tiempo libre y que de última hora anda buscando un analizador léxico… :s (espero si hayas llegado acá buscandoeso y no por buscar “Red Tube punto com“), pues resulta que en la clase de Traductores del profesor Ing. Armando Díaz Pérez, ya comenzamos a talachearle con laprogramación y pues lo primero que cruzo por nuestra mente pues “inge su…” lo hacemos con Tokens, bueno para ser más precisos con la función de StringTokenizer, pero elprofesor nos aconsejo no utilizarlo ya que después conforme vayamos avanzando se nos dificultará más y más, así que para no meternos en líos hubo que rehacer todo y conuna botella de tequila a lado, tres bolsas de “Totis”, y pura música de antro para no dormirnos, iniciamos el programa, según yo y mi cerebro que ya está chingando quese quiere ir a dormir el programa ya está bien
Éste analizador Léxico está programado en Java y reconoce: identificadores (variable), palabras reservadas, números,operadores, separadores, letra y dígito , y se crea con la intención de en un futuro poder desarrollar un compilador, la verdad no estoy del todo seguro que elprograma este bien o sea lo que pidió el profesor pero bueno el intento acá está o si quiera que sirva de mal ejemplo.
El código ya va comentado y sólo hace falta agregarsus operadores, separadores, palabras reservadas, y su archivo de entrada debera llamarse: “entrada_prueba_3.txt” (sin las comillas dobles) o cambiar en la línea 118el nombre establecido por el nombre de su archivo de entrada.
Cualquier duda, aclaración, consejo es bien recibido, saludos cordiales y espero les sirva de algo.