Analisador Lexico - algoritimo buffer 2 metades usando sentinela

Alguem ja implmentou esse algoritimo?Estou com dificuldades para criar o mesmo…Minha duvida é que não consigo ver a iteração entr a formação dos lexemes e o controle das sentinelas…