Rịba ama amaokwu a dị n'okpuru ma zaa ajụjụ ahụ mgbe e mesịrị n'otu asụsụ ahụ dị ka amaokwu ahụ:  Passage: A na-akọwa akara ngosi mgbe mgbe site na okwu mgbe niile, nke onye na-emepụta ihe nyocha okwu dị ka lex ghọtara. Onye na-enyocha lexical (nke a na-emepụta na-akpaghị aka site na ngwá ọrụ dị ka lex, ma ọ bụ aka) na-agụ na iyi nke ihe odide, na-achọpụta lexemes na iyi ahụ, ma na-ekewa ha n'ime akara. A na-akpọ nke a tokenizing. Ọ bụrụ na lexer achọta akara ngosi na-abaghị uru, ọ ga-akọ akụkọ njehie.  Ajụjụ: Gịnị ka ọ ga-ahụ ma ọ bụrụ na ọ kọọ njehie?
akara na-abaghị uru