Lee ebe a n'okpuru ma zaa ajụjụ ahụ n'otu asụsụ ahụ dị ka ebe a: Ebe a: A na-akọwa akara ngosi mgbe mgbe site na okwu ndị a na-ahụkarị, nke onye na-emepụta ihe nyocha okwu dị ka lex na-aghọta. Ihe nyocha okwu (nke a na-emepụta na-akpaghị aka site na ngwá ọrụ dị ka lex, ma ọ bụ aka) na-agụ na iyi nke ihe odide, na-achọpụta lexemes na iyi ahụ, ma na-ekewa ha n'ime akara. A na-akpọ nke a tokenizing. Ọ bụrụ na lexer chọtara akara ngosi na-abaghị uru, ọ ga-akọ njehie. Ajụjụ: Gịnị ka ọ ga-ahụ ma ọ bụrụ na ọ kọọrọ njehie?
akara na-abaghị uru