лексический анализ первый этап анализа компилятором исходного текста программы при его трансляции. На этом этапе входной поток символов разбивается на элементарные слова и символы, именуемые лексическими единицами или токенами. Токены могут включать в себя ключевые слова, константы, идентификаторы, специальные символы и т.д. Смотри также: compiler, semantic analysis Синоним(ы): lexical scan, linear analysis, scanning
(Or "linear analysis", "scanning") The first stage of processing a language. The stream of characters making up the source program or other input is read one at a time and grouped into lexemes (or "tokens") - word-like pieces such as keywords, identifiers, literals and punctuation. The lexemes are then passed to the parser.