Лексема - это минимальный набор символов, который интерпретирует компилятор. Ну, например, оператор while это лексема. Встречая её компилятор знает, что нужно делать и какой машинный код нужно подставлять вместо нее. C++ признает следующие лексемы:

• идентификаторы
• ключевые слова
• операторы
• разделители
• символы пунктуации

Лексемы обычно разделяются пустым пространством. Пустым пространством может быть:

• Табуляция
• Пробел
• Перевод строки
• Коментарии