При создании компилятора токен - это то же самое, что и токен?

В конструкции компилятора, когда вы говорите о токенах, является ли токен таким же, как символ / просто еще одним термином для символа? После некоторого исследования я думаю, чтобы понять, что токен - это символ со ссылкой на таблицу символов, поэтому какой-то приписанный символ / символ с некоторой дополнительной информацией? Спасибо за любые разъяснения: -)