ソースコード - SourceCode次の3種類に限定。
空白文字 - WhiteSpace行終端 - EndOfLineファイル終端 - EndOfFileコメント - Commentトークン - Token識別子 - Identifier文字列リテラル - StringLiteral文字リテラル - CharacterLiteral整数リテラル - IntegerLiteral浮動小数点数リテラル - FloatLiteral予約語 - Keyword |