Token, Lexeme dan Praprosesor

Token merupakan jenis kata (pada masusia) atau elemen dasar bahasa komputer. token merupakan pemecahan dari sumber program yaitu penerjemah lexeme pada saat melakukan scenner.

Token mereprentasikan sebuah nama :

- identifier ( nama variabel, fungsi, tipe atau nama yang didefinisikan pemakai).

- keyword

- literal string

- operator

- label

- simbol tanda ( tanda kurung, koma, titik koma ).

Lexeme merupakan string masukan dari lexical analysis

Praprosesor merupakan program yang menangani modul yang terpisah saat melakukan bahasa sumber menjadi beberapa file dalam satu program.

• Twitter
• Facebook
• Google
• Tumblr
• Pinterest