Daftar Isi:
Definisi - Apa arti Analisis Leksikal?
Analisis leksikal adalah konsep yang diterapkan pada ilmu komputer dengan cara yang sangat mirip dengan yang diterapkan pada linguistik. Pada dasarnya, analisis leksikal berarti mengelompokkan aliran huruf atau suara ke dalam set unit yang mewakili sintaksis yang bermakna. Dalam linguistik, itu disebut parsing, dan dalam ilmu komputer, itu bisa disebut parsing atau tokenizing.
Techopedia menjelaskan Analisis Leksikal
Gagasan analisis leksikal dalam ilmu komputer adalah bahwa analisis leksikal memecah aliran menjadi “leksem” di mana token mewakili unit dasar makna. Token dirangkai sedemikian rupa sehingga kompiler bahasa harus kembali dan mengisolasinya untuk menerapkan instruksi komputasi yang tepat. Pada dasarnya, baik manusia dan komputer melakukan analisis leksikal, tetapi komputer melakukannya secara berbeda, dan dengan cara yang jauh lebih teknis. Cara komputer melakukan analisis leksikal tidak perlu transparan bagi manusia - hanya saja harus diprogram ke dalam sistem komputasi. Program yang melakukan analisis leksikal dalam ilmu komputer sering disebut lexer, tokenizer atau scanner.
