Pok-9-wyk-Slajd22
Tokeny
Wróćmy jeszcze na chwilę do analizatora leksykalnego. Plik specyfikacji, który utworzyliśmy nie wykrywał błędów na poziomie leksykalnym. Jeśli więc na wejściu pojawił się inny znak niż nawias, to był on przekazywany jako symbol do analizatora składniowego i tam powodował błąd składniowy.
Wprowadzimy więc do specyfikacji programu LEX dwa symbole leksykalne: LEWY oraz PRAWY. Będą one związane odpowiednio z nawiasem otwierającym oraz nawiasem zamykającym. Jeśli na wejściu pojawi się jakikolwiek inny znak, analizator leksykalny będzie sygnalizował wystąpienie błędu.
Abyśmy mogli użyć w pliku specyfikacji dla programu LEX nowych symboli leksykalnych musimy je najpierw zadeklarować w specyfikacji dla programu YACC. Słowo kluczowe %token służy do deklaracji symboli leksykalnych. Aby program działał poprawnie modyfikujemy również gramatykę zastępując symbole nawiasów symbolami LEWY oraz PRAWY.
Po dokonaniu tych zmian nasz program jest gotowy do użycia.
