jjryu 2013. 7. 16. 18:47

단어(토큰)

종료 기호(terminal symbol)


정규 표현


* 토큰을 생성하지 않는 단어

SKIP directive

SPECIAL_TOKEN directive


공백문자

행 주석


* 특수 문자

e.g. "=="


* 일반 단어

TOKEN directive


예약어

식별자

숫자 리터럴


* 구조를 포함한 단어

MORE directive


블록 주석

문자열 리터럴

문자 리터럴