컴퓨터 프로그래밍 컴퓨터 프로그래밍

단어(토큰)종료 기호(terminal symbol) 정규 표현 * 토큰을 생성하지 않는 단어SKIP directiveSPECIAL_TOKEN directive 공백문자행 주석 * 특수 문자e.g. "==" * 일반 단어TOKEN directive 예약어식별자숫자 리터럴 * 구조를 포함한 단어MORE directive 블록 주석문자열 리터럴문자 리터럴SPECIAL_TOKEN : { } SPECIAL_TOKEN : { } MORE : { : IN_BLOCK_COMMENT } MORE : { } SPECIAL_TOKEN : { : DEFAULT } TOKEN : {| | | | | | | | | | | | | | | | | | | | | | | | | | | } TOKEN : {..